IsilonianTech 第24回 Search & Recover for PowerScale

いつも本ブログをご覧頂きましてありがとうございます。今回はSuperna社のSearch & Recoverについてご紹介いたします。
Search & Recoverは、ひとことで言うとPowerScaleに格納されている非構造化データに対して高速検索を提供するソフトウェアです。

PowerScaleは大量の非構造化データをシンプルに管理することを得意としている製品であるため、数十億ものファイルを格納されているケースが多く存在します。企業がイノベーションを成功させるためには蓄積したデータの活用や分析を迅速に行う必要がありますが、従来型の検索の仕組みではインデックス作成の観点からPowerScale上の数十億ものファイルを検索することは困難でした。
Search & Recoverは、ファイルのメタデータとコンテンツ（ファイル内のテキストデータ）をインデックス化し、ユーザに対して様々な視点での検索を提供します。また、日々蓄積されていく非構造化データに対して、PowerScaleのchangelist APIを用いて前回との差分を抽出してインデックスを再作成しますので、フルスキャンを行うことなく効率の良いインデックス化を実現しています。

　　　　　　<コンテンツのインデックスはMicrosoft Officeファイルを中心に1000以上のファイルタイプに対応しています。>

Search & Recoverのユースケースは様々ですが、海外の製造業の事例ではPowerScaleに何百万枚もの画像を保存しており、以前はPCから特定の日付と場所に撮影された目的の画像を検索していました。画像ファイルの数が非常に多く検索に10時間以上かかるため夜間に検索を行い翌朝に結果を確認する運用をしていましたが、翌朝出社しても思うような検索結果が出ておらず再実行が必要になることも多々ありました。Search & Recoverの採用後はPowerScale上のすべての画像ファイルにファイル名、作成日時、更新日時などのインデックスを効率的に作成することができたため、現在では数分以内に結果を得ることが出来ているとのことです。

今回は、現時点（2022年8月26日）で最新版であるSearch & Recover 1.1.8（最小の4VM構成）とOneFS 9.4（シミュレータ）を構築してテストしました。Search & RecoverはPowerScaleに格納されているファイル数（メタデータやコンテンツのインデックスの量）によってSearch & RecoverのVMのスペックおよび台数が異なります。

1.検索機能（Search）

はじめに基本的な検索の機能についてご紹介します。Search & Recoverにログインするとインターネットの検索エンジンのような下記の画面が表示されます。中央にある検索ボックスに検索したい文字列を入力すると条件に該当したファイルの一覧が表示されます。なお、空白の状態で"Enter"キーを押すと全てのファイル一覧が表示されます。

1.1メタデータおよびコンテンツのインデックス検索

ファイルのメタデータを条件にして検索を行う場合は、検索ボックスの右側にある「∨」アイコンをクリックすると下記のようなメタデータの条件を入力する画面がポップアップします。ファイル名やコンテンツ、ファイルサイズ、各種タイムスタンプなどを条件で指定してファイルを検索することができます。

他の製品には無い特長を1つ挙げると、Search & RecoverではCloudPoolsによってECSやパブリッククラウドへアーカイブされたファイルの状態（SmartLinkedか否か）をメタデータとして保持しているため、ファイルがPowerScale内に存在しているかCloudPools先のストレージにアーカイブされているかを判断することができます。「Cloudpool Status: Archived」にチェックを入れて検索することによりアーカイブ済みのファイルの検索や一覧を表示することが可能です。
また、ファイルだけでなくフォルダも検索対象となりますので条件を指定して該当のフォルダを特定したり、PowerScaleに存在する全てのフォルダの一覧を表示することもできます。さらに、Search & Recoverは自動タグ付けにも対応しております。定義した条件でタグが自動的に付与されたファイルは「Classification」から該当のタグを指定することによりファイルを検索することができます。

下記は、ファイル名に"onefs"を含んでいる"5MB以下"の"PDF"ファイルを検索した例です。検索は非常に高速で1秒かからずに表示されます。ファイルを選択して右クリックすることによりファイルのパスのコピーやメタデータの詳細情報を表示することができます。

1.2 ユーザ単位のアクセス制御

PowerScaleにアクセス権のあるWindows Active Directoryのユーザは、Search & Recoverはログオンすることができます。その際、ログインしたユーザの共有権限に従いアクセス権のあるファイルのみが検索対象となりますのでユーザに権限のないファイルが表示される心配はありません。

下記はyasui（yasui@coffee.local）でログインして全ファイルを検索した際のスクリーンショットですが、検索の結果1348個のファイルがヒットしました。

一方、user1（user1@coffee.local）でログインして全ファイルを検索すると、下記のとおり結果は1090個とyasuiと比べて少ないのが確認できます。（user1はyasuiに比べてアクセス可能な共有が限定されています。）

2.ファイル復旧機能（Recover）

続いて、Search & Recoverの"Recover"部分のご紹介となります。Search & RecoverではPowerScaleのスナップショットをインデックス化することで、ユーザにスナップショットデータの検索とファイルの復旧を提供します。PowerScaleは標準でWindowsのVSSと連携できますので、探しているファイルのパス（親フォルダ）がわかれば"以前のバージョン"から当たりを付けて復旧することも可能ですが、Search & Recoverのファイル復旧機能は保存していたファイルのパスがわからない場合や、ユーザからの問い合わせ（幾つかのキーワード）を頼りに管理者が復旧する際に便利です。ユーザや管理者はSearch & Recoverの画面から直接ファイルを復旧することができます。

スナップショットから検索する場合は「Search Previous Versions」にチェックを入れます。あとは先程（1.1 メタデータおよびコンテンツのインデックス検索）と同様に検索条件を入力して該当のファイルを探します。今回は、"h18808-cp-uds-cyber-protection-recovery-bdm-deck.pptx"をスナップショットから検索して復旧してみます。

下記のとおり、メタデータの検索画面に"Search Previous Versions"、ファイル名に"cyber"、拡張子に"pptx"を指定して検索したところ幾つかファイルが表示されましたので、該当ファイルを右クリックして「Recover File」を選択します。

スナップショット内からファイルを復旧する旨のメッセージが表示されますので、内容を確認後「Recover」を選択します。

「Recover」を選択して少し待つと復旧が完了します。復旧が完了すると下記のように"Success"の表示とともに該当ファイルが復旧されたことが確認できます。下記のメッセージに記載がありますが、復旧されたファイル名は[igls-restored]という接頭辞と[スナップショット名（今回は、20220826_Snapshot_test2）]が元のファイル名に追加されます。よって、今回は"igls-restored-20220826_Snapshot_test2-h18808-cp-uds-cyber-protection-recovery-bdm-deck.pptx"というファイル名で元の場所に復旧されました。