アルゴンヌのチーム、Globusファイル転送の記録を樹立

Oliver Peckham

アルゴンヌ国立研究所の科学者チームは、研究プロジェクトのため驚異的な2.9ペタバイトのデータ転送を行い、データ転送記録を破った。

その3つの大きな宇宙論的シミュレーションに関するデータは、Oak Ridge Leadership Computing Facility（OLCF）のスーパーコンピュータ「Summit」で生成され、保存された。サミットは現在、約149 Linpackペタフロップスの記録で、トップ500リストにおいて世界最速のスーパーコンピュータである。

アルゴンヌの物理学者であり、プロジェクトの主任研究員を務めるKatrin Heitmann博士は、次のように述べている。「私たちは、Summitで3つの異なるシミュレーションを実行し（各シミュレーションで2-3PBのファイル転送が行われました）、宇宙の構成に関する3つの異なるシナリオをモデル化しました。」「私たちは、基礎となるモデルをわずかに変更したときの宇宙における物質の分布の微妙な違いを理解しようとしています。」

この野望に満ちたプロジェクトでは、Heitmannが「貴重」と呼ぶ時間のかかるデータ分析を必要としていたが、コンピュータセンターが要望しているデータ削除のスピードに遅れないような速さでのデータ分析ができないというように、このシミュレーションには大きな問題があった、と彼女は説明している。これはディスクからテープへの転送の問題で、ディスク障害に備えて両方にデータを保持しているのだが、必要に応じてそれを削除して新しい解析作業のためのスペースを確保することができるのだ。

チームは研究データ管理サービス「Globus」を使ってファイル転送を行った。もともと1997年にグリッドコンピューティングを可能にするために開発されたこのGlobusを使用すると、加入者は単一のインターフェイスを使用してデータを移動、共有、発掘に加えて、開発者はアプリケーションやゲートウェイを構築できる。チームは「スピード、信頼性、そして使いやすさ」のためにGlobusを選択したとHeitmannは述べた。

「Globusの実装は非常に便利です」と彼女は説明した。「たとえば、自分の資格の有効期限が切れることを通知してくれるので、基本的に仕事を中断させられることがありません。また、Globusインターフェイスは使いやすく、優れた監視用インターフェイスを備えており（私がオフィスに到着して最初にするのはコーヒーを飲むこと、非常に多くの場合、2番目にすることは転送でチェックインすることです）、チェックサムであるため、私は完全に頼っています。さらに、この作業は、OLCFの優れたデータ転送ノードの設定なしには不可能であり、HPSS転送にGlobusを使用することを可能にしています。」

「私たちは、科学者が世界を変える仕事をするのを手助けする、という私たちの役割に誇りを持つことができませんでした」Globusの共同創設者であり、アルゴンヌのデータサイエンスおよびラーニング部門のディレクターを務めるIan Fosterは述べた。「私たちは、このようなプロジェクトによって、Globusのさらなる可能性を押し広げ続けていることを嬉しく思います。Heitmann博士とそのチーム、おめでとうございます。」

オリジナルリリースを読むには、ここをクリックしてください。 GlobusによるHeitmann博士へのインタビューを読むには、ここをクリックしてください。