米国郵政公社における高度解析用HPC

Steve Conway, Research Vice President in IDC’s High Performance Computing Group

今日、米国郵政公社は各世代において前システムより能力が高い、第三世代のスーパーコンピュータにある。IDCは、この郵政公社のHPCの抱え込みが重要なITトレンドの加速を例示するものだと考えている:民間部門と公共部門における先導的な機関が、従来の企業IT技術だけでは効率的に処理することができない挑戦的なビッグデータ解析のワークロードに取り組むために、益々ハイパフォーマンス・コンピューティングに変わってきていることだ。

郵政公社の事例の履歴は有益である。郵政公社が利用する各HPC世代はSGI UVスーパーコンピュータベースのものであり、主契約者であるメリーランド州チェビーチェイスがベースのFedCentricテクノロジー社が提供している。主にその大規模で最大64TBまでスケールするように設計されたNUMA共有メモリ空間によって、このSGI UVシステムは卓越している。この例ではアーキテクチャが重要なのだ。

メモリ全体内で非常に大規模なデータ問題を処理する能力は、3倍から6倍のオーダーの性能向上ができると郵政公社はレポートしている。逆に、データを共有メモリ外で処理する場合には大幅に性能がカットされることとなる – データをあるブレードから近傍のブレードに移動させる場合に約50パーセント程度;ラックのトップのブレードから真ん中のブレードへの移動の際は3分の2程度;同じラック内のトップのブレードから一番下のブレードへのデータ移動の場合には25倍程度、そしてラック間でのデータ転送の場合にははるかに大きな数値となる。

(この認識は、メモリと処理を物理的に非常に近傍(郵政公社の用語では「親和性」)の中に維持するという概念を指す郵政公社の造語である「高密度スーパーコンピューティング」を作り出し、ビッグデータ問題に取り組むためにインメモリのデータベースを利用している。)

IDCはHPC技術を必要とするほど思いワークロードを参照するために、ハイパフォーマンス・データ解析(HPDA)という用語を使っている。HPDAのトレンドを進める主な要因は、最も困難なビッグデータ・ワークロードにおける複雑性と時間にクリティカルであることだ。HPCはそのデータ基盤において組織がもっと複雑な疑問を目指し、さらに多くの変数を含んだ答えをもっと早く獲得することを可能にできるのだ。IDCはHPDAサーバと外部ストレージの世界市場が2013年の14億ドルから2018年には43億ドルに確実に成長すると予測している。

この記事の残りを読むには姉妹サイトであるEnterpriseTechをご覧ください。