| 開発者 | HPSS コラボレーション ( IBM、LANL、LBNL、LLNL、ORNL、SNL ) |
|---|---|
| 安定リリース | 10.3 / 2023年9月 |
| オペレーティング·システム | リナックス |
| タイプ | 階層型ストレージ管理 |
| ライセンス | 独自 |
| Webサイト | hpssコラボレーション |
高性能ストレージシステム(HPSS)は、HPSSコラボレーションによって開発された、柔軟でスケーラブルなポリシーベースのソフトウェア定義階層型ストレージ管理(HSM)製品です。クラスタ、 LAN、ストレージエリアネットワーク(SAN)テクノロジを使用して、スケーラブルなHSM、アーカイブ、およびファイルシステムサービスを提供し、多数のコンピュータ、ディスク、ディスクシステム、テープドライブ、およびテープライブラリの容量とパフォーマンスを集約します。[1]
建築
HPSS は、データにアクセスしたり作成したりするためのさまざまな方法をサポートしています。その中には、 FTP、パラレル FTP、FUSE (Linux) のサポートや、パラレル I/O をサポートする堅牢なクライアントAPIなどがあります。
バージョン7.5以降、HPSSはLinuxで完全にサポートされています。HPSSクライアントAPIはAIX、Linux、Solarisでサポートされています。[1]
この実装は、スケーラブルなリレーショナル データベース管理システムである IBM のDb2 を中心に構築されています。
HPSSコラボレーション
1992年初頭、米国エネルギー省(DOE)の国立研究所であるローレンス・リバモア(LLNL)、ロスアラモス(LANL)、オークリッジ(ORNL)、サンディア(SNL)がIBMと共同で国立ストレージ研究所(NSL)を設立しました。[2] NSLの目的は、コンピューティングとデータストレージのボトルネックを克服するソフトウェアとハードウェアの技術を商品化することでした。[3] NSLのデータストレージに関する研究から、HPSSを生み出すコラボレーションが生まれました。このコラボレーションは1992年秋に始まり[4] 、 IBMのヒューストン・グローバル・サービスと5つのDOE国立研究所(ローレンス・バークレー[LBL]、LLNL、LANL、ORNL、SNL)が参加しました。[1]当時、DOE国立研究所のHPSS設計チームとIBMは、計算能力がテラフロップス/ペタフロップスに上昇し、HSMに保存されるデータがペタバイト以上に増加し、HSMのデータ転送速度がギガバイト/秒以上に上昇し、HSMの1日のスループットが数十テラバイト/日になるというデータストレージの爆発的な増加が起こることを認識していました。そのため、このコラボレーションは、1,000倍以上に拡張でき、上記のベースからこれらの予想される目標とそれ以上に向かって進化するシステムを設計および展開することを目指しました。[5]
HPSS コラボレーションは、コンピューティング能力とデータ収集機能、およびストレージ システムの I/O、容量、機能の間の不均衡の拡大によって生じるすべての課題に対応できる経験とリソースを単一の組織が持つことはできないという前提に基づいています。業界、米国エネルギー省 (DOE)、その他の連邦研究所、大学、国立科学財団(NSF) スーパーコンピュータ センター、フランス原子力庁(CEA)、Gleicher Enterprises など、世界中の 20 を超える組織がこの取り組みのさまざまな側面に貢献しています。
2022 年現在、主要な HPSS 開発チームは次のメンバーで構成されています。
- IBMグローバル ビジネス サービス (テキサス州ヒューストン)
- ロスアラモス国立研究所(ニューメキシコ州ロスアラモス)
- ローレンス・リバモア国立研究所(カリフォルニア州リバモア)
- ローレンス・バークレー 国立エネルギー研究科学計算センター(カリフォルニア州バークレー)
- オークリッジ国立研究所(テネシー州オークリッジ)
- サンディア国立研究所(ニューメキシコ州アルバカーキ)
注目すべき業績
- 2つの大規模なHPSSサイト、ECMWFと英国気象庁では、2016年12月7日時点で、単一のHPSSインスタンスと名前空間内にそれぞれ217ペタバイトと99ペタバイトのデータが保存されていました。[5]
- 2007年11月14日、サンディエゴスーパーコンピュータセンターはIBM、DataDirect、Brocadeと共同で「Billion File」テストを実施し、 GPFSからHPSSに10億のファイルを正常にバックアップしました。[6]
- 2013年5月、イリノイ大学アーバナ・シャンペーン校の国立スーパーコンピューティング応用センター(NCSA)で380ペタバイトのHPSS設備が稼働を開始しました。[7]
参考文献
- ^ abc 「公式 HPSS コラボレーション ウェブサイト」。IBM。
- ^ 「長期的な視点で見る高性能ストレージシステム」str.llnl.gov 。 2023年3月29日閲覧。
- ^ Watson, RW; Coyne, RA (1994 年 6 月)。「国立ストレージ研究所 (NSL): 概要と現状」。第 13 回 IEEE 大容量ストレージ システム シンポジウム議事録。分散ストレージおよびデータ管理システムに向けて。pp. 39–43。doi : 10.1109/ MASS.1994.373025。ISBN 0-8186-5580-1. S2CID 206444692。
- ^ 「LLNL の HPSS」. LLNL.
- ^ ab 最大 HPSS サイト 1 ペタバイト以上
- ^ HPCWire 2007年11月15日 2007年11月17日アーカイブ、Wayback Machine
- ^ 「NCSA、世界最大の高性能ストレージシステムを生産開始」 2013年5月30日. 2014年8月30日閲覧。
