ファイル/ブロックベースの大規模なストレージをオブジェクトストレージにリプレースしつつあるフランス原子力・代替エネルギー庁。彼らがオブジェクトストレージに見いだした可能性とは?
フランス原子力・代替エネルギー庁(CEA)は、ハイパフォーマンスコンピューティング(HPC)の運用に利用するストレージアーキテクチャを開発するに当たり、テストベッドプロジェクト向けに米Scalityのオブジェクトストレージソフトウェアを選んだ。
本記事は、プレミアムコンテンツ「Computer Weekly日本語版 1月6日号」(PDF)掲載記事の抄訳版です。本記事の全文は、同プレミアムコンテンツで読むことができます。
なお、同コンテンツのEPUB版およびKindle(MOBI)版も提供しています。
CEAの狙いは、Military Applications Division(DAM:軍事応用局)のストレージアーキテクチャの一部として「Scality」を組み込むことだ。そのメリットとして、ストレージハードウェアへの依存性をなくすことと、HDDのスループット向上を期待している。
仏パリ近郊のCEA/DAMの拠点では、何十万基ものCPUと数十P(ペタ)Bのストレージを使って処理する、数Pフロップス級の研究を行っている。
現在は、米DataDirect Networksの大容量ストレージと英Xyratex(2014年にSeagateが買収)の並列ファイルシステム「Lustre」を使用するファイル/ブロックベースの高速ストレージで構成されている。
DAMは、このHPCのファイル/ブロックベースのストレージを2020年までに置き換えることを目指し、オブジェクトベースのソフトウェア定義分散ストレージ「Scality RING」を利用するテストプログラムを開始した。
「Scalityはソフトウェア製品であり、ストレージのハードウェアが限定されない。それだけでなく、入出力(I/O)効率を大幅に改善して、物理ストレージの帯域幅を広げることを目的としている」と、CEAで科学コンピューティング施設部門の責任者を務めるジャック・チャールズ・ラフォクリエール氏は語る。
「ブロックモデルやファイルモデルによるアクセスにすると、帯域幅の効率が20〜30%向上する。これをオブジェクトストレージインタフェースに移行すれば、向上する帯域幅効率が100%近くになると考えている」と同氏は言う。
「POSIX」(UNIX系OSの最小限のAPIセット)とブロック/ファイルストレージのツリー構造が原因で、アプリケーションやストレージはハードウェアを最大限に生かせず、効率を低下させているとラフォクリエール氏は言う。
「オブジェクトインタフェースに移行すれば、何百MBものオブジェクトを処理できるようになり、I/Oも最適化できる。さらに、データとメタデータの複雑さを管理する必要もない」
「ファイル/ブロックストレージは、そのツリー構造と複数のディレクトリに散在するデータを収集しなければならない。その上、POSIXのセマンティクスへの準拠が求められる。その結果、スケーリングに問題が生じたり、多くのCPUから同じデータセットにアクセスする際に問題が発生したりすることになる」
ラフォクリエール氏は次のように付け加えた。
本記事は抄訳版です。全文は、以下でダウンロード(無料)できます。
■Computer Weekly日本語版 最近のバックナンバー
Computer Weekly日本語版 12月16日号:ベンダーロックインからの脱出
Computer Weekly日本語版 12月2日号:暴挙か? GoogleのOffice 365攻略作戦
Computer Weekly日本語版 11月18日号:Office 2016に影を落とす不吉な前兆
次世代生成AIで優位に立つのはMeta? Google? それともマスク氏のあの会社?
生成AI時代において、データは新たな金と言える。より人間らしい反応ができるようになる...
GoogleからTikTokへ 「検索」の主役が交代する日(無料eBook)
若年層はGoogle検索ではなくTikTokやInstagramを使って商品を探す傾向が強まっているとい...
B2B企業の市場開拓で検討すべきプロセスを定義 デジタルマーケティング研究機構がモデル公開
日本アドバタイザーズ協会 デジタルマーケティング研究機構は、B2B企業が新製品やサービ...