ストレージでデータ処理
CPUを搭載する「コンピュテーショナルストレージ」のユースケースと主要製品
CPU(やASIC、FPGA、GPU)を搭載し、ストレージで直接データを処理する「コンピュテーショナルストレージ」が注目されている。どのようなメリットがあり、どのような用途に使われているのか。
コンピュテーショナルストレージ( Computer Weekly日本語版 2019年5月22日号 も参照)は、ストレージに処理能力を付与する。従来のストレージアーキテクチャが現在のニーズに追い付いていないという意見に応えるものだ。
ストレージリソースとコンピューティングリソースとの間でデータを移動するのは効率が悪い。データ量が増えるにつれ、この移動はますますボトルネックになる。SNIA(Storage Networking Industry Association)は次のような見解を示している。「ストレージのアーキテクチャは、テープやフロッピーディスクの時代とほとんど変わっていない」
やや大げさかもしれないが、ストレージと処理は分かれているものという原則が、ほとんどの企業ITシステムの中核に残っている。高度な分析、ビッグデータ、機械学習、ストリーミングではこの点が問題になる。
利用可能な解決策は幾つかある。「SAP HANA」などのインメモリデータベースは、ストレージとのデータの移動を減らす。サーバフラッシュは、コントローラーとフラッシュストレージをホストのPCIバスに直接接続することで、ドライブとCPU間のSASインタフェースとSATAインタフェースを迂回(うかい)できる。
ソリッドステートストレージはデータ処理をストレージに近づけることで十分な速さを確保し、パフォーマンスを飛躍的に向上させる。「Hadoop」などのアプリケーションは分散処理を利用して既にこの方向に進んでいる。
コンピュテーショナルストレージはストレージメディアに処理能力を組み込む。これにより処理がCPUからオフロードされ、ストレージとCPU間のボトルネックが減少する。米カリフォルニア大学アーバイン校とNGD Systemsが行った調査によると、パフォーマンスが8~9倍向上し、エネルギーが節約される可能性があり、大半のシステムでは最低でも2.2倍の改善が見られるという。
コンピュテーショナルストレージとは
コンピュテーショナルストレージとは、ストレージメディアまたはコントローラーに多数のプロセッサ(CPU)を搭載するストレージサブシステムを指す。コンピュテーショナルストレージドライブ(CSD)とも呼ばれ、コンピュテーショナルストレージサービスをまとめて提供する。データではなく、データの処理をプロセッサに移動するというのがその考え方だ。
考え方としては、CSDを使って一部のワークロードをプリエンプトし、メインCPUに渡されるデータを減らそうというものだ。場合によってはメインCPUが実行すべきタスクが少なくなることもある。
その一例が人工知能(AI)ベースの監視システムだ。エッジのCSD(監視カメラ自体)が侵入者の画像解析などの基本タスクを実行できる。「侵入者の可能性が高い」場合のみその画像をメインCPUに送り、顔認識を行う。
「コンピュータがデータセットを計算する必要がある場合、そのデータをストレージからメモリに読み込まなければならない」と話すのは、PA ConsultingのIT変革の専門家、アンドリュー・ラーセン氏だ。
「普通、ストレージのサイズはメモリよりもはるかに大きい。そのためデータをブロック単位で読み取らなければならない。その結果、分析速度が落ち、大半のデータセットではリアルタイム分析が不可能になる。コンピュテーショナルストレージはこうした状況を避けるため、処理機能をストレージレイヤーに直接持たせている」
コンピュテーショナルストレージのアーキテクチャ
コンピュテーショナルストレージは一般に「Arm Cortex」やそれに相当するプロセッサをベースにし、そのプロセッサを通常はNVMeベースのストレージコントローラーの前に配置する。ただし、コンピューティングモジュールとコントローラーを統合するCSDもある。
対象とするアプリケーションによっては、ASICやFPGAをコンピュテーショナルストレージシステムに含めることもできる。
SNIAは、現在のコンピュテーショナルストレージを固定コンピュテーショナルストレージサービス(FCSS:Fixed Computational Storage Services)とプログラマブルコンピュテーショナルストレージサービス(PCSS:Programmable Computational Storage Services)という2つのカテゴリーに分類している。
FCSSは圧縮や暗号化など、演算処理を集中的に行う具体的なタスク向けに最適化されている。PCSSはホストOS(通常はLinux)を実行できる。どちらのシステムにも長所と短所がある。FCSSはコストパフォーマンスが最高になり、PCSSは柔軟性が高くなる。ドライバまたはAPIが必要かどうか、CSDでアプリケーションをネイティブに実行する可能性があるかどうかによってもアーキテクチャは変わってくる。推奨システム「Catalina」(https://journalofbigdata.springeropen.com/articles/10.1186/s40537-019-0265-5)はLinuxを実行するCSDがHadoopクラスタのデータノードとして機能できることが前提となっている。
CSDだけを使用することも、CSDと従来型ストレージを混在させて使用することもできる。ただし、現時点では混在させて使う方が可能性は高いだろう。
コンピュテーショナルストレージの初期応用例には、データ圧縮、暗号化、RAID管理などがある。単一のプロセッサでボトルネックを解消できる分野だ。
だが、コンピュテーショナルストレージはもっと幅広いユースケースを生み出すよう進化している。例えば、多くのCSDにワークロードを分散できるようにソフトウェアやAPIの改善が促されている。こうしたワークロードの分散により、パフォーマンスが大幅に向上する。
「コンピュテーショナルエッジ、機械学習の処理、リアルタイムデータ分析、ハイパフォーマンスコンピューティング(HPC)などがユースケースになる」と話すのは、Gartnerでリサーチ部門のバイスプレジデントを務めるジュリア・パルマー氏だ。
「コンピュテーショナルストレージはまだ初期段階だが、大きく成長する可能性がある。Gartnerは、2024年までに企業が生み出すデータの50%以上がデータセンターやクラウドの外部で作成・処理されるようになると予測している。2020年段階ではその増加率は10%未満だろう」
データストリーミングもCSDのメリットを得ることができる応用例の一つだ。
コンピュテーショナルストレージの長所と短所
コンピュテーショナルストレージの主なメリットはパフォーマンスの向上だ。それも大幅に向上する可能性がある。演算が集中するアプリケーションではなく、データを集中的に扱うアプリケーションは、ストレージとプロセッサ間のボトルネックを解消することで最も大きなメリットを得ることができる。
分散処理に適したアプリケーションや、遅延が少ないほど適切に機能するアプリケーションもパフォーマンスが向上する。
慎重に設計されたCSDシステムは大幅な省電力も実現する。
デメリットもある。ITアーキテクチャの複雑さが増すこと、APIやホストがコンピュテーショナルストレージサービスに対応する必要があること、ストレージやストレージコントローラーにCPUを追加するコストが加わることなどだ。
コンピュテーショナルストレージがパフォーマンスの問題を全て解決するわけではない。単一インスタンスのCSDではパフォーマンスのメリットが限定される。複数ノードにまたがるアプリケーションや複数ノードで機能するように再構成できるアプリケーションは最高のパフォーマンスを得る。
451 Researchのティム・スタマーズ氏によると、コンピュテーショナルストレージはありふれたものになりつつあるという。フラッシュに移行することで得られるパフォーマンスのメリットをデータ量の増加が全て相殺してしまうからだ。
コンピュテーショナルストレージのサプライヤー
コンピュテーショナルストレージの市場はまだ発展途上にすぎないが、次のような主要サプライヤーがある。
Eideticom
カナダのEideticomの「NoLoad」は、ホストCPUの処理を一切必要とせずにピアツーピアモードで実行されるという。FPGAを搭載し、PCI経由のNVMeを使用する。同社の製品はデータ圧縮や重複排除など、ストレージサービスを重視する。
Samsung
主流ストレージのサプライヤーの中で製品を有しているのはSamsungだけだ。同社は2018年に「SmartSSD(https://samsungsemiconductor-us.com/smartssd/)」を発表した。同製品はXilinxのFPGAを使用する。初期アプリケーションには、圧縮、データ重複排除、暗号化などがある。
Nyriad
Nyriadのバックグラウンドは独特だ。同社の製品が最初に開発されたのはSquare Kilometer Array(https://www.skatelescope.org/)(SKA:スクエア・キロメートル・アレイ)電波望遠鏡向けだった。NVIDIAのGPUを複数搭載し、160Tbpsでデータを処理できるCSDだ。
ScaleFlux
ScaleFluxは2014年設立のスタートアップ企業だ。同社のCSDはワークロードを「そのままの状態」で処理できる。同社の市場はハイパースケーラーやクラウド事業者が対象になる。
NGD Systems
NGD SystemsのCSDはArmのコアを複数含むASICを搭載する。以前はFPGAを使っていた。同社のCSDはエッジコンピューティングで使われている。ドライブは通常のストレージとしても使用できる。
Copyright © ITmedia, Inc. All Rights Reserved.
Computer Weekly日本語版
この記事の著者
関連記事
新着ホワイトペーパー PR
-
製品レビュー
[ヴィーム・ソフトウェア株式会社] SCS評価制度を導入するだけで十分? 組織の防御力を高める活用方法とは -
技術文書・技術解説
[フォーティネットジャパン合同会社] AIランサムウェアに勝つ 自律型エンドポイント管理導入で確認すべき条件4つ -
技術文書・技術解説
[フォーティネットジャパン合同会社] LLMが兵器化? 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント -
製品レビュー
[ネットアップ合同会社] 研究分野でAI活用が進まない? 真の成果につなげるデータ管理の在り方とは -
製品レビュー
[ヴィーム・ソフトウェア株式会社] SCS評価制度を導入するだけで十分? 組織の防御力を高める活用方法とは
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
2
VMware離れの決め手は“機能”以外だった 情シス109人が選んだ新基準と死角は
-
3
IBM iのブラックボックス化を打破 資産継承と進化を実現する「IBM Bob」の実力
-
4
二極化する生成AI活用 「一部の社員しか使いこなせない」をどう解消すべきか
-
5
「Apple Watch」、読者の95%は「仕事で使える」、5%は何に不満?
-
6
「クラウドDR」4大基礎用語 クラウドバックアップやDRaaSとの違いは?
-
7
高機能化が進む“タブレット型電子カルテ”は次の段階へ
-
8
「有線LAN環境」に関するアンケート
-
9
「ITインフラとデータ保護・バックアップ対策」に関するアンケート
-
10
「Excel至上主義」と“謎マクロ”の限界 属人化リスクを断つ業務移行の勘所
ホワイトペーパーランキング PR
-
1
登録セキスぺが語る「SCS評価制度」の舞台裏 星を取得すべき理由と対応のコツ
-
2
JR西日本ITソリューションズが「監視業務の属人化」を解消した方法とは?
-
3
OSSでは困難 100超のサービスを持つマネーフォワードが実践した統合監視術
-
4
「改正物流効率化法対策」徹底解説 総物流費を抑制するサプライチェーン戦略
-
5
月1000枚の紙を削減 9年動けなかった組織が、業務改革のその先に得たもの
-
6
ネットワーク遅延の原因、「パケットロス」の基礎知識と効果的な解決策
-
7
ドラマで分かる、標的型攻撃メールの被害を受ける企業と回避できる企業の分岐点
-
8
Windows PCとMacの選択制で生産性向上 LINEヤフーが実践する運用管理方法とは
-
9
「Google Workspace」活用事例34選、先進の生成AIによる組織変革の全貌
-
10
ソフトウェア開発の属人化と手戻りをどう防ぐ? 速さと品質を両立させる方法
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー