条件が何もかも変わった容量と速度だけで考えると失敗するビッグデータ時代のストレージ

保険会社IAGが保有するデータは、1年間で80TBから2PBに増加した。この間に、データの量だけでなくストレージシステム、管理方法、クラウドなども大きく変化した。ストレージ戦略を見直すべき時がきたのだ。

[Computer Weekly]

　大手保険会社Insurance Australia Group（IAG）が1年前に保管していたデータは80TB余りにすぎなかった。だがその量は毎月14TBずつ増加し、同社が管理するデータは2P（ペタ）Bバイトに達した。

Computer Weekly日本語版　12月6日号無料ダウンロード

本記事は、プレミアムコンテンツ「Computer Weekly日本語版　12月6日号」（PDF）掲載記事の抄訳版です。本記事の全文は、同プレミアムコンテンツで読むことができます。

• Computer Weekly日本語版　12月6日号：AIの誇大宣伝を見極めるべし

なお、同コンテンツのEPUB版およびKindle（MOBI）版も提供しています。

　IAGのデータは文書、顧客との通話記録、無秩序な広がりを見せるモノのインターネット（IoT）ネットワークのデータや自動運転のテストデータなどで構成されている。これはまさにデータの「Volume（量）、Variety（多様性）、Velocity（発生速度や更新頻度）」の典型といえる。

　Cisco Systemsの最新調査によると、全世界の年間インターネットトラフィック量は2016年には1.2Z（ゼタ）Bバイトだったが、2021年には3.3ZBに到達するという。個人の単位では、2016年は1カ月当たり13GBだったが、2021年にはこれが35GBに達すると見込まれている。

　当然、こうしたデータの多くはコンシューマーデバイスやクラウドサービスに保管される。とはいえ、この調査が明らかにしている兆候はデータの増加速度だ。

ストレージを見直す

　IAGでデータおよび生産エンジニアリングとデータ運用の部門を率いるエディ・サタリー氏によると、使用方法や収集場所といったデータの性質も変化しているという。その結果、同氏がIAGで勤務した16カ月の間に、ストレージへのアプローチが大きく変化した。

　「当社は、レガシーのストレージエリアネットワーク（SAN）を、商用／非商用のオープンソースストレージに移行した」とサタリー氏は言う。さらに、コモディティストレージとコンバージドストレージをソフトウェア定義ネットワーク（SDN）で利用することで、データプールの稼働速度が大幅に上がったとも補足する。

　こうした速度や柔軟性の向上は、イノベーションだけでなく、突如急増する需要に対処するためにも不可欠だ。台風などの大きな天候異変が発生すると、平常時の4〜5倍のストレージ容量が必要になる場合があるとサタリー氏は説明する。こうした変動には、低コストで瞬時に対応できることが非常に重要になる。

　パフォーマンス、データ量の増加、コストのバランスをうまく取ることも必要だ。同社はこうしたバランスを取るために、複数のホスティングプロバイダーを利用するOpenStackの共有クラスタを導入している。複数の層からなるストレージメディアを利用し、最上層にはフラッシュストレージを配置している。また、8TBのアーカイブ用ストレージもある。

　「ストレージ環境にはバースティングを可能にするため25％のオーバーヘッドを見込んでいる。これは、四半期ごとに見直しを行う」とサタリー氏は言う。さらに、ストレージアーキテクチャを改良して、「完全な柔軟性を得た上で、5分の1のコストで4倍のパフォーマンス」を実現している。

高度テクノロジー

　調査会社Gartnerでストレージインフラとコンバージドテクノロジーの調査部長を務めるジュリア・パーマー氏は、ストレージサプライヤーが行うハイレベルなイノベーションにより、ストレージの問題が高度化していると指摘する。

　だがこうしたイノベーションに伴い、プライマリーストレージとセカンダリーストレージに使用するテクノロジーや、さまざまな種類のデータに使用するテクノロジーが多様化し、複雑性も増している。その上、CIO（最高情報責任者）が求めるのはパフォーマンスを低下させずにデータの増加をサポートするテクノロジーだ。

　基盤となるストレージメディアについては、パフォーマンスを重視する多くの企業がソリッドステートドライブ（SSD）を検討している。だが、サプライヤーの主張はともかく、ビジネスクリティカルなアプリケーションを実行できるほどSSDが安定しているかどうかは慎重に検討する必要がある。

　オールフラッシュとSSDの売り上げは2020年まで毎年31％ずつ増加すると予測される。だが、一般的にレガシーアプリケーションの設計では、高速ストレージに対応するのはキャッシュソリューションぐらいだ。こうした設計がフラッシュ導入の妨げとなる。

　パーマー氏は、依然として、「オールフラッシュ用にソフトウェアスタックを設計するのは大仕事」であることを挙げ、「フラッシュの導入はいまだに時期尚早だ」と言う。

　Dell EMCのCTO（最高技術責任者）アーロン・パターソン氏は、さらに課題を挙げた。

続きはComputer Weekly日本語版　12月6日号にて

本記事は抄訳版です。全文は、以下でダウンロード（無料）できます。

• Computer Weekly日本語版　12月6日号：AIの誇大宣伝を見極めるべし

■Computer Weekly日本語版 最近のバックナンバー

Computer Weekly日本語版　11月15日号　モバイル端末管理最新トレンド

Computer Weekly日本語版　11月1日号　GDPR時代のメールセキュリティ対策総まとめ

Computer Weekly日本語版　10月18日号　次世代のワイヤレスネットワーク