クラウドストレージ大規模活用事例
NASDAQ、Amazon S3で株式市場データをクラウドに移行
NASDAQ証券取引所の「NASDAQ Data-On-Demand」は、Amazon S3に10分間隔で保存する膨大な公開市場データをユーザーが利用できるようにするクラウドサービスだ。
米NASDAQ証券取引所は、その膨大な公開市場データをクラウドコンピューティングサービスとして提供することにより一般の人々が利用できるようにしている。さらに同取引所では、米AmazonのSimple Storage Service（S3）を利用して、クラウドストレージの斬新な活用方法を試している。
NASDAQは、同取引所で毎日取引される株式に関する何十万件もの情報を収集・分類し、Market Replayサービス（専門家やアナリスト向けのオンライン参照ツール）を通じてそれらを提供している。
「NASDAQ証券情報プロセッサとSIACプロセッサから出力された相場情報は、過去3年分にわたってすべて保管してある」と話すのは、米NASDAQ OMXで製品管理を担当するジェフ・キムジー共同副社長だ。これは「レベルI株式情報」と呼ばれ、取引銘柄と売買高のデータが含まれる。NASDAQの新サービスは、このデータへのアクセスとその利用方法を大きく変えるものとなった。
「NASDAQ Data-On-Demand」と呼ばれるこのサービスは、ユーザーがNASDAQの巨大なデータストアにプログラム経由で接続することを可能にするもので、オンラインでデータを参照したり、膨大な生データをダウンロードして自分で分類したりする必要はない。アプリケーションプログラミングインタフェース（API）により、先進的なユーザー（財務アナリストは一般にコンピュータも得意だ）は、データに直接クエリを実行することができるため、既存の分析ツールをデータに直接接続するのも簡単だ。
キムジー氏によると、ユーザーは調査、コンプライアンス、トレーニング、自社の履歴情報の確認などに必要な特定の情報を得ることができるという。アルゴリズムトレーディングを行っているユーザーの場合は、過去数年分の実績データに対して自動トレーディングスキームを実行することによって、株式売買の新手法をバックテストすることができる。これは株式市場を研究する人々にも役立つ。
「履歴アプリケーションを作成するのは、スイッチをポンと入れるのと同じくらい簡単だ」と同氏は語る。
NASDAQはこのデータをクラウドサービスとして提供しているが、それが可能なのは、同社が既にデータをS3上に置いていたからだ。技術的な課題は、毎日入ってくる洪水のようなデータを整理・分類することだ。
フラットファイルでトランザクション処理を高速化
活発に取引される株式銘柄の中には1日で何Mバイトもの取引データが記録されるものがある一方で、取引データがはるかに少ない銘柄もある。管理と分類が容易な分量にデータを分割するために、データはS3上で10分間隔でフラットファイルに保存される。検索とクエリはこれらのフラットファイルに対して行われる。キムジー氏によると、これがデータを高速かつ安価に保存するのに最も効率的な方法だという。
「われわれのアプリケーションは、特定のインスタンスに素早くアクセスできるように設計されている」と同氏は語る。「高速なアクセスを可能にするために採用したのが、10分間隔でデータを保存するという方法だ。これにより、検索対象のデータに素早くかつ容易にアクセスすることが可能になる」
「われわれは各データベースで何T（テラ）バイトものデータを扱っているが、百万ドルのデータベースを構築しなくても、高速なデータアクセスを実現するにはどうすればいいかという問題で苦労した」とキムジー氏は語る。
NASDAQは膨大な量の履歴データを保有しているため、これらのデータをAmazon Web Services（AWS）に保存して利用すれば、1カ月当たり数百ドル、あるいは数千ドルという費用が掛かる。といっても、大企業の運営経費としては取るに足らない金額だ。NASDAQのサービスは既に本稼働を開始しており、ユーザーは登録することによりデータにアクセスできる。さらに詳細なデータへのアクセスが必要な場合は、NASDAQの支援を得ることができるという。
NASDAQは米Xigniteと共同で新サービスを開発した。Xigniteは金融業界向けのオンデマンドデータ製品を専門とする企業。Xigniteのマーケティングディレクター、チャス・クーパー氏は「金融企業やNASDAQのような情報処理企業は、時代に取り残されてはならないというプレッシャーを感じ始めている」と話す。
クーパー氏によると、XigniteはNASDAQが収集したデータ上で動作するWebサービスフレームワークを提供したという。同社はデータに対して実行される各種の処理を開発した。ユーザーがクエリに関する新たなアイデアを出してきた場合でも、機能を追加するのは比較的簡単だ、とクーパー氏は付け加える。「われわれはWebサービスをAPIレイヤーに提供しており、ユーザーはそこにデータアクセスレイヤーをプラグインする形になる」と同氏は説明する。
クーパー氏は、これは長期的なトレンドの一部になると考えているようだ。大量の重要な情報が一般に公開されながらも、情報に対して厳しい規制を受けている金融業界では、同氏の言う「市場データクラウド」がいずれ標準になるという。
NASDAQのキムジー氏も同じ考えだ。同氏によると、NASDAQのビジネスは情報処理から情報配信へ移行しつつあるという。
「分散保存されるデータが減少する一方で、より多くのデータが一元的リポジトリに保存されるという方向にわれわれは進んでいる」（同氏）
本稿筆者のリン・ヘイバー氏はIT記事ライター。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
新着ホワイトペーパー PR
-
製品資料
[o9ソリューションズ・ジャパン株式会社] 「改正物流効率化法対策」徹底解説 総物流費を抑制するサプライチェーン戦略 -
製品資料
[o9ソリューションズ・ジャパン株式会社] 「サプライチェーン最適化」実践ガイド：効果的な意思決定を実現する秘訣とは？ -
製品資料
[株式会社リンプレス] 非デジタル／IT人材を「自走するDX推進者」に変えるための育成ロードマップ -
市場調査・トレンド
[ワンアイルコンサルティング株式会社] AI時代の組織設計：「判断と責任」を人に残すための2つの原則とは？ -
技術文書・技術解説
[ワンアイルコンサルティング株式会社] システムの保守がモダン化を阻む？ 「変えない判断」から脱却する方法とは
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
1200万円のSaaS導入を回避 スギ薬局「運用費10万円」のAIエージェント構築術
-
2
「完璧な設計」なのに3000万円溶けた AWSの失敗事例から学ぶ3つの教訓
-
3
100億円の「Linux更新」を回避 みずほ銀行が選んだ“おきて破り”のRHEL延命策
-
4
LLMの「過学習」、正しく説明している文章はどれ？
-
5
「AIバブル」は崩壊するのか？ 熱狂の後に来る“尻拭い”と4つの防衛策
-
6
脱VMwareの前提が崩れる BroadcomのVDDK公開停止で確認すべき点
-
7
パナソニックが国内製造26拠点のERPを「SAP S/4HANA」に統一 アドオン7割削減
-
8
守るべきは「開発者のフロー状態」 AIによる生産性改善の6施策
-
9
高額な「AI PC」を一般従業員も使えたら？ 費用のハードルを一気に下げる方法
-
10
「RAGの利用」に関するアンケート
ホワイトペーパーランキング PR
-
1
JR西日本ITソリューションズが「監視業務の属人化」を解消した方法とは？
-
2
インシデント対応工数を約3割削減、東京ガスの事例に学ぶ監視体制刷新のコツ
-
3
生成AIで文書活用を進めるには？ 効率化と安全性をどう両立する
-
4
Windows PCとMacの選択制で生産性向上 LINEヤフーが実践する運用管理方法とは
-
5
DX／AI投資の壁を突破、現代の最高財務責任者が直面する課題と克服のヒント
-
6
「Google Workspace」活用事例34選、先進の生成AIによる組織変革の全貌
-
7
「人員を増やす」という選択肢はない 情シスが負の連鎖から抜け出すには？
-
8
Linuxのスキルを証明する“激推し”の認定資格はこれだ
-
9
「問題が深刻化しやすいプロジェクト管理」から脱却する方法とは？
-
10
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
TechTargetジャパン SNS
@techtarget_itmをフォロー
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー