いち早くクラウドベースのHadoopアプリケーションをリリースしたAmazon。それに続き、Google、Oracle、Microsoft、IBMがビッグデータ分析のためのHadoop対応を進めている。各社のアプローチを見ていこう。
米Google、米Oracle、米Microsoft、米IBMなど数社のパブリッククラウドプロバイダーは米Amazon Web Services(AWS)を見習い、多面的なオープンソースプロジェクトであるHadoop、MapReduceを利用した「ビッグデータ」分析のトレンドに乗ろうとしている。
クラウドベースのHadoop、MapReduceアプリケーションが登場したのは2009年だ。AWSがElastic Compute Cloud(EC2)とSimple Storage Service(S3)用のWebサービス「Elastic MapReduce」をリリースしたのが最初だ。それに続いてGoogleは2010年半ばに、App EngineのMapReduceツールキットの最初のコンポーネントとなるMapper APIの実験バージョンをリリースした。2011年5月以降は、開発者がGoogle App Engine上でMapReduceジョブを本格的に実行できるようになった。ただしこの場合、プログラムが全てのリソースを消費してWebアクセスの妨げることがないように、レート制限が必要とされる。
Googleは2011年3月に、中間結果用のFiles APIストレージシステムを追加し、さらに7月には小規模データベース(100Mバイト以下)用にPythonのシャッフル機能を追加した。同社では、さらに大容量に対応するとともに、JavaバージョンとMapper APIを近くリリースする予定だとしている。
2011年後半に入り、Hadoop、MapReduceへの関心および同技術を統合する動きがさらに盛り上がってきたようだ。
アドビ、Adobe Firefly機能搭載の「Adobe Express」モバイル版アプリを一般提供
アドビは、生成AI「Adobe Firefly」の機能を利用できる「Adobe Express」モバイル版アプ...
2度あることは3度あった GoogleのサードパーティーCookie廃止再延期にアドテク各社がコメント
Googleは2024年末までに完了する予定だったWebブラウザ「Chrome」でのサードパーティーCo...
天候と位置情報を活用 ルグランとジオロジックが新たな広告サービスを共同開発
ルグランとジオロジックが新たな「天気連動型広告」を共同開発した。ルグランが気象デー...