多くの専門家が「必要」と認める機能は?
データサイエンティストを楽にする ビッグデータ分析ツールの10大「必須機能」
ビッグデータ分析ツールを探しているなら、さまざまな機能がある中でも10個の機能に注目してほしい。特に、分析結果を埋め込む機能、他のアプリケーションとの連携機能、バージョン管理機能は確認しておきたいところだ。
ビッグデータ分析は複雑なプロセスで、ビジネス管理、データサイエンティスト、開発者、運用チームなど、広い範囲に関係する。新しいデータ分析モデルの作成は、こうした複雑なプロセスの一部にすぎない。
ビッグデータ分析ツールには10個の必須機能がある。こうした機能を備えていれば、業績向上のためにデータサイエンティストに求められる労力を減らせる可能性がある。本稿ではこの10個の必須機能を紹介する。
1.埋め込み可能な分析結果
ビッグデータ分析に価値があるのは、データモデルから収集した洞察を、他のアプリケーションを使用している最中に、意思決定のサポートに役立てることができる場合だ。
「データモデルから収集した洞察をリアルタイムの意思決定プロセスに取り入れられることが何より重要だ」と話すのは、インメモリデータベースベンダーVoltDBでチーフテクノロジストを務めるディラージ・レメラ氏だ。
例えば、意思決定プラットフォームに簡単に埋め込むことができる形式で洞察を作り出す機能などがある。これらの洞察をイベントデータのリアルタイムの流れに当てはめ、瞬時に意思決定できるようにすべきだ。
2.データラングリング
データサイエンティストは、データを分析するためにデータの洗浄、ラベル付け、整理に相当な時間を費やすことが多い。こうした作業には、多様なデータソース、データの種類、アプリケーション、APIのシームレスな連携、データクレンジング、安全できめ細かな役割ベースのデータアクセスの提供などが必要になる。
ビッグデータ分析ツールは、このようなデータラングリング(データを飼いならす)手順を迅速かつ簡略化するために、全範囲のデータの種類、プロトコル、連携シナリオを利用できるようにしなければならない。こう話すのは、データベースベンダーInterSystemsでデータプラットフォームマーケティング部門のディレクターを務めるジョー・リヒテンベルク氏だ。
3.データ探索
データ分析には、基盤となるデータのアドホックな検出と探索のフェーズが必要になることが多い。こうした探索により、企業は問題のビジネス面の状況を理解でき、分析の疑問点をより適切に編み出せるようになる。このプロセスの効率化に役立つ機能は、データに関する新たな仮説を検証する際に必要な労力を減らし、不適切な仮説を素早く取り除き、データに隠れた有効な結び付きを効率的に見つけ出す。
このデータ探索プロセスには、優れたビジュアライズ機能も役に立つ。
4.さまざまな分析の選択肢
データ分析の結果を運用する場合、ビジネスインテリジェンス、予測分析、リアルタイム分析、機械学習など、多種多様なアプローチがある。これらのアプローチそれぞれがビジネスに異なる種類の価値を提供する。優れたビッグデータ分析ツールは、最小限の労力で、または異なるツールを導入する際に実施する再トレーニングによって、さまざまなユースケースを支援できるように機能的かつ柔軟であるべきだ。
5.スケーラビリティ
データサイエンティストは一般に、時間をかけて小規模なデータセットでさまざまなデータモデルを開発しテストする余裕がある。だが最終的な分析モデルは、経済的に運用する必要があり、素早く結果を提供しなればならないことが多い。そのため、分析モデルは高いレベルのスケーラビリティをサポートし、ハードウェアやクラウドサービスに多くのコストをかけずに、運用環境にデータを取り込み、大規模データセットを操作できる必要がある。
予測分析企業Descartes Labsでデータサイエンスリードを務めるエドゥアルド・フランコ氏は次のように語る。「最小限の労力で小規模なデータセットから大規模なデータセットにアルゴリズムをスケール変換するツールも重要だ。こうした変換には非常に多くの時間と労力が費やされる。そのため、これを自動化すれば大きな助けになる」
6.バージョン管理
大規模データ分析プロジェクトでは、複数の担当者がデータ分析モデルパラメーターの調整に関わる可能性がある。このような変更の中には、最初は有望に見えても、運用環境に導入したときに予期せぬ問題を生むものもある。
ビッグデータ分析ツールに組み込まれるバージョン管理機能は、このような変更を追跡する機能を高めてくれる。後から問題が出てきた場合も、適切に動作していた以前のバージョンに分析モデルを簡単にロールバックできる。
「バージョン管理がなければ、1人の開発者による1つの変更によって既に作成したもの全てが破綻する可能性がある」と話すのは、データ運用プラットフォームDevo USAでデータサイエンスの統括責任者を務めるチャールズ・アミック氏だ。
7.シンプルな連携
データソースを処理してアプリケーションに接続するために、データサイエンティストや開発者が連携機能をカスタマイズする時間が短いほど、データ分析モデルやアプリケーションの強化に多くの時間を割くことができる。
簡単に連携できることで、他の開発者やデータサイエンティストとの結果の共有が容易になる。データ分析ツールは、既存のエンタープライズアプリケーションやクラウドアプリケーション、データウェアハウスとの容易な連携を支援する必要がある。
8.データ管理
ビッグデータ分析ツールには、継続性と全ての成果物の標準化を確保するための堅牢で効率的なデータ管理プラットフォームが必要だ。こう話すのは、データ分析コンサルタント企業Velocity Development Groupで分析部門のディレクターを務めるティム・ラファーティ氏だ。データ量が増えるにつれ、多様性も増す。
堅牢なデータ管理プラットフォームは、企業が信頼できる1つの情報源を確保するのに役立つ可能性がある。データ管理プラットフォームは、データ戦略を成功に導くためには不可欠だ。
9.データガバナンス
ビッグデータ分析ツールのデータガバナンス機能は、企業が規制を順守し安全であり続けるのに役立つ。データガバナンスには、分析モデルに使用されたデータセットのソースと特性を追跡できる機能や、データサイエンティストやエンジニアが使用するデータのセキュリティ保護と管理を支援する機能などがある。モデルの構築に使用されたデータセットは、差別問題を引き起こしかねない無意識の偏見を生み出すかもしれない。
データガバナンスは、プライバシー規則の順守が必要になる医療情報や個人情報など、機密データを扱う場合は特に重要になる。ツールによってはデータを匿名化する機能を備えるようになっている。これにより、データサイエンティストはGDPRのような規則を順守しながら個人情報に基づくモデルを構築できる。
10.データ処理フレームワーク
多くのビッグデータ分析ツールは、分析かデータ処理のいずれかを重視する。「Apache Spark」など、この両方をサポートするフレームワークもある。こうしたフレームワークにより、開発者やデータサイエンティストは、リアルタイム処理、複雑な抽出/変換/読み込みタスク、機械学習、レポート、SQLに同じツールを使用できる。データサイエンスは反復の多いプロセスなので、この機能が重要になる。データサイエンティストは、実際に運用する1つのモデルにたどり着くまでに100個のモデルを作成する場合もある。この反復プロセスによって、データが改良され、モデルの結果が向上することが多い。
統一分析ツールは、企業が反復的にソリューションをトレーニング/モデル化しながら、大量のサイロ化されたデータストレージシステムにまたがるデータパイプラインを構築するのに役立つ。こう話すのは、データ分析プラットフォームプロバイダーDatabricksの共同設立者兼CEOであるアリ・ゴディシ氏だ。
Copyright © ITmedia, Inc. All Rights Reserved.
この記事の著者
関連記事
新着ホワイトペーパー PR
-
市場調査・トレンド
[AvePoint Japan株式会社] SCS評価制度の死角は“SaaSの中” クラウド標準機能では届かない領域とは? -
製品資料
[デジタルサーカス株式会社] 5分で分かる、「オープンソースCMS」比較ガイド -
製品資料
[デジタルサーカス株式会社] 1つのアプリを各国で運用 多言語モバイルアプリを簡単に開発・導入できる方法 -
製品資料
[ニュータニックス・ジャパン合同会社] 複雑化するKubernetes運用、VMとコンテナの二重管理を解消する方法は? -
市場調査・トレンド
[アルプス システム インテグレーション株式会社] 急増する高度なフィッシング詐欺 先回りしてブロックするには何が必要?
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
PHPはそもそも必要か? 脆弱性で問われる自社サイト安全性と保守負担のバランス
-
2
「セキュリティ運用と侵入後の初動防御」に関するアンケート
-
3
京王電鉄・東京メトロの被害から学ぶ境界防衛 ITの侵害はどこまで波及するか
-
4
「Microsoft 365」が乗っ取られる MFAを破る“本物の画面”の恐怖
-
5
PHP2Shellの「事前の情報流出」でパニックに パッチ公開を巡る“混乱劇”
-
6
PHP脆弱性「PHP2Shell」で2260万件に影響 情シスの緊急チェックリスト
-
7
米国防総省で300万人分の個人情報が流出 その「意外な原因」と教訓
-
8
Microsoft 365導入後も稟議は「Excelをメールで回覧」 承認が止まる理由
-
9
金融・通信で情報漏えいが続出 IPAとJPCERT/CCが情シスに求める緊急点検
-
10
「データ活用とAI活用の実態」に関するアンケート
ホワイトペーパーランキング PR
-
1
AI駆動攻撃にどう対抗する? 超速の攻撃からエンドポイントを保護する方法
-
2
最速72分でデータが流出? 最新の脅威トレンドや侵入手法から分かった防衛策
-
3
経験豊富な即戦力人材に直接アプローチできる、「攻めの採用」への転換術
-
4
2026年のサイバーセキュリティには何が必要か? 最新データに学ぶ傾向と対策
-
5
「IT史に名を残すシステム障害」8選
-
6
「EDR」選定ガイド:比較・検討フェーズで整理すべきポイントを解説
-
7
10G回線の真価をフルに享受するには? 導入前にチェックしたいポイント
-
8
HDDを使わない「SSDオンリー」が無謀なのはなぜ?
-
9
MDMだけでは防げない? Appleデバイスに潜む5つのセキュリティギャップ
-
10
なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー