「AI」の学習用データ収集 その課題と解決策は【後編】
Facebook、IBMは「AI」の学習用データをどう作成しているのか
機械学習ベースのAIシステムが有益な判断を下せるようにするには、学習に利用するデータの質が重要だ。FacebookとIBMのAIシステム担当者の話から、データの質を高める方法を探る。
人工知能(AI)システムの誤った判断につながるバイアス。その軽減に必要なことは、機械学習の学習用データ(教師データとも)のクリーニングと、データ収集方法の見直しだ。
前編「AIの学習用データをクリーンにするには“ゴミデータ”を排除すべし」に引き続き、O'Reilly が2019年4月に開催したAIカンファレンス「Artificial Intelligence Conference」の講演を基に、企業が学習用データを作成するときの課題と、その解決方法について説明する。
FacebookでAIインフラ研究のシニアエンジニアリングマネジャーを務めるキム・ヘーゼルウッド氏は講演で、AIシステムの出力をプログラムの意図に合わせるために微調整するとき、同社が直面した問題について語った。
「機械学習をあらゆるユーザーに拡大しようとする際の大きな課題の一つは、大規模なデータ活用だった」とヘーゼルウッド氏は話す。
ヘーゼルウッド氏によると、Facebookは、
- 非構造化データを収集
- AIモデルがそれらのデータを使って学習
- 学習済みのAIモデルを運用環境に導入
という3つの手順でAIシステムの導入に取り組んでいるという。
最初の手順ではデータエンジニアが、機械学習用にデータをクリーニングして、自動テキスト翻訳や顔認識などの用途に合わせて最適化する必要がある。ヘーゼルウッド氏が率いるチームは、データセットの要件を絶えず変更している。なぜなら機械学習ベースのAIシステムの中核要素であるAIモデルは、継続的なトレーニングが必要な上、出力にさまざまな要件があるためだ。
Facebookの技術者には巨大なデータのラベリング、クリーニング、最適化のための時間とリソースがある。そうではない企業が独自の機械学習ベースのAIシステムを構築しようとする場合、大きな障害に直面する。
学習を自動化するツールの登場
データサイエンティストは育成が困難である上に人件費も高いと話すのは、IBMの調査組織IBM Researchでチーフサイエンティストを務めるラッチャー・プリ氏だ。プリ氏はデータサイエンティストの力に頼るのではなく、同氏が「Auto ML」と呼ぶ自動化されたプロセスで学習用データを作成している。
膨大なデータを蓄積するとなると、データ内のあらゆる特徴の分析、ラベリング、最適化をしなければならない。これには従来データサイエンティストが必要だった。「少量のデータの作成とラベリングをプログラムで自動化すれば、AIプロジェクトの持続可能性が高まり、AIモデルを人力で学習させる必要はなくなる。そのためリソースの少ない中小企業にとっての障壁が取り除かれる」とプリ氏は語る。
スタンフォード大学の准教授クリストファー・レ氏は、機械学習ベースのAIシステムを民主化して、より多くの企業に導入を促すには、まずクリーンな学習用データの収集から開始するのがよいと考えている。潜在的なバイアス、望ましい出力、用途を考慮して、トレーニング中の特定のアルゴリズム向けに微調整された小さなデータセットを作成することで、企業の時間とコスト節約が可能になる。
「人々はデータの収集に何年もかけている。そしてどの時点のデータにも、最新のデータと同じくらい高い収集コストがかかっている」(レ氏)
AIシステムの導入を検討している企業にとって、ハードウェア、モデル、プログラム、インタフェースの選択肢は豊富だが、学習用データは別だとレ氏は語る。さまざまな企業に、既に収集済みで、ラベリングされていないデータが大量にあるとしても、AIモデルの学習には役立たない。
Copyright © ITmedia, Inc. All Rights Reserved.
「AI」の学習用データ収集 その課題と解決策は
AIの学習用データを用意するときに重要なのは、量より質だ。本稿では実際の企業の事例から、質の高い学習データを集めるための方法について説明する。
この記事の著者
関連記事
新着ホワイトペーパー PR
-
製品資料
“攻撃者優位”なサイバーセキュリティ、全ての「穴」をふさぐ方法とは? -
製品資料
実際に悪用される脆弱性は4%前後 優先的に対処すべき脆弱性を把握するには? -
製品資料
HubSpotの機能を拡張する法人データ活用法 -
製品資料
面倒で非生産的な「名寄せ」作業 高精度&高効率に実施するには? -
製品資料
名刺管理には「その先」がある 成果のでない営業活動から脱却する秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
Netflixのバックエンドは「ほぼJava」 3000超のアプリを支える開発基盤の裏側
-
2
ISMSの“コンサル丸投げ”が招く数千万円の無駄 NTTドコモビジネスの脱出劇
-
3
「Microsoft 365」が乗っ取られる 跡形もなくMFAを破る手口
-
4
「WSUS」終了の時限爆弾 “本命”移行先ツールとMicrosoft提唱の新管理手法
-
5
「結局使わなくなる」Microsoft 365 Copilotを半年で定着 キリンの3施策
-
6
ベッドでの使用が「PC騒音」を悪化させる? Dellが推奨する冷却ファンの鎮め方
-
7
100億円の「Linux更新」を回避 みずほ銀行が選んだ“おきて破り”のRHEL延命策
-
8
「企業内サーバ環境の利用実態」に関するアンケート
-
9
IT製品の導入に関するアンケート「サーバ&ストレージ」編
-
10
アラート47%削減 オープンハウスが捨てた「全部メール通知」の監視体制
ホワイトペーパーランキング PR
-
1
AIエージェントで多様な日常業務を効率化するための入門ガイド
-
2
財務・会計はAI活用でどう変わる? 調査で見えた変革の道筋
-
3
AIが「わざわざ使うツール」になっていない? 業務で自然に使う導線にする秘訣
-
4
JR西日本ITソリューションズが「監視業務の属人化」を解消した方法とは?
-
5
「脱Excel」か「Excel快適化」か? 現場にやさしい業務改善の進め方
-
6
「結局、一部の人しか使わない」 AI活用が業務に定着しない根本的な理由
-
7
コスト分析で見る「デバイス復旧」の代償 損失額から導きだされた投資戦略とは
-
8
Macの安全神話は崩壊? 最新の脅威動向から見えた攻撃のトレンドと有効な対策
-
9
ゼロトラストにおける「IDaaSの課題」と補完すべき重要機能とは?
-
10
「NAS」「SAN」「DAS」は何が違う? いまさら聞けないストレージの基礎
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー