GPUを超える「IPU」(Intelligence Processing Unit)は実現するか?新興チップメーカーの挑戦

2019年11月25日 08時00分 公開
[Aaron TanComputer Weekly]

 「演算能力とデータが増えれば、データを学習する本質的にシンプルなプログラムで高性能なアルゴリズムになり、根本的なブレークスルーを生み出せる」と話すのは、英国を拠点とする新興チップメーカーGraphcoreの共同設立者兼CEOを務めるナイジェル・トゥーン氏だ。

 こうした動きは、自然言語処理(NLP)の分野で始まっている。2019年5月、Googleの研究者が「BERT」(Bidirectional Encoder Representations from Transformers)という双方向Transformerに関する論文を発表した(訳注)。BERTは、事前学習した大量のコーパス(言語情報)をベースとした汎用(はんよう)的な言語モデルで、感情分析をはじめとするNLPを向上させる道を切り開くと期待されている。

訳注:BERT自体は2018年10月11日に発表されている。また、BERTのベースとなるTransformerもGoogleが発表したニューラルネットワークで、LSTMに代表されるRNNが主流だったNLPを一歩前進させるものとして注目されている。

会員登録(無料)が必要です

 こうしたネットワークが利用するモデルではパラメーター数が増大する。その数が数億にも達することがあるため、演算には新たなパラダイムが必要になる。

 業界でAI利用への関心が高まっていると感じたトゥーン氏が、サイモン・ノールズ氏と共同でGraphcoreを設立したのは2016年のことだ。同社は、自社が名付けた「Intelligence Processing Unit」(IPU)の開発を目指している。

マシンインテリジェンス

 トゥーン氏によると、「マシンインテリジェンス」の実現を妨げる問題を幾つか解決するためにIPUを設計したという。

 「現状のマシンインテリジェンスを見ると、主に静的データを分類し、ラベル付けした大量のデータを使ってシステムをトレーニングしている。このシステムは、経験から学ぶことはない」(トゥーン氏)

 同氏はNLPを例に挙げて次のように話す。「本当に必要なのは、単語の並び、各単語の意味、そして会話の文脈を理解するマシンだ。マシンは会話の文脈を記憶し、記憶した文脈を使ってその後の会話を理解する」

 IPUは処理速度と効率を向上させるために、IPU自体が機械学習モデルとデータを保持する。遅延を最小限に抑えるため、IPUには外部メモリを配置しない。「大容量メモリが離れた位置にある場合、後からストリーミングすることは可能だ。だが演算中は全てのデータをプロセッサ内に保持する」とトゥーン氏は話す。

 各IPUは1216の特殊コアを備える。各コアには6つの独立したプログラムスレッドがあり、機械学習モデルで並列に動作する。IPUは125TFLOPSの演算性能を実現する。

 「そのため、モデルをレイヤー別ではなく複数のレイヤー全体で見ている。さらには、一つの問題を解決するために、複数のIPUを連携させることもできる。状況を把握し、複数のプロセッサで多数の並列処理を行うことができる」(トゥーン氏)

 トゥーン氏によると、IPUのアーキテクチャはトレーニングにも推論にも適しているという。現在の機械学習は、トレーニングと推論を独立したタスクとして扱うことが多い。

 「今後、経験から学ぶ確率的なシステムが実現すれば、そのシステムは導入後も経験から学び続けるだろう。そうなればトレーニングと推論の境界はなくなる」と同氏は話す。

 ソフトウェア面では、IPUは「TensorFlow」などの著名な機械学習フレームワーク(訳注)やGraphcore独自のグラフフレームワークをサポートする。このフレームワークを使って、開発者がライブラリ関数やニューラルネットワーク機能を独自に開発できる。

訳注:Graphcoreの資料には、TensorFlowの他に「PyTorch」や「MXNet」をサポートするとある。

 Graphcoreは設立以来3億ドル(約321億円)の資金を調達してきた。同社は貸借対照表上多くの現金を保有し、2020年には多くの収益を得ることを期待しているとトゥーン氏は述べている。

Copyright © ITmedia, Inc. All Rights Reserved.

新着ホワイトペーパー

製品資料 株式会社日立システムズ

生成AIを用いたサイバー攻撃が出現、進化する攻撃手法と対応方法を徹底解説

生成AIのビジネスへの適用が加速しているが、一方でサイバー犯罪・攻撃に利用されるケースも増えてきた。そこで、生成AIを用いたサイバー犯罪・攻撃の進化について深く掘り下げるとともに、これらの対処方法についても解説する。

製品資料 ServiceNow Japan合同会社

企業の経営幹部が必要とするものを提供してくれるAIエージェントとは?

企業がイノベーションを起こせるようにするには、インテリジェントでリアルタイムな意思決定ができる組織への変革が必要だ。その変革を主導する経営幹部が必要とするものを提供してくれるAIエージェントがあるという。

製品資料 ServiceNow Japan合同会社

急増するITサービスとIT資産の管理を楽にする、AIエージェントの活用方法とは?

急増するITサービスとIT資産の管理運用に、課題を抱えている組織は少なくない。予測分析や問題解決の迅速化、生産性の向上を実現するためにはどうすればよいのか。本資料では、解決策としてAIエージェントを活用する方法を解説する。

技術文書・技術解説 Snowflake合同会社

AIエージェント実践ガイド:基本概念からユースケース、克服すべき課題まで

意思決定や計画、行動を自律的にこなす「AIエージェント」に対する関心が高まる一方、実装に向けては、データの正確性やアクセスの制御など、多くの課題が立ちはだかる。その解決策や、代表的なユースケースなどについて、詳しく解説する。

製品資料 エス・アンド・アイ株式会社

コンタクトセンターで導入が急拡大する「生成AI」 実際に何ができるのか?

ビジネスにおける生成AI活用が広がる中、コンタクトセンターでも生成AIを使って業務改善につなげる動きが加速している。オペレーターと顧客とのやりとりに生成AIを活用することで、どのような成果が生まれるのか。本資料で解説する。

アイティメディアからのお知らせ

From Informa TechTarget

「テレワークでネットが遅い」の帯域幅じゃない“真犯人”はこれだ

「テレワークでネットが遅い」の帯域幅じゃない“真犯人”はこれだ
ネットワークの問題は「帯域幅を増やせば解決する」と考えてはいないだろうか。こうした誤解をしているIT担当者は珍しくない。ネットワークを快適に利用するために、持つべき視点とは。

ITmedia マーケティング新着記事

news017.png

「サイト内検索」&「ライブチャット」売れ筋TOP5(2025年5月)
今週は、サイト内検索ツールとライブチャットの国内売れ筋TOP5をそれぞれ紹介します。

news027.png

「ECプラットフォーム」売れ筋TOP10(2025年5月)
今週は、ECプラットフォーム製品(ECサイト構築ツール)の国内売れ筋TOP10を紹介します。

news023.png

「パーソナライゼーション」&「A/Bテスト」ツール売れ筋TOP5(2025年5月)
今週は、パーソナライゼーション製品と「A/Bテスト」ツールの国内売れ筋各TOP5を紹介し...