品質とAIコストを両立する新機構
膨らむAIコストに歯止め GitHubのマルチモデルルーターは何が違うのか
高騰するAIトークン費用に悩む企業へ。GitHubが検証中の新機構「HydraFusion」は、タスク別に複数モデルを自動連携させ品質とコストを両立する。開発現場の常識を変える3つの独自手法を解剖する。
GitHubの新しいマルチモデルルーター「HydraFusion」は、入力に基づいてワークフローを最適化し、出力の品質とAIコストのバランスを取るツールだ。
このツールは、開発者がAIアシスタント「GitHub Copilot」に入力したタスクを分析する。その上で実行計画を作成し、1つまたは複数のモデルを選択する。
Moor Insights & Strategyでバイスプレジデント兼プリンシパルアナリストを務めるジェイソン・アンダーセン氏は米TechTargetの取材に、企業のAIコストが上昇する中で、自律型エージェントのワークフローを制御する手段としてHydraFusionやマルチモデルルーティング全般が支持を集めていると話す。
「現在、トークンコストは開発者にとって重大な関心事で、モデルルーターは大幅なコスト削減に役立つ。入力内容や求められる出力によっては、コストの変動幅が非常に大きくなる場合がある」(アンダーセン氏)
HydraFusionは、同年初頭に導入されたCopilotの自動モデル選択機能を基盤としている。GitHubの公式ブログでは、HydraFusionを自律型エージェント開発に向けた「最初の試み」と表現している。「最適なモデルの選択から、各タスクを解決する最善の方法を動的に構築するアプローチへの転換」だという。従来の自動選択機能はワークフローごとに1つのモデルを選んでいたが、HydraFusionはワークフローの種類に応じて1つまたは複数のモデルを選択する。
GitHubのコミュニティーページによると、利用料金はHydraFusionが使用するモデルの消費トークン数に基づき、各モデルの標準料金で計算される。
本記事では、開発現場の常識を変えるHydraFusionが採った3つの独自手法を解剖する。
HydraFusionは何が異なるのか
CursorやIBMなど多くのベンダーが独自のモデルルーターを提供している。「モデルルーター自体は以前から存在している」とアンダーセン氏は語る。「AWS(Amazon Web Services)やMicrosoft Azureといったハイパースケーラーもモデルルーターを提供しているが、自社がサポートするモデルに限定されている。Stripeが買収を進めているOpenRouterや、NVIDIAのSwitchyardは異なるクラウドをまたいで利用できる」
アンダーセン氏によると、HydraFusionは他社製品にはないプラットフォーム非依存性を備えている点で優位に立つ可能性がある。HydraFusionはローカルモデルとリモートモデルを統合予定で、さらにGitHub Copilotで利用可能になり次第、新たな最先端モデルもモデルプールに追加される。「GitHubはモデルの選択肢やホスティング環境で、最も幅広い選択肢を提供する可能性がある。選択の自由とクロスプラットフォーム対応を重視してきたGitHubにとってこれは重要な要素だ」とアンダーセン氏は指摘する。
Ned in the Cloudの創業者兼テクニカルエデュケーターであるネッド・ベラバンス氏は、ユーザーがオーケストレーション層にモデルを持ち込める点に価値があると話す。
「開発者は特定の開発環境に習熟する傾向がある。それがClaude CodeであれVisual Studio Codeであれ同じだ。開発者は使い慣れた環境に他のモデルを持ち込みたいと考える。そのため、望むモデルを自由に選べるアプローチには注目が集まる」(ベラバンス氏)
HydraFusionの実行パターン
HydraFusionはタスクをスコアリングし、1つまたは複数のモデルにルーティングする。GitHubの既存フレームワーク「Hybrid Dynamic Routing Architecture(HyDRA)」を基盤とし、推論、コード生成、デバッグ、ツール利用の各観点からタスクを評価する。HydraFusionはHyDRAが算出したスコアを用いて、最適なオーケストレーションパターンを選択する。
タスクの評価に用いるオーケストレーションパターンも、HydraFusionの強みとなる可能性がある。評価結果に応じて、ルーターは3つのアプローチから選択する。
- Single(単一):ルーターが1つのモデルを選択し、タスクの完了まで処理させる
- Cascade(カスケード):効率的なモデルで解決策の下書きとテストを実施する。テストに失敗した場合は、より高性能なモデルにタスクを引き継ぐ
- Critique(批評):1つのモデルが下書きを作成後、異なる系統のモデルにレビューを依頼する。レビュアーは下書きを変更できずコメントのみを付与し、最初のモデルがその指摘を基に修正する。この手法はラバーダックデバッグに似ている
Informa TechTargetの調査部門であるOmdiaでアナリストを務めるトルステン・フォーク氏は次のように指摘する。「全てのコーディング作業にLLM(大規模言語モデル)を使う手法は、費用対効果の面で成り立たないケースが多い。LLMの出力結果の一貫性を保つ難しさも浮き彫りになっている。Cursorもエージェントのルーティングやワークフローを処理するが、タスクの評価に基づいてワークフロー自体を選択する段階には達していない。この差は実務で大きな意味を持つ」
HydraFusionのリリースを発表したブログの執筆陣によると、ルーティングの処理は実際の開発現場におけるGitHub Copilotの利用実態を基に設計されたという。その上で「CheckpointBench」「DeepSWE」「TerminalBench 2.1」といった複数のベンチマークを用いて精度を高めている。
HydraFusionは現在も研究開発が続けられている。リサーチプレビューに参加した開発者には、フィードバック時にデバッグログやセッションIDの共有が求められている。
「実際の運用環境で検証しない限り、HydraFusionの真価を判断するのは難しい。GitHubにとっては、マルチエージェントワークフローを統括する基盤としてCopilotの価値を示すための第一歩となるはずだ」(フォーク氏)
Copyright © ITmedia, Inc. All Rights Reserved.
TechTarget発 先取りITトレンド
米国TechTargetの豊富な記事の中から、最新技術解説や注目分野の製品比較、海外企業のIT製品導入事例などを厳選してお届けします。
この記事の著者
関連記事
新着ホワイトペーパー PR
-
事例
[サイボウズ株式会社] DXに必要な「Dスキル」「Xスキル」を持った人材を育成するには? -
市場調査・トレンド
[サイボウズ株式会社] データで見る、DXが「順調に進む企業」と「つまずく企業」の違い -
製品資料
[サイボウズ株式会社] 賛否が割れがちな「Notesからの移行」 新環境への移行を納得してもらうには? -
事例
[ServiceNow Japan合同会社] 農林中金に学ぶ内製開発 処理効率を約2倍に高めAI活用も加速させた方法とは? -
事例
[ServiceNow Japan合同会社] NTTグループのデジタル変革術、17万人が利用する決裁プロセス刷新の全貌
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
【基本情報技術者試験】「デュプレックスシステム」と「デュアルシステム」の違いは?
-
2
100億円の「Linux更新」を回避 みずほ銀行が選んだ“おきて破り”のRHEL延命策
-
3
MS月例パッチが1000件突破 人手不足の情シスを襲う「月1回メンテ」の崩壊
-
4
サーバ約70台をAWSへ ヤナセが移行前にやった「通信要件の可視化」
-
5
脱VMwareの真実:データセンター大手がNutanixを選んだ「コスト以上の理由」
-
6
「Microsoft一択」で本当にいいのか 知らぬ間にライセンス費用が膨らむ真相
-
7
「データストレージの活用方法」に関するアンケート
-
8
「VMware離れ」は本当か 3000社がVCF 9にかじを切った現実的な理由
-
9
AIインフラの理想形? 「5層のケーキ」を垂直統合するための近道とは
-
10
多品種小ロットの「手書き・配合ミス」を克服 キャニオンスパイスの食品工場DX
ホワイトペーパーランキング PR
-
1
生成AIのハルシネーションを防止 回答精度を高めるセマンティックレイヤーとは
-
2
5回聞くだけじゃ足りない? トヨタ式「なぜなぜ分析」の正しい実践方法
-
3
AIエージェントで多様な日常業務を効率化するための入門ガイド
-
4
インシデント対応工数を約3割削減、東京ガスの事例に学ぶ監視体制刷新のコツ
-
5
「脱Excel」か「Excel快適化」か? 現場にやさしい業務改善の進め方
-
6
マンガで解説:「ゼロトラスト」「SASE」の必要性とメリット
-
7
5分で分かる「セキュア大容量ファイル転送サービス」の機能とメリット
-
8
情報セキュリティ対策早分かりガイド:25の自社診断で弱点と解決策を理解
-
9
国税庁の次世代基幹システム「KSK2」稼働開始に向けて、対応すべき変更点とは?
-
10
AIが「わざわざ使うツール」になっていない? 業務で自然に使う導線にする秘訣
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー