422件の誘導事例を確認
生成AIが「危険サイト」に誘導する事例を確認、どのような手口？
生成AIは便利な一方で、新たな脅威の温床にもなっている。攻撃者がインターネット上の情報を不正に操作することで、生成AIが危険なWebサイトを案内してしまうという。どのような手口なのか。
近年、「ChatGPT」などの生成AI（AI：人工知能）を活用したチャットbotは、日常的な情報検索や文章作成の支援など、さまざまな場面で広く使われている。しかし、その利便性が高まる一方で、生成AIが提示する情報の安全性に対する懸念も浮上している。
トレンドマイクロの脅威リサーチャーは、生成AIチャットbotの回答に含まれる外部Webサイトへのリンクや、アクセス元のリファラー情報などを独自に調査および分析した。回答の参照URLに自動付与されるパラメータなどを利用することで、生成AIサービスからの誘導実態を詳細に把握できる。
その結果、2026年2月のテレメトリーデータ（システムや機器の稼働状況に関するデータ）から、生成AIを経由して少なくとも422件の危険なWebサイトに誘導された事例を確認した。これらの危険サイトには、偽ショッピングサイトや不正プログラム配信サイトが含まれており、利用者が詐欺被害に遭うリスクが潜んでいる。
生成AIが意図せず危険なWebサイトを案内してしまう背景には、どのような攻撃手法や生成AIの特性が関係しているのか。
検索の「AIによる概要」も安全ではない？
生成AIが危険なWebサイトを利用者に提示してしまう要因の一つとして、トレンドマイクロは攻撃者による「SEOポイズニング」などの影響を指摘している。攻撃者は特定の偽サイトを検索エンジンの検索結果の上位に表示させるため、インターネット上の情報を不正に操作する。生成AIがそれらの汚染された情報を学習や参照の対象とすることで、危険なサイトを含む誤った回答が生成されてしまう仕組みだ。
トレンドマイクロが検証した事例では、特定の商品を販売するWebサイトを尋ねるプロンプトに対し、偽ショッピングサイトへのリンクが含まれる回答が生成された（図1）。
図1 生成AIが偽サイトに誘導する画面例（提供：トレンドマイクロ）《クリックで拡大》
誘導先の偽サイトは、正規のブランドサイトに似せたデザインを使用し、公式の商品画像を流用しているケースもあり、一見しただけでは真偽の見極めが極めて困難だ（図2）。利用者がAIの回答をうのみにしてこれらのWebサイトを利用した場合、代金を支払っても商品が届かないどころか、個人情報が悪用される恐れがある。
図2 正規ブランドに似せた偽ショッピングサイトの例（提供：トレンドマイクロ）《クリックで拡大》
生成AI特有のハルシネーション（もっともらしい偽情報の生成）による被害事例も確認されている。動画生成AIの公式サイトのURLを、生成AIチャットbotに繰り返し質問したところ、事実とは異なる詐欺サイトのURLが公式サイトとして提示されるケースがあった。データ分析からも、複数の利用者がこの回答を信じて同じ詐欺サイトに誘導されていたことが明らかになっている。
検索エンジンの検索結果に表示される「AIによる概要」機能においても、同様のリスクが確認されている（図3）。
図3 検索エンジンの「AIによる概要」に偽サイトが紛れ込む事例（提供：トレンドマイクロ）《クリックで拡大》
この機能は検索キーワードに関連する情報を、AIモデルが複数のWebサイトから整理し、要点をまとめて提示する便利なものだ。しかしここでも、紹介されるWebサイトの中に偽ショッピングサイトが含まれている事例が報告された。
こうした脅威に対し、トレンドマイクロは「利用者にも生成AIの特性を踏まえたリテラシーが求められる」と述べる。生成AIはもっともらしい文章を確率的に出力する仕組みであるため、提示された情報が常に最新かつ正確であるとは限らない。
企業がビジネスで生成AIを活用する上では、利便性と隣り合わせのリスクを正しく評価するプロセスが欠かせない。生成AIがエージェントとして自律的に動作する時代を見据え、今後は生成AIの出力結果に対する検証の自動化や、AIツールに対する包括的なガバナンスの構築が、企業にとって急務になる。
Copyright © ITmedia, Inc. All Rights Reserved.
本記事は制作段階でChatGPT等の生成系AIサービスを利用していますが、文責は編集部に帰属します。
TechTarget ニュースプラス
国内のIT業界ニュースを迅速に報道します。企業動向から導入事例、市場トレンドまで幅広く取り上げ、実務に直結する情報をタイムリーに提供する連載です。
関連記事
新着ホワイトペーパー PR
-
製品資料
[株式会社キーエンス] なぜRPA導入は頓挫する？ シナリオ作成の壁を乗り越える解決策とは -
製品資料
[株式会社セールスフォース・ジャパン] 「CRMは設計と無関係」は本当か？ PLMとの融合で実現する高速開発 -
事例
[日本ヒューレット・パッカード合同会社] AIエージェントの時代にどう備える？ 「新たな働き手」を支える3要素とは -
製品資料
[日本ヒューレット・パッカード合同会社] “横並びの自動化”から脱却、AI活用で生産性と競争力を高める秘訣 -
製品資料
[サイボウズ株式会社] AIが「わざわざ使うツール」になっていない？ 業務で自然に使う導線にする秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
なぜ「全社配布Copilot」は使われないのか？ 失敗に学ぶAI定着
-
2
法務と開発者で「言葉が通じない」問題 トヨタやソニーが語るOSS管理の真実
-
3
【漫画付き】ひとり情シス協会が明かす、RAG導入でしくじる企業「2つの共通点」
-
4
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
5
損保ジャパンはなぜ「COBOL」を捨てなかったのか？ 脱メインフレームの真相
-
6
ChatGPTは“検索しまくり”でGeminiは“淡泊”？ データが明かすAIの裏側
-
7
情報漏えいはなぜ繰り返されるのか 今すぐ見直すべき「境界」
-
8
BMWも導入 78兆円市場に化ける「フィジカルAI」の衝撃
-
9
「Wi-Fi 7」経由でWindowsが乗っ取られる？ 最高権限奪取の恐怖
-
10
「AI活用を前提とした業務PCへの移行」に関するアンケート
ホワイトペーパーランキング PR
-
1
不審メールの経路や見せ方に変化？ 2026年夏の3事例から見えた動向と対処方法
-
2
家庭用Wi-Fiルーターの業務利用は危険？ 避けるべき理由と具体的な対策
-
3
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
-
4
財務部門がAIを最大限に活用する方法 無駄のない戦略的リーダーシップへの道
-
5
LLMが兵器化？ 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント
-
6
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
7
なぜRPA導入は頓挫する？ シナリオ作成の壁を乗り越える解決策とは
-
8
生成AIを開発に導入しても効果が見えない？ 実証実験で分かった成果と課題
-
9
経産省DX指針から読み解く、受発注業務デジタル化ロードマップ
-
10
HDDを使わない「SSDオンリー」が無謀なのはなぜ？
TechTargetジャパン SNS
@techtarget_itmをフォロー
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー