AI時代の新たな「集客の壁」
「ChatGPT」は人間の17倍口コミを読む AI独自のWeb検索ルールとは?
従来のSEO対策だけでは、情報がAI検索に拾われない恐れがある。ChatGPTを構成する3種のクローラーの挙動を分析したところ、人間の閲覧とは全く異なるパターンが浮き彫りになった。どう対策すべきか。
大規模言語モデル(LLM)やAI検索によるWeb情報の収集が加速する中、Webサイトのインフラ運用や構造設計を担うIT担当者にとって、「AIクローラーがどのようなアルゴリズムや巡回パターンでサイト内を回遊しているか」の解明は重要なテーマとなっている。
マーケティング企業のLANYは、法人向けIT製品比較サイト「ITトレンド」の協力を得て、OpenAIのAIクローラーのアクセス挙動に関する定量分析を実施した。調査期間は2024年12月から2025年11月までの1年間で、分析対象はITトレンドにおいて「Google Analytics 4」(GA4)で計測された人間のトラフィックログと、OpenAIの3種類のAIクローラーのアクセスログ(クローラー別の識別が可能な「ChatGPT」のデータ)計940万件だ。ただし相関係数や平均値などの定量分析は、アクセスが最大となった2025年10月単月のログを基に算出している。
分析の結果、事前学習を担うクローラーは特定のデータ構造やユーザー生成コンテンツ(UGC)に強く依存していることが判明した。例えば、レビューページへのアクセス割合は、人間のアクセス比で約17倍に達している。
サイト構造や内部リンク設計がAIクローラーの収集効率に及ぼす影響とは何か。役割の異なる3つのクローラーログの解析データを分析する。
3種類のクローラーの挙動
収集されたOpenAIのアクセスログをクローラー別に識別・分析すると、ChatGPTが情報収集から回答生成までのプロセスにおいて、「GPTBot」「OAI-SearchBot」「ChatGPT-User」の3種類のクローラーが明確に役割を分担していることが判明した。本調査では、これらのクローラーのアクセス数とSEO指標(検索順位、検索ボリューム、内部リンク数、外部リンク数)との関係性を「スピアマンの順位相関係数」を用いて算出、評価している。
GPTBot
第一に、事前学習用にWeb上の公開データを収集するGPTBotの挙動ログだ。検索ボリュームが登録されている一部のページ群を対象に、GPTBotのアクセス傾向を分析した結果、検索ボリュームとの相関係数は0.0、検索順位との相関係数は-0.2となり、一般的なSEO評価や需要の規模にはほとんど影響を受けず、全URLを巡回する基本挙動が確認された。
一方で、サイト内の内部リンク数とは相関係数0.4と中程度の正の相関を示している。内部リンクが1本も存在しないページの平均アクセス数が1.3回であるのに対し、100本以上の内部リンクを持つページでは12.3回と約9.5倍に達した。これによって、GPTBotはサイト内の導線構造(内部リンク)を重要度の指標とし、リンクが集まるページを重点的にクロール、学習している状況が伺える。
ディレクトリ別のアクセス構成比では、全アクセスの50.5%が製品の口コミ(レビュー)ページに集中していた。削除済みURLを除く有効ページに限定すると、その割合は72.3%に上る。人間のアクセスに占める口コミページの比率が2.9%にとどまることを考慮すると、AIモデルの学習において一次情報が極めて重視されていることが理解できる。時系列のアクセス推移では、2025年6月に約106.0万件、同年10月に約122.0万件と突発的なアクセスの波が観測されており、バッチ処理的な集中収集が実施されている。
OAI-SearchBot
第二に、ChatGPT Searchの検索インデックス作成を担うOAI-SearchBotだ。OAI-SearchBotのアクセス傾向は、検索順位(相関係数-0.2)、検索ボリューム(相関係数0.1)、内部リンク数(相関係数0.4)と、いずれのSEO指標とも強い相関を示さなかった。
アクセスの上限値を比較すると、検索結果の順位が100位圏外でSEO指標を持たないページでも、中央値で1.0回のアクセスがあり、上位ページであっても最大6.0回程度で巡回頻度が頭打ちになる挙動が確認されている。内部リンク数によるアクセス数の増加も1.6回から3.6回への約2.2倍にとどまり、GPTBotのようなハイパーリンク構造への強い依存は見られない。評価や人気度に関わらず、サイト全体のディレクトリを網羅的にインデックス化する役割に特化していることが浮き彫りとなった。実際、「ITトレンド」が2025年4月以降に新規構築した10万ページ規模のロングテールキーワード向けディレクトリに対して、公開タイミングに同期してクロール数が急増しており、サイトの規模拡大に追従してインデックスを拡大する動作が見られている。
ChatGPT-User
第三に、エンドユーザーのプロンプト入力時にリアルタイムで情報を拡張検索するChatGPT-Userだ。ChatGPT-Userのアクセスは、人間のページビュー数(PV数)と相関係数0.6という比較的強い正の相関を示した。検索ボリューム(相関係数0.3)や内部リンク数(相関係数0.5)とも相関が見られ、多くのトラフィックが集まるページにリアルタイム検索が集中する傾向がある。
アクセス先の47.4%は記事コンテンツだったが、人間とChatGPT-Userのアクセス比較では顕著な差が検出された。人間からのアクセスは「カテゴリートップ」(18.9%)や「Award、特集」(19.5%)に分散するが、ChatGPT-Userの同2カテゴリーへのアクセス比率は合計で2.4%に過ぎない。
この結果とは対照的に、製品の価格詳細ページへのアクセス比率は人間の0.6%に対して10.7%(18.6倍)、製品詳細トップページは人間の5.8%に対して23.1%(4.0倍)だった。これは、エンドユーザーがAIとの対話の中で「機能や価格の比較」などの具体的な回答を要求した際、構造化された詳細データページを、RAG(検索拡張生成)がピンポイントで参照していることを意味している。
システム運用やWebサイト構造の観点から言えば、クローラーの種類によってクロールバジェット(検索エンジンがサーバ負荷などを考慮してサイトごとに割り当てる、巡回頻度やリソースの上限)の消費や巡回アルゴリズムが異なる。内部リンク階層の最適化、構造化データによる仕様・価格情報の明視化、インデックスを妨げないサイトアーキテクチャの構築が、AI時代のWebサイト管理における新たな技術要件となる。
Copyright © ITmedia, Inc. All Rights Reserved.
本記事は制作段階でChatGPT等の生成系AIサービスを利用していますが、文責は編集部に帰属します。
TechTarget ニュースプラス
国内のIT業界ニュースを迅速に報道します。企業動向から導入事例、市場トレンドまで幅広く取り上げ、実務に直結する情報をタイムリーに提供する連載です。
関連記事
新着ホワイトペーパー PR
-
製品資料
[株式会社キーエンス] なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは -
製品資料
[株式会社セールスフォース・ジャパン] 「CRMは設計と無関係」は本当か? PLMとの融合で実現する高速開発 -
事例
[日本ヒューレット・パッカード合同会社] AIエージェントの時代にどう備える? 「新たな働き手」を支える3要素とは -
製品資料
[日本ヒューレット・パッカード合同会社] “横並びの自動化”から脱却、AI活用で生産性と競争力を高める秘訣 -
製品資料
[サイボウズ株式会社] AIが「わざわざ使うツール」になっていない? 業務で自然に使う導線にする秘訣
こんなメディアも見られています
TechTargetジャパンに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
ベンダーコンテンツ PR
From Informa TechTarget
SpecialPR
アクセスランキング
-
1
なぜ「全社配布Copilot」は使われないのか? 失敗に学ぶAI定着
-
2
法務と開発者で「言葉が通じない」問題 トヨタやソニーが語るOSS管理の真実
-
3
ChatGPTは“検索しまくり”でGeminiは“淡泊”? データが明かすAIの裏側
-
4
なぜ「Gemini 4 Argon」は出遅れたのか? Googleが狙う“逆転のシナリオ”
-
5
「中堅・中小企業のネットワーク・セキュリティ運用実態」に関するアンケート
-
6
損保ジャパンはなぜ「COBOL」を捨てなかったのか? 脱メインフレームの真相
-
7
「Wi-Fi 7」経由でWindowsが乗っ取られる? 最高権限奪取の恐怖
-
8
情報漏えいはなぜ繰り返されるのか 今すぐ見直すべき「境界」
-
9
情シスの約8割が転職や退職を意識 調査で分かった“辞めたくなる最大の理由”
-
10
【漫画付き】ひとり情シス協会が明かす、RAG導入でしくじる企業「2つの共通点」
ホワイトペーパーランキング PR
-
1
不審メールの経路や見せ方に変化? 2026年夏の3事例から見えた動向と対処方法
-
2
家庭用Wi-Fiルーターの業務利用は危険? 避けるべき理由と具体的な対策
-
3
Microsoft 365を安全に運用 うっかりミスやサイバー攻撃に備えるデータ保護術
-
4
財務部門がAIを最大限に活用する方法 無駄のない戦略的リーダーシップへの道
-
5
LLMが兵器化? 元FBI高官が鳴らす警鐘とセキュリティツール統合のポイント
-
6
「オンプレミス回帰」せざるを得ない“合理的な理由”
-
7
なぜRPA導入は頓挫する? シナリオ作成の壁を乗り越える解決策とは
-
8
生成AIを開発に導入しても効果が見えない? 実証実験で分かった成果と課題
-
9
経産省DX指針から読み解く、受発注業務デジタル化ロードマップ
-
10
HDDを使わない「SSDオンリー」が無謀なのはなぜ?
TechTargetジャパン SNS
インフォメーション
注目情報をチェック
TechTargetジャパンをフォロー