ChatGPT、Perplexity、Gemini、Claude、Copilot：各エンジンはどこから回答を得ているのか

回答エンジンは外から見ると似ています。質問を入れると、引用の付いた回答が出てきます。その下では三つの点で異なります。各エンジンが取得の対象とするインデックス、そのインデックスを支えるクローラー、そして引用が読者に届く経路です。実務上の違いのほとんどはインデックスから生まれます。エンジンは、その取得システムが到達できるものしか引用できないからです。

最初に一つ断っておきます。すべてのバックエンドが公開されているわけではありません。取得のパイプラインを詳しく記載している企業もあれば、クローラーしか記載していない企業もあります。記載がないものについては、このページはそのとおりに書きます。検索拡張生成に共通する仕組みは回答エンジンはどのようにソースを選ぶのかで扱っています。このページはエンジンごとのリファレンスです。

ChatGPT

OpenAI は三つの取得者を説明しています。GPTBot は基盤モデルの学習のためにコンテンツを収集し、OAI-SearchBot は ChatGPT の検索機能でウェブサイトを表示し、ChatGPT-User はユーザーの操作が必要とするときにページを取得します。文書化されたレバーは OAI-SearchBot です。OpenAI は、これを拒否したサイトは ChatGPT の検索の回答に表示されないと述べています。トークンの詳細と拒否のトレードオフは AI クローラーで扱っています。

OpenAI が文書化していないのは、ChatGPT の検索を支えるインデックスの構成と、その中でソースがどう順位付けられるかです。特定の第三者のインデックスの上で動いているという主張は OpenAI に確認されておらず、検証されていないものとして扱うべきです。OpenAI はパブリッシャー向けの引用レポートも文書化していません。

Perplexity

Perplexity は二つのエージェントを説明しています。PerplexityBot は Perplexity の検索結果でウェブサイトを表示しリンクするもので、ドキュメントによれば AI の基盤モデル向けにコンテンツをクロールするためには使われません。Perplexity-User はユーザーの質問のためにページを取得し、人が取得を要求したため一般に robots.txt を無視します。したがって PerplexityBot を拒否しても学習面では何も守れず、Perplexity の結果から外れるだけです。

これらのクローラーの説明を超えて、Perplexity は取得インデックスの構築方法やソースの順位付けを公には文書化しておらず、パブリッシャー向けの引用レポートも文書化していません。

Gemini と Google の AI 機能

Google は最も詳しく文書化されたエンジンです。その AI 機能のガイドには、AI Overviews と AI Mode が中核の検索ランキングシステムに基づいて根拠付けられた検索拡張生成を用い、検索インデックスからページを取得すると記されています。参加条件は従来型のものです。クロール可能で、インデックスされ、スニペットの対象であることです。回答には裏付けとなるページへの目立つクリック可能なリンクが示され、Search Console には生成 AI のパフォーマンス レポートがあります。これがこのトラフィックを見るための一次データの方法です。

クローラーの側では、Googlebot が検索とその上に築かれたすべてを支え、Google-Extended は Gemini のモデル学習と特定の根拠付けの用途を定める robots.txt の制御トークンであって、検索への掲載を定めるものではありません。この区別はよく誤読されます。

Claude

Anthropic は三つのエージェントを説明しています。ClaudeBot はモデルの学習に寄与しうるウェブのコンテンツを収集し、Claude-SearchBot は検索応答の関連性と正確さを高めるためにコンテンツを分析し、Claude-User は個人が Claude に質問したときにページを取得します。Anthropic の開発者向けドキュメントには、ウェブ検索を用いて作られた回答には、結果から引いたソースの引用が含まれると記されています。

その検索を支えるインデックスは公には文書化されていません。クローラーに関する記事は各エージェントの役割を説明するもので、検索結果がどこから来るかを説明するものではありませんし、開発者向けドキュメントは検索プロバイダやインデックスの名前を挙げていません。Claude のウェブ検索を支えるインデックスに関するどんな主張も検証されていません。Anthropic はパブリッシャー向けの引用レポートを文書化していません。

Microsoft Copilot

Copilot は、既存の検索インデックスの上に築かれたエンジンの最も明快な例です。Microsoft は Microsoft 365 Copilot と Copilot Chat について取得の経路を文書化しています。ウェブ検索が有効な場合、Copilot はユーザーのプロンプトから検索クエリを生成し、それを Bing の検索サービスに送り、その結果を使って応答をウェブのデータで根拠付けます。したがってこれらの回答での可視性は、Bing のインデックスとそのクローラーである Bingbot を経由します。Copilot が受け取った Bing の結果をどう重み付けし選択するかは文書化されていません。

2026 年 2 月、Bing Webmaster Tools に AI Performance レポートが追加され、パブリック プレビューとして提供されています。Microsoft Copilot、Bing の AI 生成の要約、一部のパートナー連携にわたる引用を対象としています。どの URL が引用されたか、それらを取得した根拠付けのクエリ、引用の動きが時間とともにどう変化するかを示します。これにより、一次データの引用レポートを持つ企業は Google と Microsoft の 2 社だけとなり、OpenAI、Anthropic、Perplexity は同等のものを文書化していません。

これが robots.txt にとって意味すること

上のトークンは、学習用のクローラー、検索用のクローラー、ユーザー起点の取得者に分かれ、拒否したときの結果はそれぞれ異なります。GPTBot や ClaudeBot のような学習用のボットを拒否することは、どのエンジンの回答にも文書化された代償のない方針上の選択です。OAI-SearchBot や PerplexityBot のような検索用のボットを拒否すれば、そのエンジンの引用の面から外れます。トークンごとのトレードオフは AI クローラーにあります。

仕事は共通、表示面は異なる

上のどれも、5 つの別々の分野があるという話にはなりません。どのエンジンも同じ入力を必要とします。クローラーが到達できるページ、引用できるほど平易に答えを述べた一節、そして最新に保たれたコンテンツです。エンジンが異なるのは、鮮度にどれだけ強く依存するかです。7,683 ページと 47,097 件の引用を対象にした調査では、Gemini は 78 パーセントの割合で過去 1 年以内に更新されたコンテンツを引用し、ChatGPT は 73 パーセント、Perplexity は 65 パーセントでした。何をどれくらいの頻度で更新すべきかは鮮度で扱っています。

異なるのはエンジンごとのあなたの立ち位置です。インデックスが違うからです。自分がどこにいるかを知る唯一の方法は、抜き取り確認ではなく繰り返しのサンプリングでエンジンごとに測ることです。言語をまたいでもサンプリングしてください。LLM のブランド応答の計測では、クエリの言語が回答の分散の 26.5 から 32.0 パーセントを説明し、ブランドのアイデンティティは 1.5 パーセントでした。それが市場にとって何を意味するかは多言語の GEO で扱っています。