日本語EN

ChatGPT は自社サイトに来ている?OpenAI のボット 3 種類を当社のログで確かめた(2026年10月)

先に答え:OpenAI がサイトに送るアクセスは 1 種類ではなく、検索用(OAI-SearchBot)、学習用(GPTBot)、ユーザーの依頼でページを開くアクセス(ChatGPT-User)の 3 種類があり、別々に確かめる必要があります。当社のサイト pw.migurei.ai では、OAI-SearchBot を名乗るアクセスは 3 週間で 36 回ありましたが、すべて /robots.txt で、ページは 1 つも取得していません。一方、学習用の GPTBot は 10 月 16 日に一度だけ、トップページからリンクをたどって 15 ページを取得しました。

記録日:2026 年 10 月 21 日(項目ごとに集計日を書いています)。数字はすべて当社のサイト 1 つのログと、当社が AI アプリに質問した記録からのものです。

English

このページの言葉

  • 当社:migurei(HBLAB の子会社)。Parallel World を運営し、検証用のサイト pw.migurei.ai(以下 pw)を持っています。
  • ボット:人ではなくプログラムがページを取得しに来るアクセス。サーバーのログに、名乗った名前(UA:ユーザーエージェント)と接続元の IP アドレスが残ります。
  • IP 確認:UA は誰でも名乗れるので、IP アドレスが OpenAI の公開している一覧に入っているかで本物かを確かめること。
  • Run:当社が決まった質問を AI アプリに入力し、回答とサーバーのログを記録する 1 回の試行。

OpenAI の 3 つのアクセス

OpenAI は公式ページ(https://developers.openai.com/api/docs/bots )で、次の 3 つを分けて説明しています。

名前(UA)役割当社のログで見えたこと
OAI-SearchBotChatGPT の検索のためにページを集める/robots.txt だけ。ページ取得は 0 件
GPTBotAI モデルの学習のためにページを集める10 月 16 日に 1 回、15 ページ
ChatGPT-Userユーザーの依頼でページを開く当社の Run で URL を貼ったときに来た
  • OAI-SearchBot には 2 種類の書き方があります。ページを取得する OAI-SearchBot/1.4 と、robots.txt で許可を確かめるだけの OAI-SearchBot/1.4; robots.txt;、OAI-SearchBot/1.0 です(OpenAI の同じページ、2026 年 10 月 18 日に読んだもの)。ログで「OAI-SearchBot が来た」と見えても、許可の確認だけかもしれません。
  • OpenAI は、robots.txt で OAI-SearchBot を拒否したサイトは ChatGPT の検索の回答に表示されない(ナビゲーション用のリンクとしては出ることがある)と書いています。
  • OpenAI は「両方のボットを許可しているサイトでは、重複を避けるため、1 回のクロールの結果を両方の目的に使うことがある」(原文は英語、当社訳)とも書いています("may" で、いつ、どのくらいかは書かれていません)。
  • 当社が読んだ公式ページ(2026 年 10 月 18 日)には、サイトマップや URL を送る方法の記載はありません。

当社のログ:検索用の OAI-SearchBot

  • Cloudflare(サイトの手前で通信を中継するサービス)の記録では、2026 年 10 月 1 日から 10 月 21 日までに、OAI-SearchBot を名乗るアクセスが pw に 36 回ありました。36 回とも /robots.txt で、36 回とも正常に応答(HTTP 200)しています。
  • 手前で止めていたわけではありません。Cloudflare の AI ボット関連の設定はすべてオフで、pw では、ブロックの記録は 0 件でした(2026 年 10 月 21 日に確認)。
  • サーバーのログで IP 確認をした分(2026 年 10 月 19 日までの 30 日間)では、許可の確認だけの書き方が 30 回、ページを取得する OAI-SearchBot/1.4 は 0 回でした。サイトマップに載っている 19 の URL のうち、OAI-SearchBot が取得したのは 0 件です。

当社のログ:学習用の GPTBot

  • 2026 年 10 月 16 日 03:11:45〜03:12:03(UTC。日本時間 12:11:45〜12:12:03)の 18 秒間に、GPTBot(IP 確認済み)がトップページから順にリンクをたどり、18 のパスを取得しました。当時サイトマップにあった 17 の URL のうち 15 件です。取得しなかった 2 件は、サイト内のどこからもリンクしていないページでした。
  • その 0.3 秒前に、同じ IP アドレスの範囲から OAI-SearchBot が /robots.txt を読んでいます。
  • その後、GPTBot はサイトマップ(/sitemap.xml)を毎日取得しています(10 月 16 日〜19 日の 4 回)。ただ、サイトマップにだけ載っていてリンクのない新しいページ 4 件は、1 件も取得していません。10 月 16 日以降、GPTBot のページ取得は 0 件です(10 月 19 日時点)。

つまり、OAI-SearchBot のページ取得が 0 件だからといって、OpenAI の検索にページがないとは言えません。OpenAI 自身が「1 回のクロールを両方に使うことがある」と書いており、GPTBot は 15 ページを取得しているからです。ただし、それが実際に検索に使われたかは、当社のログからは分かりません。

当社の Run:ChatGPT の回答には何が出たか

  • ChatGPT-User:当社の Run で質問に pw の URL を貼ったとき、ChatGPT-User がページを取得しに来ました。2026 年 10 月 1 日〜17 日に、143 回の Run で 173 リクエストです。
  • 引用されたページ:2026 年 9 月 30 日〜10 月 15 日の 1,571 回の Run で、ChatGPT は当社の会社サイト migurei.ai のページを出典に挙げました(/en が 25 回の Run、/ja が 17 回の Run など)。pw のページは一度も出典になっていません。ただし、これらの Run の大半は、質問に pw の URL を貼ったか、サービス名を挙げたものです。
  • サービス名を出さない質問:サービス名も URL も出さない 9 種類の質問(「自分のサイトが AI からどう見えるか調べたい」といった質問を含む)を、4 つのアプリに計 99 回聞きました。回答から取得できたリンク 433 件のうち、当社のサイトを指すものは 0 件でした(2026 年 10 月 13 日の集計)。ChatGPT の回答で「+N」とまとめて隠れている出典と、Gemini の出典は記録できていません。
  • AI アプリからの人の来訪:ChatGPT などの AI アプリから pw に人が来た記録は、10 月 1 日〜16 日で 0 件です。ただし pw はほとんど知られていない検証用のサイトで、AI アプリ経由に限らず、人の来訪自体がほとんどありません。

外部の事例(1 件、未検証)

Zenn に掲載された記事(hirajo さん、2026 年 10 月 11 日、https://zenn.dev/hirajo/articles/crawler-google-vs-chatgpt )によると、新しく作ったサイトで、OAI-SearchBot は最初の数日 robots.txt だけを読み、記事を公開した 2 日後に初めて記事ページを取得したそうです。筆者は OpenAI の一覧で IP を確認したと書いています。

これは 1 人の筆者による報告で、当社は確かめていません。筆者自身が運営するサイトです。そのサイトには質問に答える記事があり、当社が数え始めたころ(10 月 14 日)の pw にはサービス紹介のページしかなかった、という違いはありますが、それが差の原因かどうかは分かりません。

このページも検証の対象です

このページは、質問に答える記事として pw に公開しています。OpenAI の検索用ボット(ページを取得する OAI-SearchBot/1.4)が公開後 72 時間以内に取得に来るかを記録し、来なかった場合も含めて結果をここに追記します。公開前の予想は「来ない」です。pw で OAI-SearchBot が読んだのは robots.txt だけで、このページにリンクしているページも、OpenAI はまだ取得していないためです。

自社サイトで確かめる方法

  1. アクセスログで 3 つを分けて数える:UA に OAI-SearchBot、GPTBot、ChatGPT-User を含む行を別々に数えます。OAI-SearchBot は、ページを取得する OAI-SearchBot/1.4 と、robots.txt; の付いた許可確認を分けます。
  2. IP を確かめる:OpenAI の公式ページ(https://developers.openai.com/api/docs/bots )にある IP 一覧に入っているものだけを数えます。
  3. `robots.txt` と手前の設定を確かめる:robots.txt で OAI-SearchBot を拒否していないか、CDN(Cloudflare など)の AI ボット関連の設定でブロックしていないかを見ます。OpenAI によると、robots.txt の変更が検索に反映されるまで約 24 時間かかります。
  4. 人の来訪を見る:リファラー(参照元)に chatgpt.com があるか、URL に utm_source=chatgpt.com が付いているかを見ます。ChatGPT はこれを付けることが多いですが、すべてのアプリが参照元を残すわけではありません。

各ボットが pw に最初に来た時刻は、新しいサブドメインに AI 検索ボットはいつ来るか にまとめています。JavaScript、構造化データ、llms.txt がどう読まれたかは AI はページ上の数字や構造化データを正しく読み取れている? に書いています。

この記録から言えないこと

  • サイト 1 つ、数週間の記録です。 数字は回数で、割合や傾向ではありません。自社サイトで同じになるとは限りません。
  • OAI-SearchBot がページを取得しない理由は分かりません。 定期的に robots.txt を読むのは許可の確認だけかもしれず、ボットが「ページを取得するつもりがある」ことを示しません。0 回だったことは、今後も来ないことを意味しません。
  • GPTBot が取得したページが ChatGPT の検索に使われたかは分かりません。 OpenAI の「両方に使うことがある」という説明と矛盾しない、というだけです。
  • ChatGPT が migurei.ai を引用した理由も分かりません。 ChatGPT の検索が Bing の結果を使っているかどうかは、当社ではまだ確かめられていません。また、引用された Run の大半は、URL や名前を質問に入れたものでした。
  • ログに残るのは、サーバーまで届いたアクセスだけです。 他社の検索結果やキャッシュ経由で内容が使われても、当社のログには出ません。Cloudflare の 36 回は UA の名乗りで数えたもので、IP 確認はしていません。
  • 書いたのも測ったのも当社です。 第三者の確認はありません。

このページが参照した記録

  • knowledge/claims/oai-searchbot-polls-only-robots-on-pw.md(当社の観察、10 月 19 日と 21 日に更新)
  • knowledge/claims/gptbot-claudebot-first-crawled-pw-after-worker-cutover.md、gptbot-reads-pw-sitemap-daily-fetches-no-new-url.md(当社の観察)
  • knowledge/claims/openai-one-crawl-may-serve-search-and-training.md(外部の出典:OpenAI 公式ページ)
  • knowledge/claims/ai-apps-fetch-pasted-urls-with-distinct-uas.md、chatgpt-cites-migurei-ai-pages-not-pw.md、no-ai-referred-human-visit-to-pw.md、pw-human-page-views-mostly-own-tools-and-team.md(当社の観察)
  • docs/evidence/2026-10-13-n3-cited-domains-v2.md(当社の集計)
  • knowledge/claims/new-site-oai-searchbot-reads-pages-after-articles.md(外部の出典:Zenn の記事 1 件)