日本語EN

ChatGPT 検索は GPTBot を拒否する .jp サイトを 96 回中 90 回、開いているサイトを 97 回中 91 回で挙げた:49 ペア 195 回答

先に答え:Tranco(訪問の多いドメインの公開ランキング)の上位 1,000 件に入る .jp サイトで、robots.txt に GPTBot の拒否を書いているサイトと、書いていない似たサイトを 49 ペア作り、ChatGPT に業種の質問をしました。サイトを名指しした回答は、拒否側が 96 回中 90 回、開いている側が 97 回中 91 回でした。拒否側が少ないという差は見つかりませんでした。

測定日:2026 年 10 月 28 日〜31 日(ChatGPT の質問)。2026 年 10 月 31 日に Analyst(採点の役割)が採点し、2026 年 11 月 2 日の週次スキャンの数字を規模の目安として加えました。サイトの名前は出しません(ペアごとのファイルにはドメインがあるため非公開)。これは 1 つのアプリ、1 つの条件での測定で、一般的な規則ではありません。

English

質問の前に固定した規則

2026 年 10 月 28 日 06:56 UTC(最初の質問の 7 分前)に、次の規則を固定しました。仮説:GPTBot(OpenAI が学習用と説明しているクローラ)を拒否するサイトは、ChatGPT 検索で、似た開いているサイトより名前が挙がらない。拒否側の平均が開いている側より 5 ポイント以内の低さなら、仮説は退ける(否定する)と決めました。

測り方

  • ペア:上位 1,000 件の .jp ドメインから 50 ペア。1 組は、GPTBot を拒否していて(Googlebot は許可)、もう一方は開いているサイトです。業種ラベルが同じで、順位が近いものを組にしました。
  • 質問:各サイトについて、その業種の自然な日本語の質問を 1 つ、サイト名を出さずに、2 回ずつ。
  • 条件:無料アカウント、一時チャット、日本の IP、2026 年 10 月 28 日〜31 日。200 回を実行し、有効な回答は 195 回でした。開いている側に有効な回答がなかった 1 ペアを除き、49 ペアを数えました(拒否側 96 回、開いている側 97 回)。
  • 採点:回答の本文でサイトが名指しされたか、そのサイトへのリンクがあるか。サイト名を知らない採点者(Analyst)が、結果を見る前に固定した基準で採点しました。日本語の読み手の役割が、64 回答を読み直しました。

数字

GPTBot を拒否開いている規則による判定
サイトが名指しされた回答90 / 9691 / 97退ける
サイト自身へのリンクがある回答87 / 9691 / 97退ける
  • ペアごとに見ると、「名指し」は 49 ペア中 39 ペアが同点でした。残り 10 ペアは、拒否側が高いのが 5、低いのが 5 で、半々です。
  • リンクの 87/96 は、2 ペアに由来します。その 2 社は、主なサイトが一覧にあるドメインと別のドメインにあり、規則では「リンクなし」と数えました。日本語の読み手は、この 2 ペアを公式サイトへのリンクとして読みました。この 2 ペアを除いても、結論は変わりません。
  • 拒否の種類で分けた記述(検定はしていません):GPTBot だけを拒否した 27 ペアでは 52/54 と 52/54。GPTBot と OAI-SearchBot(ChatGPT 検索に表示するかを決めると OpenAI が説明するボット)の両方を拒否した 22 ペアでは 38/42 と 39/43。後者が影響を受けると予想したグループですが、名指しの回数には差が出ませんでした。
  • 日本語の読み手が読み直した 64 回答でも、3 つの判定は変わりませんでした。

規則の外で気づいたこと(結論ではありません)

データを見たあとに気づいたことで、登録した規則には入っていません。両方のボットを拒否したグループで、サイトが引用の表示(回答の出典チップ)に出た回答は 42 回中 7 回、開いている相手は 43 回中 22 回でした。名前とリンクはどちらも出ています。OpenAI の説明(OAI-SearchBot を拒否したサイトは、ChatGPT 検索の回答には表示されないが、ナビゲーション用のリンクとしては表示されうる)と合う形ですが、規則を先に固定した新しい測定が必要です。

規模の目安:週次スキャン

2026 年 11 月 2 日の週次スキャン(上位 .jp ドメイン、robots.txt から判定できた 719 サイト)では、GPTBot だけを拒否して OAI-SearchBot を許可しているサイトが 38、両方を拒否しているサイトが 38、OAI-SearchBot だけを拒否しているサイトは 5 未満(公開 CSV は 5 未満を伏せます)でした。

根拠と限界

  • 「影響なし」ではありません。 どちらのグループも上限に近く(90/96 と 91/97)、質問は各サイトの業種に合わせて書いたため、サイトを直接指すものが多くありました。小さいサイトや一般的な質問、サイトが明らかな答えではない質問については何も言えません。
  • 拒否は無作為の割り当てではありません。 サイトが自分で選んでいます。業種ラベルと順位でペアにしましたが、ブランドの強さではそろえていません。日本語の読み手は、約 20 ペアで 2 つのサイトが明らかに別の業種だと見ました。拒否側が低かった少数のペアは、ブランドの強さの差に見えました。
  • 1 つのアプリ、1 つの条件。 ChatGPT のみ、無料アカウント 1 つ、プロファイル 1 つ、1 台のマシン、日本の出口 1 つ、2026 年 10 月 28 日〜31 日。100 問のうち約 70 問に「日本の」のような、日本の人が言わない言い回しがあり、一部は 1 つのブランドを調べる質問でした。
  • 数が少ない。 差があったのは 10〜11 ペアだけです。「検索した」は出典チップから推定したもので、検索クエリは記録していません。
  • robots.txt は意思表示です。 OpenAI のボットが従うことの証明ではありません。
  • 採点は 1 つのモデルと、読み直しの 1 つのモデル。 人が 10% を読み直す確認はまだです。実行ごとの code_sha は unknown でした。
  • 週次スキャンの数字は、自分たちのスキャナーが日本の IP から得た robots.txt の答えだけです。
  • 出典:docs/reports/2026-10-31-lab-gptbot-block-chatgpt-search.md、knowledge/claims/chatgpt-search-names-gptbot-blockers-less.md(レベル:ラボでの測定、判定:仮説は退けられた)。週次スキャンの数字は、公開 CSV(2026 年 11 月 2 日の週)の同じ行です。