---
title: "A. ボットと AI アプリ | Parallel World - migurei"
description: "A. ボットと AI アプリ：Parallel World のラボの各原則と、その下の主張 75 件。根拠の確かさ、出典、証明していないこと、サイト運営者にできること。"
lang: "ja"
url: "https://pw.migurei.ai/ja/handbook/bots-and-apps"
---

# A. ボットと AI アプリ

ページがサーバーから AI の回答に届くまで：どのボットが取得し、アプリがどの検索インデックスを読み、ボットが新しい URL をどう知り、何があればページが読まれ信頼されるか。

英語版から機械翻訳しています。内容が食い違う場合は英語版が正です。

デプロイのたびに当社のナレッジベースから作り直しています。原則 31 件、主張 200 件。最新の記録：2026-11-12。

[English](https://pw.migurei.ai/en/handbook/bots-and-apps) · [ハンドブックの目次](https://pw.migurei.ai/ja/handbook)

各原則の後に、その原則を支える主張を並べています。根拠の確かさの説明はハンドブックの目次ページにあります。

## A1. 存在の連鎖

AI アプリがページを挙げるのは、そのページが「見つかる → 取得される → インデックスされる → 検索で取り出される → 信頼される → 引用される」の連鎖を通り抜けたときだけです。前の段階が次の段階を止めるので、取得されることが引用されることより先です。

**原則の確かさ：** 外部の情報源

### [仮説] AI アプリは発見型の質問に答えるとき、回答時にサイトを訪れるのではなく、事前に作られた検索インデックスを使っている可能性があります。これはまだ仮説です。

- **確かさ：** 仮説。記録 2026-10-10、2027-01-10 までに再確認
- **根拠：** 大規模なベトナムのサイトでの自社テスト 1 回（2026-10-02）。アプリはサイト名を挙げたが、そのサーバーへのリクエストは 0 件。各アプリ 6 問。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 1 サイト、ベトナム語、1 回、各アプリ 6 問のみです。ChatGPT が Bing にどこまで頼っているかは OpenAI が確認していません。自社のツールページ 2 つでの追加テストはまだ結果が出ていません。
- **サイト運営者にできること：** まだありません：これは仮説です。

### [外部の情報源] OpenAI は、OAI-SearchBot をブロックしたサイトは ChatGPT の検索回答に表示されないと述べ、Anthropic は、Claude-SearchBot をブロックすると Claude の検索結果での露出が減る可能性があると述べています。どちらも新しい URL を送る手段は提供していません。

- **確かさ：** 外部の情報源。記録 2026-10-10、2027-01-10 までに再確認
- **根拠：** 2026-10-10 に読んだ OpenAI のボットに関するドキュメントと、Anthropic のクローラーに関するサポート記事。
- **出典：** [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-10), [support.claude.com](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler) (2026-10-10)
- **証明していないこと：** これらのボットを許可することは必要条件であって十分条件ではなく、速さについては何も言っていません。当社が robots.txt に各ボット向けの明示的な Allow グループを追加しても、その後 72〜96時間（2026-10-21〜2026-10-26）の取得ページは 0件でした。1サイトだけの結果です。
- **サイト運営者にできること：** robots.txt で OAI-SearchBot や Claude-SearchBot をブロックしないでください。OpenAI では変更が反映されるまで約 24時間かかります。明示的な Allow 行で来るとは期待せず、これらのボットが既に取得しているページから自社ページへのリンクを得てください。
- **ほかに挙げている原則：** [A2](https://pw.migurei.ai/ja/handbook/bots-and-apps#a2), [A3](https://pw.migurei.ai/ja/handbook/bots-and-apps#a3)

### [外部の情報源] Google が新しい URL を見つけるのは、既知のページからのリンクか送信されたサイトマップ経由だけです。新しいサブドメイン pw.migurei.ai には10日間 Googlebot が来ませんでしたが、Search Console でサイトマップを送信した当日（2026-10-12）に13 URL 中12を取得しました。

- **確かさ：** 外部の情報源。記録 2026-10-12、2027-01-12 までに再確認
- **根拠：** Google 検索セントラルと Search Console ヘルプ（2026-10-11 閲覧）、および pw.migurei.ai の自社サーバーログ（2026-10-01〜2026-10-13）。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/fundamentals/how-search-works) (2025-12-18), [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap) (2026-07-08), [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/ask-google-to-recrawl) (2025-12-10), [support.google.com](https://support.google.com/webmasters/answer/34592) (2026-10-11), [support.google.com](https://support.google.com/webmasters/answer/9008080) (2026-10-11), [developers.google.com](https://developers.google.com/search/docs/appearance/ai-features) (2025-12-10), [developers.google.com](https://developers.google.com/search/docs/fundamentals/ai-optimization-guide) (2026-07-10), [pw.migurei.ai](https://pw.migurei.ai/sitemap.xml) (2026-10-10)
- **証明していないこと：** Google は時期もクロールも約束していないので、10日間は単に順番待ちだった可能性があります。migurei.ai からのリンクは試していないため、リンクが無効とは言えません。取得はインデックス登録ではなく、翌日も URL 検査では未登録のページがありました。
- **サイト運営者にできること：** 新しいサブドメインは Google Search Console で確認し（ドメインプロパティなら全サブドメインを含みます）、そこでサイトマップを送信してください。さらに Google が既に知っているページから通常のリンクを張ってください。

### [外部の情報源] Google によると、ページが AI による概要や AI モードの出典リンクになるには、インデックスされ、スニペット付きで表示できる状態であることが条件で、それ以外の技術要件はありません。noindex、nosnippet、max-snippet、data-nosnippet で制限できます（2026-10-15 確認）。

- **確かさ：** 外部の情報源。記録 2026-10-15、2027-01-15 までに再確認
- **根拠：** AI 機能とウェブサイトに関する Google 検索セントラルのページ（2025-12-10 更新、2026-10-15 確認）です。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/appearance/ai-features) (2025-12-10)
- **証明していないこと：** これは必要条件であって十分条件ではありません。Google もインデックス登録や表示は保証されないとしています。検索以外の Gemini アプリが同じ条件を使うとは書かれていません。
- **サイト運営者にできること：** Google の AI 回答で引用されたいページからは、意図的でない限り noindex と nosnippet を外し、Search Console でそれらのページがインデックスされているか確認してください。

## A2. アプリごとに別のインデックス

ChatGPT は OAI-SearchBot のインデックス（Bing も使う可能性あり）、Claude は Brave、Gemini と AI による概要は Google、Copilot は Bing、Perplexity は PerplexityBot のインデックスを読みます。1 つのインデックスに入っても、ほかのインデックスに入るわけではありません。

**原則の確かさ：** 外部の情報源

### [外部の情報源] Anthropic は全製品の Web Search の再委託先として、Brave Search を TurboPuffer とともに挙げています。ただし Claude の回答がどの程度 Brave のインデックスに基づくかは明らかにしていません。

- **確かさ：** 外部の情報源。記録 2026-10-13、2026-11-21 までに再確認
- **根拠：** 2026-10-13 に閲覧した Anthropic の再委託先一覧です。ヘルプページと API ドキュメントには提供元の記載がありません。二次的な報道と当社の小規模な Claude テストも参考にしました。
- **出典：** [trust.anthropic.com](https://trust.anthropic.com/subprocessors) (2026-10-13), [search.brave.com](https://search.brave.com/) (2026-10-13), [support.anthropic.com](https://support.anthropic.com/en/articles/10684626-enabling-and-using-web-search) (2026-10-13), [docs.claude.com](https://docs.claude.com/en/docs/agents-and-tools/tool-use/web-search-tool) (2026-10-13), [xponent21.com](https://xponent21.com/insights/claude-web-search-brave-turbopuffer/) (2026-07-02)
- **証明していないこと：** 一覧には割合がなく、どの質問をどの提供元が処理するかも書かれていません。TurboPuffer はベクトルデータベースで、Claude のインデックスを保持しているかは推測にすぎません。当社の Claude テスト（2 回とも 0/9、引用が保存されないことも多い）では、Brave の利用を確認も否定もできません。
- **サイト運営者にできること：** Claude のウェブ検索は Brave に依存している可能性があります。Brave Search で自社サイトを検索して、主要なページがインデックスされているか確認してください。されていなければ、Brave のフォームで再クロールを依頼してください。
- **ほかに挙げている原則：** [D3](https://pw.migurei.ai/ja/handbook/agent-world#d3)

### [外部の情報源] Ahrefsによると（日本、2026-09-29〜2026-09-30）、日本でAIアプリが最も多く引用する10ドメインは日本語版Wikipedia、Google、note、Yahoo!知恵袋、YouTube、アメブロ、PR TIMES、my-best、Weblio、コトバンクです。ChatGPTではPR TIMESが2位、Geminiではnoteが1位です。

- **確かさ：** 外部の情報源。記録 2026-10-14、2027-01-14 までに再確認
- **根拠：** 2026-09-30公開のAhrefs Brand Radarランキング（2026-10-14に確認）。GEOツール販売会社のブログでも要約されています。
- **出典：** [ahrefs.com](https://ahrefs.com/ja/blog/brand-radar-top-10-cited-domains-2026-september/) (2026-09-30), [jinrai.co.jp](https://jinrai.co.jp/blog/2026/10/14/ai-cited-domains-japan-2026-09/) (2026-10-14)
- **証明していないこと：** 計測ツールを販売する会社のデータです。全業種の一般的な質問であり、B2Bツールに関する質問ではありません。順位であって割合ではありません。noteやPR TIMESへの投稿で新しいブランドが名前を挙げられることは示していません。
- **サイト運営者にできること：** プレスリリースや記事を出すなら、PR TIMES（ChatGPTで強い）やnote（Gemini、Perplexity、Copilot、AIモードで強い）を検討してください。知恵袋のようなQ&Aサイトに自社が一般ユーザーを装って投稿しないでください。それはなりすましです。
- **ほかに挙げている原則：** [A6](https://pw.migurei.ai/ja/handbook/bots-and-apps#a6), [B4](https://pw.migurei.ai/ja/handbook/japanese-buyers#b4), [B7](https://pw.migurei.ai/ja/handbook/japanese-buyers#b7)

### [当社ラボでの観察] 日本のサイトの AI ボット対応を調べている調査を尋ねると、Gemini は Google のインデックス登録から約38時間後の 2026-10-28 に3回中3回私たちの調査ページを挙げました。しかし 2026-11-05 にはページがインデックスに残っていたにもかかわらず3回中0回でした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-29、2026-11-29 までに再確認
- **根拠：** 2026-10-28、2026-10-29、2026-11-05 に Gemini、ChatGPT、Claude、DeepSeek に行ったテスト質問（ブラインド採点）と、Search Console でのインデックス確認です。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** インデックス登録前の回答がないため、Google のインデックスが原因だとは示せていません。1問1日あたり3回、1アカウント、1台の端末のみです。Gemini が私たちを挙げなくなった理由は不明です。migurei.ai が挙がることは Parallel World が挙がることと同じではありません。
- **サイト運営者にできること：** 重要なデータページを Google にインデックスさせ、URL 検査で確認してください。ただし、インデックスされれば Gemini の回答に載り続けるとは考えず、同じ質問を日を変えて何度か Gemini に聞いてください。
- **ほかに挙げている原則：** [A6](https://pw.migurei.ai/ja/handbook/bots-and-apps#a6)

### [当社ラボでの観察] 2026-10-29、Claude は当社の GitHub リポジトリを読んだあと、日本のサイトについての当社の週次調査を最も直接的な出典として挙げ、pw.migurei.ai のページにリンクしました。これは 12 回中 1 回で、そのリポジトリは 2026-11-03 から公開されていません。

- **確かさ：** 当社ラボでの観察。記録 2026-10-30、2026-11-30 までに再確認
- **根拠：** 2026-10-28 と 2026-10-29 に Claude（Haiku 5.5 Low、通常チャット、日本の IP）に行ったテスト質問をブラインドで採点し、自社サーバーログと照合しました。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/ja/research/japanese-sites-and-ai-bots) (2026-10-29)
- **証明していないこと：** 12 回中 1 回だけの出来事です。アカウント履歴のある通常チャットのため、記憶の影響を除外できません。使われた検索エンジンは不明です。回答には誤りがあり、厳格な基準では不合格でした。名前が挙がることは、購入者が訪問することと同じではありません。
- **サイト運営者にできること：** Claude があなたについて実際に読んでいるページを確認してください。自社サイトではなく、GitHub のような第三者のホストのページであることが多いです。そのページを正確で完全な状態に保ってください。
- **ほかに挙げている原則：** [A6](https://pw.migurei.ai/ja/handbook/bots-and-apps#a6)

### [当社ラボでの観察] 2026-10-29、Brave は当社ページのタイトルでの検索で当社の GitHub リポジトリを1位にし、当社サイトは1ページ目にありませんでした。2026-11-03、その GitHub アカウントが停止された後は、同種の検索で当社サイトが1位になりました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-30、2026-11-30 までに再確認
- **根拠：** 2026-10-29〜2026-11-03 に当社サーバーから行った Brave 検索結果の単発の確認と、テスト質問での Claude の検索結果。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 各検索1回のみ、日本国外のサーバー IP からの確認です。検索語は当社のページタイトルで、購入者が入力する言葉ではありません。Claude は Brave 以外の検索プロバイダーを使う可能性があります。Claude がその後当社ページを開くかは検証していません。
- **サイト運営者にできること：** 自社のページタイトルや主要な質問を Brave で検索してください。他のホストのコピーが自社サイトより上位なら、人が尋ねる言葉そのものを自社ページに含めましょう。順位を1つの外部プラットフォームのアカウントに頼らないでください。

### [当社ラボでの観察] 日本語の統計に関する 2 つの質問で、Claude（Haiku 5.5 Low）は 12 回中 9 回、まず英語でウェブ検索しました（2026-10-28 と 2026-10-29）。当社のリポジトリが表示されたのは、最初のクエリに日本語が含まれていた 1 回だけでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-30、2026-11-30 までに再確認
- **根拠：** 2026-10-28 と 2026-10-29 の通常チャットでのテスト 12 回で、Claude が表示した検索クエリと結果です。後日の 1 回のテストも同じ傾向でした。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 1 つのモデル、2 つの質問、2 日間の結果です。アカウント履歴がクエリに影響している可能性があります。英語になるのが質問内の英語の専門用語のせいか、Claude が常に翻訳するためかは分かりません。裏側の検索エンジンは記録されていません。
- **サイト運営者にできること：** 技術的なテーマの日本語ページでは、タイトル、説明文、最初の段落のいずれかに、Claude が検索に使う語（ボット名、「block rate」、「Japan」、「survey」）を含む英語の一文を加えてください。
- **ほかに挙げている原則：** [B2](https://pw.migurei.ai/ja/handbook/japanese-buyers#b2)

### [当社ラボでの観察] 無料版 ChatGPT は 2026-11-02 の 6 回中 3 回で pw.migurei.ai の統計ページにリンクし、2026-11-03 にも同じ結果でした。そのページは OpenAI や Bing のボットに一度も取得されていません。ChatGPT が当社の出典チップとして表示したのは、毎回 note の記事でした。

- **確かさ：** 当社ラボでの観察。記録 2026-11-03、2026-11-17 までに再確認
- **根拠：** 無料版 ChatGPT（一時チャット、日本の IP）へのテスト質問をブラインドで採点し（2026-11-02〜2026-11-04）、自社サーバーログと照合しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 以前の 0/12 から結果が上がった理由は分かりません。同時に複数の条件が変わったためです。URL が note 記事からコピーされたというのは推測です。1 問あたり 3 回、1 アカウントでの実行で、アカウントの記憶の影響も除外できていません。有料版 ChatGPT については何も言えません。
- **サイト運営者にできること：** note などの第三者プラットフォームの記事を経由して、AI の回答が自社ページにたどり着いていないか確認してください。その記事を正確に保ち、質問そのものへの答えと自社ページへのリンクを載せてください。
- **ほかに挙げている原則：** [B7](https://pw.migurei.ai/ja/handbook/japanese-buyers#b7)

### [外部の情報源] 同じ質問に対して、ChatGPT の既定モデル（GPT-5.3 Instant）がブランドのサイトを引用した割合は 8%、有料の GPT-5.4 Thinking では 56% でした。二つのモデルで共通する出典は 7% だけで、既定モデルが主に引用したのは記事や第三者のレビューでした。

- **確かさ：** 外部の情報源。記録 2026-11-03、2027-01-03 までに再確認
- **根拠：** Writesonic による 50 問の調査を要約した Search Engine Journal の記事（2026-03-12 公開、2026-11-03 閲覧）です。調査の原文は読んでいません。
- **出典：** [www.searchenginejournal.com](https://www.searchenginejournal.com/chatgpts-default-premium-models-search-the-web-differently/569594/) (2026-11-03)
- **証明していないこと：** 数値は GEO ツールを売る 1 社のもので、英語の買い物に関する 50 問が対象です。日本語の質問、ログインしていない利用、2026年3月以降の既定モデルに当てはまるかは不明です。当社の無料版 ChatGPT のテストも同じ傾向でしたが、8% と 56% の差は検証できていません。
- **サイト運営者にできること：** 多くの利用者は既定モデルを使うため、主要な事実を信頼できる第三者の記事やレビューページにも載せてください。有料モデルはブランドのサイトをはるかに多く引用するので、自社ページも充実させてください。

**ここにも関係する主張：**

- [[外部の情報源] OpenAI は、OAI-SearchBot をブロックしたサイトは ChatGPT の検索回答に表示されないと述べ、Anthropic は、Claude-SearchBot をブロックすると Claude の検索結果での露出が減る可能性があると述べています。どちらも新しい URL を送る手段は提供していません。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-4bb87522)

## A3. 入口が必要

ボットは、すでに取得したページのリンク、サイト運営者向けツールから送ったサイトマップ、または通知の仕組み（IndexNow、再取得フォーム）で新しい URL を見つけます。入口はボットごとに違い、サイト運営者が使える入口のないボットもあります。

**原則の確かさ：** 外部の情報源

### [仮説] 仮説：OAI-SearchBot は、既にクロールしているサイトでは、直前に取得したページのリンクから新しいページの大半を見つけます。調べた大規模サイトでは、新規ページの初回取得の92%が、リンク元ページの取得直後でした。

- **確かさ：** 仮説。記録 2026-10-13、2026-11-13 までに再確認
- **根拠：** ベトナムの大規模サイトのサーバーログ（2026-06-19〜2026-10-02、ボット IP は OpenAI の公開リストで確認）と OpenAI のボット説明（2026-10-13 閲覧）。
- **出典：** [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-13)
- **証明していないこと：** 運用歴のある1サイトの観察に過ぎません。たどったリンクはすべて同一ホスト内で、別ホストへのリンクをたどるかは未検証です。別ホストからリンクを張る私たちの試験ではボットが来ませんでした。初回取得の35%は経路不明です。取得はインデックス登録ではありません。
- **サイト運営者にできること：** まだありません：これは仮説です。

### [外部の情報源] IndexNow（変更したURLを検索エンジンに知らせるプロトコル）はBingなどの参加エンジンに届きますがGoogleには届かず、アカウントは不要で、クロールも保証しません。私たちのサイトでは初期の通知（2026-10-14、2026-10-15）の数秒後にBingbotが来ましたが、その後の4回（2026-10-17〜2026-10-21）には来ませんでした。

- **確かさ：** 外部の情報源。記録 2026-10-10、2026-11-21 までに再確認
- **根拠：** IndexNowとBingの文書（2026-10-10〜2026-10-21に確認）と、IPで検証したBingbotを記録したpw.migurei.aiの自社サーバーログ。
- **出典：** [www.indexnow.org](https://www.indexnow.org/documentation) (2026-10-10), [www.indexnow.org](https://www.indexnow.org/faq) (2026-10-10), [www.bing.com](https://www.bing.com/indexnow/getstarted) (2026-10-10), [www.indexnow.org](https://www.indexnow.org/searchengines.json) (2026-10-13)
- **証明していないこと：** 文書には所要時間の記載がありません。私たちの観察はいずれもデプロイ1回ごとのもので、対照のある測定ではありません。数分差で送ったBingへのURL送信とIndexNowの効果は切り分けられません。OpenAI、Anthropic、Perplexity、Google、Braveのクローラーには届きません。
- **サイト運営者にできること：** IndexNowのキーファイルをサイトのルートに置き、デプロイのたびに200を返すか確認してください（私たちは一度404になりました）。ページ変更時にIndexNowで通知しつつ、サイトマップを最新に保ち、Bing Webmaster ToolsでBingがそのURLを把握しているか確認してください。

### [外部の情報源] Brave Search にはウェブマスターツールがなく、IndexNow も受け付けません。サイト運営者が使える唯一の窓口は、1つの URL の再取得を依頼するフォームで、Brave はこれを更新・削除したページ向けと説明しています。

- **確かさ：** 外部の情報源。記録 2026-10-13、2027-01-13 までに再確認
- **根拠：** Brave のヘルプページと送信フォーム、IndexNow が公開する検索エンジン一覧、いずれも 2026-10-13 に確認。
- **出典：** [search.brave.com](https://search.brave.com/help/not-found) (2026-10-13), [search.brave.com](https://search.brave.com/submit-url) (2026-10-13), [search.brave.com](https://search.brave.com/help/brave-search-crawler) (2026-10-13), [www.indexnow.org](https://www.indexnow.org/searchengines.json) (2026-10-13)
- **証明していないこと：** このフォームが新しい URL にも有効か、再取得にどのくらいかかるかは、Brave の文書に書かれていません。
- **サイト運営者にできること：** ページを更新したら、search.brave.com の再取得フォームを使ってください。新しいページで試すこともできます。IndexNow の通知が Brave に届くとは考えないでください。

### [当社ラボでの観察] 2026-10-01〜2026-10-29、OpenAI の検索用クローラー OAI-SearchBot は pw.migurei.ai に58回来ましたが、取得したのは robots.txt だけでページは一度も取得しませんでした。一方、学習用クローラー GPTBot は 2026-10-26 に HTML ページ18件を取得しました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-14、2026-11-09 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（2026-09-14〜2026-10-29、ボット IP は OpenAI の公開リストで確認）と、Cloudflare の設定・エッジ統計。
- **出典：** [zenn.dev](https://zenn.dev/hirajo/articles/crawler-google-vs-chatgpt) (2026-10-11)
- **証明していないこと：** 定期的な robots.txt 取得は単なる許可確認かもしれません。1サイトのみです。GPTBot の取得は、ページが ChatGPT の検索インデックスに入ったことを示しません。Cloudflare エッジでのブロックは設定とエッジデータで否定しましたが、カスタムのファイアウォールルールは読めませんでした。
- **サイト運営者にできること：** OAI-SearchBot が robots.txt だけでなくページを取得しているか、ログで確認してください。ファイアウォールや CDN でブロックしていないことを確かめ、既に読まれているページから取得する価値のあるページへリンクしてください。

### [外部の情報源] Google はサイトマップの URL を書かれたとおりにクロールし、検索結果に表示したい版（正規 URL）を完全な絶対 URL で記載するよう求めています。リダイレクトする URL やエラーを返す URL はその版ではありません。

- **確かさ：** 外部の情報源。記録 2026-10-15、2027-01-15 までに再確認
- **根拠：** Google のサイトマップ文書（2026-07-08 更新）、2026-10-15 に確認。加えて日本の小売サイト 3 社でサイトマップ URL を各 20 件調べた当社スキャン、2026-10-14。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap) (2026-07-08)
- **証明していないこと：** Google は、サイトマップ内のリダイレクト URL にペナルティがあるとも、クロールがどれだけ遅れるとも述べていません。当社スキャナーのユーザーエージェントへの 403 は、Googlebot も 403 を受けている証明にはなりません。
- **サイト運営者にできること：** 200 を返す最終 URL だけを記載してください。https、正規のホストとパス、リダイレクトなし、テスト用や削除済みページなしです。サイトマップの全 URL を一度取得し、リダイレクトや失敗するものを直してください。

### [外部の情報源] 2026年7月に始まった試験で、Cloudflare のネットワークから得たシグナル（新しい URL、ページの変更、壊れた URL やリダイレクト）が OpenAI の検索クローラーのページ発見を助けています。Cloudflare 全体の約 1% で、数億件の新しいページが OpenAI のインデックスに加わったとされます。

- **確かさ：** 外部の情報源。記録 2026-10-16、2026-11-16 までに再確認
- **根拠：** OpenAI と共同執筆した Cloudflare のブログ記事（2026-10-15）と Cloudflare のプレスリリース（2026-07-08）。2026-10-16 と 2026-10-21 に確認。
- **出典：** [blog.cloudflare.com](https://blog.cloudflare.com/cloudflare-openai-discovery-agentic-web/) (2026-10-16), [ppc.land](https://ppc.land/cloudflare-gives-openai-network-signals-covering-20-of-the-web/) (2026-10-16), [www.cloudflare.com](https://www.cloudflare.com/press/press-releases/2026/cloudflare-announces-research-pilot-with-openai/) (2026-10-21), [www.suzukikenichi.com](https://www.suzukikenichi.com/blog/cloudflare-openai-pilot-adds-hundreds-of-millions-of-new-pages-to-the-search-index/) (2026-10-21)
- **証明していないこと：** 両社自身の発表で、検証できるデータはありません。参加方法、ボット名、遅延、サイト別・国別の効果は書かれていません。自社ログ（2026-10-13〜2026-10-21）では、OpenAI の検索ボットは robots.txt しか取得せず、ページは一度も取得しませんでした。
- **サイト運営者にできること：** 参加方法が公開されていないので、これに頼らないでください。存在しないページには正しく 404 を返し、未知の URL をトップページにリダイレクトしないこと。Cloudflare AI Crawl Control で AI のアクセス状況を確認してください。

### [外部の情報源] Google は RSS や Atom フィードをサイトマップとして受け付け、WebSub で変更を通知できるとしています。当社サイトでは、WebSub の通知で Googlebot は 22 秒以内にフィードへ来ましたが、新しい 2 ページへは 72 時間（2026-10-17〜2026-10-20）で 0 ページでした。

- **確かさ：** 外部の情報源。記録 2026-10-16、2026-11-15 までに再確認
- **根拠：** Google のサイトマップ文書と W3C の WebSub 仕様、2026-10-16 に確認。pw.migurei.ai の当社サーバーログ、2026-10-17〜2026-10-20。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap) (2026-07-08), [www.w3.org](https://www.w3.org/TR/websub/) (2026-07-08), [pubsubhubbub.appspot.com](https://pubsubhubbub.appspot.com/) (2026-07-08)
- **証明していないこと：** 1 回のデプロイで、通知なしの比較対象もなく、Googlebot のクロールがごく少ないサイトでの結果です。他のサイトで WebSub が遅い、役に立たないということは示しません。Google は速さを示しておらず、AI 検索ボットが WebSub を読むと書いた文書もありません。
- **サイト運営者にできること：** ニュースや記事を公開しているなら、WebSub ハブへのリンクを含む Atom または RSS フィードを用意し、ハブに通知してください（無料、アカウント不要）。新しいページには、引き続きインデックス登録のリクエストと、クロール済みページからのリンクを使ってください。

### [外部の情報源] 公式 MCP Registry は、アカウントなしでリモート MCP サーバー（streamable-http の URL とウェブサイト URL）を受け付けます。ドメイン所有者は DNS の TXT レコードか /.well-known/mcp-registry-auth ファイルで所有を証明し、アグリゲーターは公開 API を定期的に（例：1 時間ごと）取得することが想定されています。

- **確かさ：** 外部の情報源。記録 2026-10-16、2026-12-16 までに再確認
- **根拠：** MCP Registry のドキュメントと GitHub 上のリファレンス（2026-10-16 閲覧）、および 2026-10-26 に HTTP ファイル方式で行った当社の掲載。
- **出典：** [modelcontextprotocol.io](https://modelcontextprotocol.io/registry/authentication) (2026-10-16), [modelcontextprotocol.io](https://modelcontextprotocol.io/registry/registry-aggregators) (2026-10-16), [github.com](https://github.com/modelcontextprotocol/registry/blob/main/docs/reference/server-json/generic-server-json.md) (2026-10-16), [registry.modelcontextprotocol.io](https://registry.modelcontextprotocol.io/v0.1/servers?search=seo&limit=3) (2026-10-16), [pub.towardsai.net](https://pub.towardsai.net/mcp-registries-in-mid-2026-one-upstream-won-2ce541b92036) (2026-10-16)
- **証明していないこと：** どのアグリゲーターがレジストリを読み、ウェブサイト URL をどう表示するかを示す文書はありません。「1 日以内に掲載」はブログ記事 1 本の情報です。レジストリはまだプレビュー版です。登録内容は編集できず、誤った登録は非推奨または削除の状態にできるだけです。
- **サイト運営者にできること：** サイトに実際の MCP サーバーがあるなら、他のディレクトリより先に、DNS または HTTP のドメイン認証で公式 MCP Registry に登録してください。公開後は変更できないため、メタデータは事前によく確認しましょう。

### [外部の情報源] OpenAI は、サイトが OAI-SearchBot と GPTBot の両方を許可している場合、1回のクロールを検索と学習の両方に使うことがあると説明しています。OAI-SearchBot のページ取得が見えなくても、OpenAI の検索データにページがないとは限りません。

- **確かさ：** 外部の情報源。記録 2026-10-17、2026-11-17 までに再確認
- **根拠：** OpenAI のクローラー説明（2026-10-16 閲覧）と、OAI-SearchBot が robots.txt を読んだ直後に GPTBot がページを取得した pw.migurei.ai の自社ログ。
- **出典：** [developers.openai.com](https://developers.openai.com/api/docs/bots)
- **証明していないこと：** 「may」は、いつ、どのボットで、どの頻度かを示しません。GPTBot が取得したページが検索インデックスに入るか、どのくらいで入るかも示しません。調べた .jp サイト719件のうち、検索は許可し学習は拒否するのは4.9%でしたが、これは宣言でありボットの挙動ではありません。
- **サイト運営者にできること：** ChatGPT 検索に表示されたいなら OAI-SearchBot を許可してください。OpenAI がページを持っているか判断するときは GPTBot と OAI-SearchBot の訪問を合わせて数え、robots.txt 変更後は約24時間待ってください。
- **ほかに挙げている原則：** [C3](https://pw.migurei.ai/ja/handbook/open-and-closed#c3)

### [当社ラボでの観察] GPTBot と ClaudeBot は、私たちがサイトを Cloudflare Workers に移行した約1時間後の 2026-10-16 に、初めて pw.migurei.ai を取得しました。GPTBot はトップページからのリンクを辿り（サイトマップの17 URL 中15）、ClaudeBot は17 URL すべてを取得し、その後もサイトマップを読み直し続けました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-17、2026-10-23 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（2026-10-02〜2026-10-16）で、ボットの IP は公開されている範囲と照合して確認しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 原因はわかりません。時刻が重なっても、移行がボットを呼び込んだとは言えません。Cloudflare のネットワーク上のシグナル、エッジのルール、偶然の可能性も否定できていません。取得されたことは OpenAI や Anthropic の検索インデックスに入ったことを意味しません（ClaudeBot は学習用ボットです）。1日、1ホストの観察です。
- **サイト運営者にできること：** GPTBot はリンクされたページにしか到達せず、リンクのない2ページを取りこぼしたため、すべてのページをトップページから通常の HTML リンクで繋いでください。ホスティングを変更したら、確認済みの GPTBot と ClaudeBot の訪問をログで確認してください。

### [当社ラボでの観察] 2026-10-21 時点で、Bing Webmaster Tools は migurei.ai の M-Meeting 日本語ページを最終取得 2026-10-03、サイズ 0 バイトと表示し、他の3言語版は約 196〜200 KB でした。Bing は migurei.ai のサイトマップを1つも保持していませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-21、2026-10-28 までに再確認
- **根拠：** 2026-10-21 に読んだ Bing Webmaster API と、同日の migurei.ai の当社サーバーログ。
- **出典：** [migurei.ai](https://migurei.ai/) (2026-10-21), [pw.migurei.ai](https://pw.migurei.ai/sitemap.xml) (2026-10-21), [migurei.ai](https://migurei.ai/sitemap.xml) (2026-10-21)
- **証明していないこと：** サイズ 0 は未処理の取得を API がそう表示しているだけかもしれず、インデックス内のページが空とは限りません。ステータス欄は4つの URL すべてで 0 のため、何も読み取れません。Bing が URL を知っていてもインデックス済みとは限りません。以前の Bingbot のログ行はユーザーエージェントでのみ判定したものです。
- **サイト運営者にできること：** 重要ページの各言語版を Bing Webmaster Tools で確認してください。サイズ 0 や古い取得日のものがあれば、その URL を送信し、サイトマップも Bing Webmaster Tools で直接送信してください。今回は robots.txt に書くだけでは不十分でした。

### [当社ラボでの観察] 2026-10-21 時点で、M-Meeting の日本語・韓国語・ベトナム語ページへはサイトマップと llms.txt からしかたどれず（リンクも hreflang もなし）、14 日間で Googlebot はベトナム語ページを一度も取得しませんでした。2026-10-26 にインデックス登録をリクエストすると、Googlebot は 24 時間以内に 3 ページすべてを取得しました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-21、2026-11-12 までに再確認
- **根拠：** 公開中ページの取得結果と migurei.ai の当ラボのサーバーログ（2026-10-07〜2026-10-29）、Google Search Console のデータ。
- **出典：** [migurei.ai](https://migurei.ai/m-meeting) (2026-10-21), [migurei.ai](https://migurei.ai/m-meeting/sitemap.xml) (2026-10-21), [migurei.ai](https://migurei.ai/sitemap.xml) (2026-10-21), [migurei.ai](https://migurei.ai/m-meeting/ja) (2026-10-21)
- **証明していないこと：** インデックス登録のリクエストはクロールを保証しません。リクエストしなかったメインページもクロールされており、Google が自然に来た可能性があります。初期の集計はユーザーエージェントのみによるものです。クロールは順位や AI での引用ではありません。Google は現在バージョン間のリンクを報告していますが、HTML は未再確認です。
- **サイト運営者にできること：** 各言語版を通常のリンクと hreflang で相互にリンクし、サイトマップの各 URL に lastmod を付け、新しい言語ページは Google Search Console でインデックス登録をリクエストしてください。

### [当社ラボでの観察] Brave の再取得フォームで URL を送信した2回（2026-10-14 と 2026-10-21）とも、Bravebot を名乗るクライアントが約61分後と67分後に、それまで取得したことのない URL も含め、送信した URL だけを取得しました。サイトマップは一度も取得していません。

- **確かさ：** 当社ラボでの観察。記録 2026-10-14、2026-10-28 までに再確認
- **根拠：** pw.migurei.ai の当社サーバーログ、2026-10-14〜2026-10-28。
- **出典：** [search.brave.com](https://search.brave.com/help/brave-search-crawler) (2026-10-14)
- **証明していないこと：** ユーザーエージェントは検証できません。Brave はユーザーエージェントも IP 範囲も公開しておらず、リクエストは Hetzner のアドレスからでした。観察は2回のみです。取得されても Brave のインデックスに入ったとは限りません。その後 Claude が当社を挙げる回数は増えませんでした。
- **サイト運営者にできること：** 新しいページを公開したら Brave の再取得フォームで送信し、約1時間後にその URL への Bravebot のリクエストがあるかログを確認してください。それらは未検証の訪問として記録しましょう。

### [当社ラボでの観察] migurei.ai から pw.migurei.ai へのリンクは段階的に公開されました。製品ページのサイドバーは 2026-10-15 までに、トップページのカルーセルとスキャナーページは 2026-10-16 に公開されました。その後 72 時間、スキャナーページのリンクをたどって pw.migurei.ai に来た AI 検索ボットはありませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-16、2026-10-23 までに再確認
- **根拠：** 2026-10-16 と 2026-10-22 に migurei.ai のページを通常取得した結果と、pw.migurei.ai の当ラボのサーバーログ。
- **出典：** [migurei.ai](https://migurei.ai/ja) (2026-10-16), [migurei.ai](https://migurei.ai/ja/applications/hub) (2026-10-16), [pw.migurei.ai](https://pw.migurei.ai/) (2026-10-16), [migurei.ai](https://migurei.ai/llms.txt) (2026-10-16), [migurei.ai](https://migurei.ai/ja/applications/ai-meeting) (2026-10-16)
- **証明していないこと：** 当時は migurei.ai のログがなく、リンク元のページをどのボットが読んだかは不明です。72 時間は短い期間です。トップページのリンクはカルーセルのカード内にあり、幅 1280 px では最初に見える 4 枚に入っていません。
- **サイト運営者にできること：** 自社の別サイトへのリンクを追加したら、公開中のページを取得してリンクが実際に HTML にあるか確認してください（ビルド失敗で反映が止まることがあります）。リンクに効果がないと判断する前に、ログを確認しましょう。

### [当社ラボでの観察] 2026-09-30 から 2026-10-15 までの 1,571 回のテストで、ChatGPT は migurei.ai のページ（例: /en を 25 回、利用規約を 20 回）を引用しました。一方、OpenAI の検索用クローラーがそのサイトと pw.migurei.ai で取得したのは robots.txt だけでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-16、2026-10-30 までに再確認
- **根拠：** ChatGPT などのアプリへのテスト質問（2026-09-30〜2026-10-15）を、2026-11-03 までの自社サーバーログと Bing Webmaster Tools のデータと照合しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** ほぼすべての質問に当社の URL を貼るか Parallel World の名前を入れていたため、発見型の質問ではありません。ChatGPT は OpenAI のクローラーではなく Bing から結果を得ている可能性がありますが、引用されたページに Bing での表示回数はありませんでした。2026-11-03 までに OAI-SearchBot が migurei.ai で取得したのは robots.txt だけです。
- **サイト運営者にできること：** AI アプリがすでに引用しているページから新しいページへリンクを張り、Bing Webmaster Tools でサイトマップを送信してください。ChatGPT が引用するには OpenAI のクローラーによる事前の取得が必要だ、と決めつけないでください。

### [当社ラボでの観察] 2026年10月の pw.migurei.ai では、サイトマップにだけ載せた新しいページを Googlebot が初めて取得するまで 35時間〜72時間超かかりました。一方、トップページからリンクした新しいページは約 6時間で取得されました。OpenAI、Perplexity、Anthropic の検索ボットは、サイトマップのみのページを 1件も取得しませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-16、2026-10-24 までに再確認
- **根拠：** 2026-10-14〜2026-10-20 の pw.migurei.ai の当社サーバーログ（IP は各社のリストで照合）。サイトマップのみのページ 2組とリンクしたページ 1件が対象です。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** どの事例もページ 1組だけです。2回目の期間は Googlebot がサイト全体をあまりクロールしておらず、遅れの原因はサイトマップではなくサイトかもしれません。取得はインデックス登録や引用ではありません。Bingbot は 1組を 1分以内に取得し、もう 1組はまったく取得しませんでした。
- **サイト運営者にできること：** サイトマップだけに頼らず、新しいページはトップページなど Googlebot がよく訪れるページからリンクしてください。IndexNow（Bing に新しい URL を知らせるプロトコル）は Bing には役立ちますが、確実ではありません。

### [当社ラボでの観察] ログを読ませてもらったベトナムの大規模サイト（2026-06-20〜2026-09-30）では、検証済みの PerplexityBot が 17,817 のパスに 24,210回リクエストしました。リファラー付きは 0件で、robots.txt を読んだのは 1回だけでした。量は 7月の 15,851回から 9月の 76回に減りました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-16、2026-11-16 までに再確認
- **根拠：** ベトナムの大規模サイトのサーバーログ。PerplexityBot の IP は Perplexity の公式リストで照合しました（2026-10-16 に確認）。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 1サイトだけの結果です。サイトマップはログのない別ホストにあったため、サイトマップを使った可能性は否定できません。リファラーがないのは送らないだけかもしれず、リンクをたどらないとは言えません。9月の減少が Perplexity 側、サイト側、ログの欠けのどれによるかは不明です。
- **サイト運営者にできること：** 自社ログでは PerplexityBot を IP で検証してください。訪問前にリファラーや robots.txt の読み込みがあるとは期待せず、新しいリンクだけで PerplexityBot がそのページに来るとも考えないでください。

### [当社ラボでの観察] pw.migurei.ai では、GPTBot が 2026-10-16〜2026-10-19 に毎日サイトマップを読みましたが、サイトマップにだけ載っている新しい4 URL は1つも取得しませんでした。ClaudeBot は4つすべて、Googlebot は2つを取得しました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-18、2026-11-01 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（2026-10-16〜2026-10-21）で、OpenAI の IP は OpenAI の公開リストと照合しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 1サイトで4日間に4回読まれただけです。OpenAI はもっと長い周期でサイトマップの URL を取得するのかもしれません。GPTBot がサイトマップを読む目的は不明です。GPTBot は学習用ボットで、OpenAI の検索がそのクロール結果をどこまで使うかは測れていません。
- **サイト運営者にできること：** サイトマップだけで OpenAI のボットを新しいページに呼び込めるとは考えないでください。新しいページは、トップページなどボットがすでに取得しているページからリンクしてください。OpenAI は URL を送信する方法を公開していません。

### [当社ラボでの観察] 2026年10月、Amazonbot は llms.txt か migurei.ai の JSON-LD でしか見られない pw.migurei.ai のURLを取得しました。また llms.txt を生のテキストとして読んだため、句読点が付いたままのURLが404エラーになりました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-19、2026-11-19 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ：2026-10-17〜2026-10-19 の Amazonbot のリクエスト13件と、2026-11-02 までの72時間の再確認。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/pricing) (2026-10-19), [developer.amazon.com](https://developer.amazon.com/amazonbot) (2026-10-19)
- **証明していないこと：** 初期のリクエストは Amazon のIPリストと照合しておらず、2日間で13行だけです。後の検証では、新しいURLがサイトマップやリンクにもあったため、llms.txt によると言い切れる取得はありませんでした。取得は Alexa の回答について何も示しません。
- **サイト運営者にできること：** llms.txt などのテキストファイルでは、URLと句読点の間に必ず空白を入れてください（「):」や「）」「。」に注意）。または末尾に句読点が付いたURLを正しいページへリダイレクトしてください。
- **ほかに挙げている原則：** [A8](https://pw.migurei.ai/ja/handbook/bots-and-apps#a8)

### [当社ラボでの観察] 2026-10-21〜2026-10-27、OAI-SearchBot は migurei.ai の英語トップページを7回取得し、同じホスト内の他ページへのリンクはたどりましたが、そこから pw.migurei.ai へのリンクは一度もたどらず、pw.migurei.ai では robots.txt だけを読みました（20件中20件）。

- **確かさ：** 当社ラボでの観察。記録 2026-10-28、2026-11-28 までに再確認
- **根拠：** migurei.ai と pw.migurei.ai の自社サーバーログ（2026-10-28 まで）。ボット IP は OpenAI の公開リストで確認。
- **出典：** [openai.com](https://openai.com/searchbot.json) (2026-10-28), [migurei.ai](https://migurei.ai/en) (2026-10-28), [migurei.ai](https://migurei.ai/en/applications/hub) (2026-10-28), [pw.migurei.ai](https://pw.migurei.ai/) (2026-10-12), [pw.migurei.ai](https://pw.migurei.ai/compare) (2026-10-23), [openai.com](https://openai.com/gptbot.json) (2026-10-28)
- **証明していないこと：** サンプルは小さく、奥へたどったのは1回だけです。ホストではなく位置や優先度でリンクを選んでいる可能性があります。リンクの有無はソースコードに基づき、実際の HTML ではありません。OpenAI が新規ホストを別枠で扱う可能性もあります。後の同一ホスト試験はボットが来なくなり結論が出ませんでした。
- **サイト運営者にできること：** ChatGPT 検索に載せたい内容は、OAI-SearchBot が既にクロールしているホストに置き、既に取得されているページからリンクしてください。新しいサブドメインへのリンクに頼る前に、ログを確認してください。

### [当社ラボでの観察] 2026-10-26 に当社の MCP サーバーが公式 MCP Registry に掲載されると、エンドポイントへのリクエストは 2.3 日で 188 種類のユーザーエージェントから 4,362 件となり（それまでの 25 日間は 16 件）、GPTBot は MCP ディレクトリのページ（mcppedia.com、verifymcp.io）から pw.migurei.ai へのリンクを 2 回たどりました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-28、2026-11-28 までに再確認
- **根拠：** pw.migurei.ai の当ラボのサーバーログ（2026-10-01〜2026-10-28）。GPTBot の IP は OpenAI の公開リストと照合済み。
- **出典：** [openai.com](https://openai.com/gptbot.json) (2026-10-28), [mcppedia.com](https://mcppedia.com/) (2026-10-28), [verifymcp.io](https://verifymcp.io/) (2026-10-01)
- **証明していないこと：** GPTBot は OpenAI の学習用クローラーで、OAI-SearchBot がディレクトリページを読んだことは確認していません。新しいユーザーエージェントの多くは死活確認や評価用のプローブで、実際の利用者ではありません。ディレクトリ側のログはありません。掲載 1 回、最初の 1 週間のみです。
- **サイト運営者にできること：** 実際に MCP サーバーを運用しているなら、公式 MCP Registry に掲載してください。ディレクトリサイトへの転載が第三者からのリンクとなり、OpenAI のクローラーがそれをたどります。ただし人の訪問は期待しないでください。
- **ほかに挙げている原則：** [A6](https://pw.migurei.ai/ja/handbook/bots-and-apps#a6)

### [当社ラボでの観察] migurei.ai に新設したブログは、サイトマップを robots.txt に記載しただけでメインサイトからのリンクもなかったため、13 日間 Google にも Bing にも認識されませんでした（2026-10-28 時点で 28 URL 中 28 件）。各ツールで一度送信すると、1 週間以内に Google が 23 件、Bing が 20 件をインデックスしました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-28、2026-11-28 までに再確認
- **根拠：** Google の URL 検査、Bing Webmaster Tools の検査、migurei.ai の当ラボのサーバーログ（2026-10-15〜2026-11-04）。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 送信しなかった比較グループがないため、待った時間で説明できる可能性もあります。2026-10-29 に追加したフッターのリンクは 72 時間以内にどの検索ボットにもたどられませんでしたが、サイトマップとリンクの効果は分けられません。インデックスは AI での引用ではありません。
- **サイト運営者にできること：** 新しいセクションでは、robots.txt に記載しただけのサイトマップに頼らないでください。Google Search Console でサイトマップを、Bing Webmaster Tools で URL を送信し、トップページからそのセクションへリンクを張りましょう。

### [当社ラボでの観察] pw.migurei.ai では 2026-10-17 から少なくとも 2026-11-02 まで、Bing はサイトマップを何度も読み、すべての送信（IndexNow、URL 送信 API、インデックス登録リクエスト、いずれも HTTP 200）を受け付けましたが、Bingbot は送信した新しいページを取得しませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-21、2026-11-04 までに再確認
- **根拠：** pw.migurei.ai の当社サーバーログ、Bing Webmaster API、Bing の URL 検査、2026-10-20〜2026-11-02。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/sitemap.xml) (2026-10-21)
- **証明していないこと：** 1つのホスト、数週間の観察です。理由はわかっていません。Bing の唯一の推奨事項は「高品質なドメインからの被リンク不足」で、整合はしますが原因の証明ではありません。同じドメインの自社ブログからのリンクは効果がありませんでした。Bing のレポートはログより数日遅れます。
- **サイト運営者にできること：** 送信の HTTP 200 を取得済みと見なさないでください。送信した URL への Bingbot の訪問をログで確認し、URL 検査の状態も見てください。「検出済み・未クロール」のままなら、他ドメインからのリンク獲得に取り組みましょう。

### [当社ラボでの観察] 2026年10月に pw.migurei.ai の URL を Perplexity に貼り付けて質問したところ、Perplexity-User がページを取得したことは一度もありませんでした。PerplexityBot は数秒〜34分後によく来ましたが、取得したのは既に知っているページで、貼り付けたページを取得したのは 14問中 2問だけでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-14、2026-10-28 までに再確認
- **根拠：** 2026-10-12〜2026-10-21 の pw.migurei.ai の当社サーバーログを、Perplexity へのテスト質問と照合しました。PerplexityBot の IP は Perplexity の公開リストで確認しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 訪問が質問によるものか偶然か（Perplexity にはかなりの数の質問をしていました）は分かりません。ページが Perplexity のインデックスに入ったかも分かりません。質問数は少なく、事前登録したテストでもありません。ユーザーエージェントでは PerplexityBot に見えた訪問のうち 2件は当社オフィスからのものでした。ユーザーエージェントだけでは証拠になりません。
- **サイト運営者にできること：** ログで PerplexityBot を確認するときは、数える前に各アクセスの IP を Perplexity の公開 IP リストと照合してください。URL を Perplexity に貼り付ければそのページが取得される、とは期待しないでください。
- **ほかに挙げている原則：** [A4](https://pw.migurei.ai/ja/handbook/bots-and-apps#a4)

### [当社ラボでの観察] 同じ送信方法（Google へのサイトマップ送信、Bing への URL 送信）でも、ホストによって結果が逆になりました。両検索エンジンが既に知っている migurei.ai 上のブログは 72 時間以内に 28 URL 中 17 件が Google に、20 件が Bing にインデックスされましたが、新しい GitHub Pages のホストは 11 URL 中 0 件しか認識されませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-11-01、2026-11-12 までに再確認
- **根拠：** Google の URL 検査、Bing Webmaster Tools のデータ、当ラボのサーバーログ（2026-10-28〜2026-11-06）。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 2 つのホストは運用期間、Search Console の設定、内部リンク、再送信の有無が同時に異なり、どれが効いたかは分けられません。72 時間は最終判断ではありません。インデックスは AI での引用ではありません。その後 IndexNow だけで通知した記事は、72 時間以内に Bing にインデックスされませんでした。
- **サイト運営者にできること：** 早くインデックスさせたい文章は、検索エンジンが既に知っているホストに置いてください。Google Search Console でサイトマップを、Bing Webmaster Tools で URL を送信しましょう。IndexNow（Bing に新しい URL を知らせる仕組み）だけに頼らないでください。

### [当社ラボでの観察] 2026年11月、Bing Webmaster Tools は pw.migurei.ai について「質の高いドメインからの被リンクが不足している」と表示し、被リンクレポートは空でした。当社が note や GitHub に置いたリンクは nofollow か、Bing 未登録の GitHub Pages 上にありました。

- **確かさ：** 当社ラボでの観察。記録 2026-11-02、2026-11-16 までに再確認
- **根拠：** 2026-11-02 の Bing Webmaster Tools の推奨事項と被リンクレポート、およびリンク元ページごとの rel 属性の確認。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** Bing はこれが当社 URL 4件をクロールしない理由だとは言っておらず、基準も公開していません。nofollow はヒントにすぎず、Bing はそれらの URL を既に把握しているため、問題は発見ではなくクロール対象に選ばれるかどうかです。各ページを 1回だけ確認した結果です。
- **サイト運営者にできること：** Bing Webmaster Tools の被リンクレポートを見て、外部に置いたリンクの rel 属性を確認してください。Bing がまだクロールしていないページそのものに、Bing 登録済みの外部ドメインから follow のリンクを少なくとも 1本つけてください。

### [当社ラボでの観察] 当社が dev.to に 2 本の記事を投稿した後（2026-10-03 ではなく 2026-11-03 と 2026-11-07）、PerplexityBot は記事内でリンクした当社ページすべてを 3〜10 分以内に取得しました。Bingbot も、IndexNow で送信してもクロールされなかったページ（記事の正規 URL）を 6 分以内に取得しました。

- **確かさ：** 当社ラボでの観察。記録 2026-11-09、2026-11-23 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（ボットは各社の IP リストで検証、2026-10-10〜2026-11-09）と、投稿時刻を示す dev.to 公開 API。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/en/research/japanese-sites-and-ai-bots) (2026-11-09), [pw.migurei.ai](https://pw.migurei.ai/en/check/ai-bots?src=devto-names) (2026-11-09)
- **証明していないこと：** 記事は 2 本だけで、正規 URL 付きは 1 本です。Bingbot が正規 URL のために来たのか最初のリンクのためかは区別できません。仕組みは不明です。ボットの取得はインデックス登録を意味しません。Google が dev.to 側を正規に選ぶ可能性もあります。note の記事では PerplexityBot は来ませんでした。
- **サイト運営者にできること：** Bing が新しいページを無視するなら、正規 URL を自社ページに向けた dev.to の転載記事を 1 本試し、1 時間以内にログで Bingbot と PerplexityBot を確認してください。その後、Google が引き続き自社ページを正規 URL としているか確認してください。

### [当社ラボでの観察] pw.migurei.ai にはリサーチ記事へリンクするページがなく、2026-11-09 までの 30日間で Googlebot はサイトマップの URL 49件中 13件を取得していませんでした。2026-11-03 の Google のインデックス確認では、新しい記事 9件が「検出 - インデックス未登録」でした。

- **確かさ：** 当社ラボでの観察。記録 2026-11-09、2026-11-23 までに再確認
- **根拠：** 2026-11-09 までの 30日間の当社サーバーログ（IP 検証済み）、当社ページのリンク確認、2026-11-03 の Google URL 検査 API。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/sitemap.xml)
- **証明していないこと：** リンク不足が原因とは言えません。Googlebot はこのサイトをあまりクロールしておらず、記事は公開から 6日で、リンクのない記事が 1件は取得されています。取得はインデックス登録ではありません。Bing については何も言えません。migurei.ai では同じサイト内のリンクで Bingbot は来ませんでした。
- **サイト運営者にできること：** 新しい記事は、トップページや記事一覧ページなど Google が既に取得しているページからリンクしてください。一覧ページが 404 を返していないかも確認してください。サイトマップだけに頼らないでください。

**ここにも関係する主張：**

- [[外部の情報源] OpenAI は、OAI-SearchBot をブロックしたサイトは ChatGPT の検索回答に表示されないと述べ、Anthropic は、Claude-SearchBot をブロックすると Claude の検索結果での露出が減る可能性があると述べています。どちらも新しい URL を送る手段は提供していません。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-4bb87522)

## A4. ユーザーの代わりに取得するアプリはインデックス用ボットではない

ChatGPT-User や Claude-User は回答中にページを取得しますが、インデックスには入れません。同じ会社のインデックス用ボットを連れてくることもありますが、毎回ではありません。

**原則の確かさ：** 仮説

### [仮説] ある大規模サイトでは、ChatGPT-User（利用者のチャットのためにページを読み込むボット）が OpenAI の検索用クローラーの持っていない URL を初めて読み込むと、月によって 13〜40%（全体で 28%）の割合で、OAI-SearchBot が数秒以内にその URL を取得しました。pw.migurei.ai では robots.txt しか取得しませんでした。

- **確かさ：** 仮説。記録 2026-10-13、2026-11-13 までに再確認
- **根拠：** ベトナムの大規模サイトのサーバーログ（初回取得 14,969 件、2026-06-19〜2026-10-02）と、pw.migurei.ai の自社サーバーログです。
- **出典：** [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-13)
- **証明していないこと：** OpenAI はこの連動を認めていません。時間的に近い 2 つの取得が見えるだけです。当社サイトで robots.txt 止まりになる理由は分かりません。効果の一部は、2026年7月から Cloudflare が OpenAI の検索ボットに送っているネットワークの情報によるものかもしれません。
- **サイト運営者にできること：** まだありません：これは仮説です。

### [外部の情報源] ChatGPT と Claude は、ユーザーが質問したその場で ChatGPT-User や Claude-User としてページを開くことがあります。Anthropic は、Claude-User をブロックするとその質問に対して Claude が内容を取得できず、サイトの露出が減る可能性があると述べています。

- **確かさ：** 外部の情報源。記録 2026-10-15、2027-01-15 までに再確認
- **根拠：** OpenAI、Anthropic、Perplexity のボット文書、2026-10-15 と 2026-11-02 に確認。加えてテスト質問中の当社サーバーログ、2026-10-17 と 2026-10-27。
- **出典：** [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-15), [openai.com](https://openai.com/chatgpt-user.json) (2026-10-15), [support.claude.com](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler) (2026-04-07), [docs.perplexity.ai](https://docs.perplexity.ai/docs/resources/perplexity-crawlers) (2026-10-15)
- **証明していないこと：** 当社のブロック検証は、OpenAI ではなく当社の IP からユーザーエージェントを変えただけです。IP を見るファイアウォールは本物のフェッチャーを別に扱うかもしれません。OpenAI は ChatGPT-User のブロックで露出がどれだけ減るかを述べていません。当社のテストでは、Claude-User の IP はその日の Anthropic のリストと一致しませんでした。
- **サイト運営者にできること：** robots.txt、ファイアウォール、CDN が ChatGPT-User、Claude-User、Perplexity-User を意図せずブロックしていないか確認し、IP で絞る場合は OpenAI の公開リストを許可してください。これらのフェッチャーは最初にトップページを開くので、重要なページはトップページからリンクしてください。
- **ほかに挙げている原則：** [D1](https://pw.migurei.ai/ja/handbook/agent-world#d1)

### [否定された] 当方サイトでは否定されました。ChatGPT や Gemini が利用者のために pw.migurei.ai のページを取得しても、OAI-SearchBot と Googlebot は72時間以内にそのページを取得しませんでした（各10ページ中0件、2026年10月）。

- **確かさ：** 否定された。記録 2026-10-16、2026-10-20 までに再確認
- **根拠：** 2026-10-13 に事前に条件を固定した検証：URLを貼った24件のテスト質問を ChatGPT、Gemini、DeepSeek に送り、自社サーバーログと盲検で照合しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 10件中0件で否定できるのは、アプリごとの追随率が約26%を超える場合だけで、より低い率はあり得ます。新しいサブドメイン1つ、各アプリ1アカウント、午前中の1回です。Claude は未検証です。ボットが既に巡回しているサイトでは異なる可能性があります。
- **サイト運営者にできること：** 利用者がURLを ChatGPT や Gemini に貼っても、同じ会社の検索ボットがそのページに来るとは期待しないでください。巡回済みページからのリンク、sitemap.xml、Google には Search Console など、別の方法でURLを知らせてください。

### [当社ラボでの観察] 2026年10月、Perplexity は回答時に pw.migurei.ai のページを一度も取得しませんでした。2026-10-16〜2026-10-17 に当社 URL を貼った 8問で、Perplexity-User のリクエストは当社サーバーに 1件も届かず、うち 7問で Perplexity は「ページを取得できなかった」と答えました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-17、2026-10-24 までに再確認
- **根拠：** 2026-10-16〜2026-10-17 に無料アカウントで Perplexity へ投げたテスト質問、当社サーバーログ、2026-10-17 に読んだ Perplexity のボットに関するドキュメント。
- **出典：** [www.perplexity.com](https://www.perplexity.com/perplexity-user.json) (2025-10-17), [docs.perplexity.ai](https://docs.perplexity.ai/guides/bots) (2026-10-17), [blog.cloudflare.com](https://blog.cloudflare.com/verified-bots-accountability/) (2026-10-17)
- **証明していないこと：** 原因は分かっていません。Cloudflare のエッジログがないため、エッジでのブロックか Perplexity 側の挙動かを区別できません（貼り付けた GitHub の URL も取得を断られました）。無料アカウント 1つ、端末 1台、2日間だけの結果です。別のサイトでは Perplexity-User のアクセスが Perplexity のリストにない IP から来ており、偽装の可能性があります。
- **サイト運営者にできること：** 自社の URL について Perplexity に質問し、Perplexity の公開リストにある IP からの Perplexity-User をログで確認してください。回答で「ページを開けなかった」と言われたら、CDN やファイアウォールのセキュリティイベントでブロックがないか確認してください。

### [当社ラボでの観察] 当方のURLをAIアプリに貼り付けたところ（2026-10-01〜2026-10-17）、各アプリは独自のユーザーエージェントでページを取得しました。ChatGPT は「ChatGPT-User/1.0」、Claude は「Claude-User/1.0」、Gemini は「Google」のみ、DeepSeek は通常の Linux 版 Firefox で、Perplexity はリクエストを送りませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-17、2026-11-17 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（2026-10-01〜2026-10-17）を、各アプリへのテスト質問と照合しました。
- **出典：** [openai.com](https://openai.com/bot) (2026-10-01), [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/google-user-triggered-fetchers) (2026-08-19), [www.gstatic.com](https://www.gstatic.com/ipranges/goog.json) (2026-10-01)
- **証明していないこと：** 1サイト、各アプリ1アカウント、当方の検証用マシンからの質問です。ユーザーエージェントやIPは変わり得ます。Gemini が全利用者に「Google」を使うかは不明です。そのアドレスはGoogleの一般的なIP範囲内ですが、どのクローラー・フェッチャーのリストにもなく、検証できません。
- **サイト運営者にできること：** ログを読む際、ユーザーエージェントが「Google」だけのものや通常の Linux 版 Firefox のリクエストは、人間の訪問ではなく、Gemini や DeepSeek が利用者のためにページを読んだものである可能性を考えてください。

### [当社ラボでの観察] 2026-10-21、URL を貼らずに pw.migurei.ai と当社ページの英語タイトルを挙げて Perplexity に質問したところ、11秒後に PerplexityBot がまさにそのページを取得し、回答でもそのページが引用されました。同じ日の似た質問 3件では起きませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-21、2026-11-04 までに再確認
- **根拠：** 2026-10-21 に Perplexity へ投げたテスト質問 4件を当社サーバーログと照合しました。PerplexityBot の IP は Perplexity の公開リストで確認しました。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/en/research/ai-bot-first-visits) (2026-10-21)
- **証明していないこと：** 似た質問 4件のうち 1件だけの結果で、事前登録したテストでもありません。Perplexity がどこから URL を見つけたのか、何を読めたのかは分かりません。当社サーバーはページ全体を返しましたが、Perplexity は本文を取得できなかったと答えました。取得はインデックス登録ではありません。
- **サイト運営者にできること：** 自社サイト名とあるページのタイトルを挙げて Perplexity に質問してください。そのあと、約1分以内に検証済み IP の PerplexityBot がそのページに来たかをログで確認してください。

### [当社ラボでの観察] pw.migurei.ai の名前だけを挙げてリンクを貼らずに質問したところ、2026年10月中旬までに Gemini（178問）と DeepSeek（165問）は一度も私たちのページを開きませんでした。一方、2026-10-17 には ChatGPT と Claude が4回中4回トップページを開きました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-17、2026-11-17 までに再確認
- **根拠：** 4つの AI アプリに私たちが行ったテスト質問を、pw.migurei.ai の自社サーバーログ（2026-10-01〜2026-10-22）と照合したものです。
- **出典：** [pw.migurei.ai](https://pw.migurei.ai/en/how-ai-answers) (2026-10-17)
- **証明していないこと：** Gemini と DeepSeek のモードやモデルは記録していません。無料アカウント、1台の端末での結果です。ChatGPT と Claude は1日の午前中の4回だけです。Gemini は私たちのサイトを訪れずに Google の保存コピーを読んでいる可能性があり、実際にページを取得せずにリンクを引用していました。
- **サイト運営者にできること：** ChatGPT と Claude はトップページから辿るため、重要なページはすべてトップページからリンクしてください。Gemini は Google が保持するコピーをもとに答えるため、ページを更新したら Search Console のインデックス登録をリクエストするなどして Google に再クロールさせてください。
- **ほかに挙げている原則：** [D1](https://pw.migurei.ai/ja/handbook/agent-world#d1)

### [外部の情報源] robots.txt にパスを書くと、そのパスは公開されます。RFC 9309 はこのルールがアクセス制御ではないと述べており、当社の直近のスキャンでは 14サイト中約 10サイトが Disallow に /admin や CMS のパスを書いていました。多くはプラットフォームの初期設定です。

- **確かさ：** 外部の情報源（一部：当社ラボでの観察）。記録 2026-10-22、2027-04-22 までに再確認
- **根拠：** RFC 9309（2022-09）、OWASP のウェブセキュリティテストガイド、2026-10-22 に読んだ直近スキャン 14サイト分の robots.txt。
- **出典：** [www.rfc-editor.org](https://www.rfc-editor.org/rfc/rfc9309.html), [wstg.owasp.org](https://wstg.owasp.org/latest/4-Web_Application_Security_Testing/01-Information_Gathering/03-Review_Webserver_Metafiles_for_Information_Leakage)
- **証明していないこと：** 書かれたパスが実際に開けるかは分かりません。当社は Disallow のパスにはリクエストしません。多くは Shopify などのプラットフォームの初期設定なので、重みは小さいです。
- **サイト運営者にできること：** 管理画面や非公開のパスを robots.txt で隠そうとしないでください。認証で保護し、名前を公開したくないパスは Disallow から外してください。
- **ほかに挙げている原則：** [C4](https://pw.migurei.ai/ja/handbook/open-and-closed#c4)

### [否定された] 反証済み：2026-10-29〜2026-10-31、当社のテスト以外の時間に PerplexityBot が当社ページを 12回取得しましたが、これはユーザーへの回答時の取得ではありませんでした。2026-11-02 にブラインド採点した 9問では、Perplexity が当社を引用したのは 0回で、回答中の取得もありませんでした。

- **確かさ：** 否定された。記録 2026-11-01、2026-11-15 までに再確認
- **根拠：** PerplexityBot の公開 IP リストで照合した当社サーバーログと、2026-11-02 に Perplexity へ投げてブラインド採点したテスト質問 9件。
- **出典：** [www.perplexity.ai](https://www.perplexity.ai/perplexitybot.json) (2026-10-31)
- **証明していないこと：** 反証の対象は、当社が投げた探索型の質問 3種だけです。端末 1台、日本の IP 1つ、おそらく無料アカウントでログインした状態です。12回の取得自体は事実で、定期的なインデックス作業の可能性があります。ユーザーが何を質問したかは見えません。
- **サイト運営者にできること：** ログに PerplexityBot のアクセスがあっても、Perplexity のユーザーが自社ページをもとに回答を受けている証拠とは考えないでください。インデックス作業の可能性として扱い、自分で質問して確かめてください。

### [当社ラボでの観察] Claude Code（ユーザー自身のパソコンからページを取得する Anthropic のコーディングエージェント）が、2026-10-28 と 2026-10-29 に、社外の 2 人のセッションで pw.migurei.ai の調査ページを読みました。当社のテストによるものではありません。

- **確かさ：** 当社ラボでの観察。記録 2026-11-01、2026-11-15 までに再確認
- **根拠：** pw.migurei.ai の自社サーバーログ（2026-10-31 に確認）。Claude-User（claude-code）の User-Agent で、2 か国から計 3 回の取得。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** ユーザーが何を尋ねたかは分かりません。リンクを貼り付けただけかもしれません。2 人・3 回は傾向ではありません。User-Agent は自己申告で、IP はユーザー自身のものなので検証できません。
- **サイト運営者にできること：** ログで User-Agent に「claude-code」を含む Claude-User のリクエストを探してください。開発者のコーディングエージェントがページを読んでいる印です。その IP アドレスは個人情報なので、必要以上に保存・公開しないでください。

**ここにも関係する主張：**

- [[当社ラボでの観察] 2026年10月に pw.migurei.ai の URL を Perplexity に貼り付けて質問したところ、Perplexity-User がページを取得したことは一度もありませんでした。PerplexityBot は数秒〜34分後によく来ましたが、取得したのは既に知っているページで、貼り付けたページを取得したのは 14問中 2問だけでした。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-db0d54f5)

## A5. 一貫したエンティティ

社名、親会社、製品、価格は、自社のページでも他社のページでも同じでなければなりません。同じ名前の別の会社や、外部の食い違った情報は、誤った回答になります。

**原則の確かさ：** 外部の情報源

### [外部の情報源] AI エージェント分野では、「Parallel」という名前を少なくとも2つの大手が使っています。Parallel Web Systems（parallel.ai）と Parallel Labs の「Parallel AI」（parallellabs.app）です。一方、当社以外に「Parallel World」という GEO ツールは見つかりませんでした（2026-10-13）。

- **確かさ：** 外部の情報源。記録 2026-10-13、2027-01-13 までに再確認
- **根拠：** 両社のサイトと Web 検索（2026-10-13）、および AI アプリへのテスト質問。DeepSeek の回答16件中1件が当社を Parallel Labs と混同しました。
- **出典：** [parallel.ai](https://parallel.ai/) (2026-10-13), [parallellabs.app](https://parallellabs.app/) (2026-10-13), [docs.parallellabs.app](https://docs.parallellabs.app/) (2026-10-13)
- **証明していないこと：** 検索で見つからないことは存在しないことを意味しません。AI が述べた別の「Parallel World」は実在の同名ではなく作り話かもしれません。16件中1件は1回分の数字です。AI アプリが当社を挙げない原因が名前だとは示していません。
- **サイト運営者にできること：** ブランド名が他社と重なるなら、ページのタイトル、説明文、構造化データで社名と組み合わせて表記し、AI アプリが同名の他社と混同していないか確認してください。
- **ほかに挙げている原則：** [D2](https://pw.migurei.ai/ja/handbook/agent-world#d2)

### [当社ラボでの測定] 無料版の Web 版 Gemini は、貼り付けた URL を開かないことがあります。2026年10月のテストでは48件中9件でページを開かず、代わりにブランド名で Web 検索して答え、その9件はすべて不正解でした。

- **確かさ：** 当社ラボでの測定。記録 2026-10-12、2027-01-12 までに再確認
- **根拠：** 2026-10-05 と 2026-10-10 に無料版 Gemini に行った計48問のテスト質問を採点し、サーバーログと照合したものです。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 2回分、1アカウント、1台の端末、無料版、ベトナムの IP での結果で、Gemini のモデルやモードは記録していません。ページを開かない理由は不明で、ネットワークの入口でのブロックも否定できていません。24件中2件から24件中7件への変化は、まだ傾向とは言えません。
- **サイト運営者にできること：** 親会社のページやプレスリリースなど、他サイトにある自社ブランドの情報が自社サイトと一致しているか（例：正式な社名）確認してください。Gemini は自社ページではなくそれらの情報をもとに答えることがあります。
- **ほかに挙げている原則：** [B3](https://pw.migurei.ai/ja/handbook/japanese-buyers#b3)

### [外部の情報源] NTT Data の調査（2026-08-28〜2026-08-31、n=3,948）では、37.9%の利用者が企業の公式情報と食い違うAIの回答を見たことがあり、そのうち66.6%が購入をやめました。AI経由で購入した人の69.7%はAIの提案に従っていました。

- **確かさ：** 外部の情報源。記録 2026-10-14、2027-01-14 までに再確認
- **根拠：** NTT Data の消費者調査（n=3,948、2026年8月）。LLMO支援会社のブログでの紹介によるもので、原本は未読です。
- **出典：** [jinrai.co.jp](https://jinrai.co.jp/blog/2026/10/13/brand-search-ai-answer-accuracy/) (2026-10-13)
- **証明していないこと：** 回答者は一般消費者であり、B2Bの購買担当者ではありません。「購入をやめた」は自己申告です。調査を紹介しているブログはLLMOサービスを販売しています。
- **サイト運営者にできること：** ChatGPT、Gemini、Google AI Mode に、社名、「製品名＋料金」、「社名＋評判」を複数の日に尋ねてください。回答と引用URLを保存して公式ページと比べ、自社サイト、PR TIMES、note 上の古い情報を修正してください。
- **ほかに挙げている原則：** [B5](https://pw.migurei.ai/ja/handbook/japanese-buyers#b5), [D6](https://pw.migurei.ai/ja/handbook/agent-world#d6)

### [外部の情報源] Google によると、トップページに Organization の構造化データを置くと、Google が組織を理解し、検索結果で他と区別するのに役立つ場合があります。推奨プロパティには name、alternateName、description、legalName、sameAs、url、logo などが含まれますが、disambiguatingDescription は含まれません（2026-10-17 確認）。

- **確かさ：** 外部の情報源。記録 2026-10-17、2027-01-17 までに再確認
- **根拠：** Organization の構造化データに関する Google 検索セントラルのページ（2026-09-08 更新、2026-10-17 確認）です。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/appearance/structured-data/organization) (2026-09-08), [migurei.ai](https://migurei.ai/ja) (2026-10-17)
- **証明していないこと：** これは組織についての説明で、組織の製品についてではありません。Gemini アプリがこのデータを使うとは書かれておらず、ChatGPT、Claude、Perplexity が製品を区別するために JSON-LD を読むという情報源もありません。「役立つ場合がある」は Google の表現で、数値はありません。
- **サイト運営者にできること：** トップページに Organization のマークアップを追加し、name、alternateName、legalName、description、url、logo と、公式プロフィールへの sameAs リンクを記載してください。似た名前の他社と Google が区別しやすくなります。
- **ほかに挙げている原則：** [D2](https://pw.migurei.ai/ja/handbook/agent-world#d2)

### [否定された] 反証されました：質問で Parallel World を競合と並べて名指ししても、AI アプリは pw.migurei.ai を開きませんでした。各 24 回の試行（2026-10-12〜2026-10-14）で、ChatGPT が取得したのは 3 回で、いずれも質問にホスト名が含まれていた場合のみ、Gemini は 0 回でした。

- **確かさ：** 否定された。記録 2026-10-14、2026-10-21 までに再確認
- **根拠：** ChatGPT と Gemini への日本語のテスト質問（判定基準を事前に固定し盲検で採点）を、当ラボのサーバーログと照合した結果（2026-10-12〜2026-10-14）。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 2 日間、各アプリ 1 つの無料アカウント、日本語の質問のみです。DeepSeek は結論が出ず、Claude は未測定です。CDN 側のブロックは確認していません。ChatGPT は名前の検索はしており（24 回中 22 回）、反証されたのはページ取得の部分だけです。
- **サイト運営者にできること：** 質問で社名が挙がっても、AI アプリが自社サイトを読むとは期待しないでください。回答は検索インデックスや自社に関する他のページから作られるため、会社紹介ページや第三者による言及を正確に保ちましょう。

### [当社ラボでの観察] 上位1,000の .jp サイトの robots.txt を毎週調べた結果を DEV Community に公開したところ、Perplexity は 4件中4件の回答で当社の数値を使いました（公開前は 2件中0件）。ただし migurei の名前を出したのは 1件だけで、pw.migurei.ai へのリンクは一度もありませんでした（2026-11-02〜2026-11-04）。

- **確かさ：** 当社ラボでの観察。記録 2026-11-05、2026-11-19 までに再確認
- **根拠：** 2026-11-02〜2026-11-04 に Perplexity へ投げたテスト質問 6件（統計に関する質問 2種）。事前に固定した基準で採点しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** Perplexity が数値を拾ったのが記事を公開したからかどうか（公開前の 2件の回答は別の日です）は分かりません。記事タイトルに社名を入れれば Perplexity が社名を出すかどうかも分かりません。回答は 6件だけで、アカウント 1つ・端末 1台です。ログイン状態も不明です。
- **サイト運営者にできること：** 他のプラットフォームで数値を公開するときは、タイトルと冒頭の数行で数値のすぐ近くにブランド名を書いてください。そのうえで Perplexity に同じ質問をして、数値だけでなく社名も出るかを確認してください。

## A6. 第三者による裏付け

アプリがブランドを挙げるのは、第三者の情報源（比較・まとめ記事、プレスリリース、レビューサイト、note の記事、Wikipedia）がそのブランドに触れているときです。

**原則の確かさ：** 外部の情報源

### [外部の情報源] Peec が約 20 万件の AI 回答（2025年9月〜2026年3月、米国市場）を調べた研究では、第三者のまとめ記事に掲載され上位にあるブランドほど多く名前が挙がりました。一方、2026-10-20 に公開した当社自身の比較ページでは、テスト回答 125 件中 0 件でした。

- **確かさ：** 外部の情報源。記録 2026-10-10、2027-01-10 までに再確認
- **根拠：** Peec AI のブログ記事の研究「The Listicle Rank Effect」、2026-10-10 に確認。加えて ChatGPT、Gemini、DeepSeek、Claude へのテスト質問、2026-10-22〜2026-11-06。
- **出典：** [peec.ai](https://peec.ai/blog/the-listicle-rank-effect-what-nearly-200-000-ai-responses-across-8-ai-engines-reveal-about-brand-visibility) (2026-10-07)
- **証明していないこと：** ツール提供企業による米国市場の研究で、日本は含まれず、手法も未検証です。対象は第三者のまとめ記事だけで、自社のものではありません。当社はどのまとめ記事にも掲載されていないため、日本で本題は検証できていません。
- **サイト運営者にできること：** 自社の分野で AI アプリが実際に引用している第三者のまとめ記事を探し、掲載を依頼してください。自社サイトの比較ページだけで名前が挙がるとは期待しないでください。
- **ほかに挙げている原則：** [B4](https://pw.migurei.ai/ja/handbook/japanese-buyers#b4)

### [外部の情報源] Profound によると、2026-08-08 ごろから ChatGPT は企業自身のページをより多く引用し（引用の 51.8%。製品・サービスページは 22.6% から 30.4%）、まとめ記事の引用は減りました（18.0% から 11.2%）。ただし別の調査では、商用の質問の引用の 82% が今も第三者のページでした。

- **確かさ：** 外部の情報源。記録 2026-10-14、2026-12-14 までに再確認
- **根拠：** 日本の LLMO 支援会社のブログ（2026-10-09 公開、2026-10-14 閲覧）による、Profound、PromptWatch、Writesonic/NP Digital、Ahrefs の調査の要約です。Profound の原文は読んでいません。
- **出典：** [jinrai.co.jp](https://jinrai.co.jp/blog/2026/10/09/chatgpt-citation-shift-2026/) (2026-10-09)
- **証明していないこと：** ベンダーによる二つの調査の結論は正反対です。データは主に英語圏・米国のもので、Profound のサンプル数は不明です。OpenAI は理由を説明していません。名前が挙がった後に引用されることは、そもそも名前が挙がるかどうかについては何も示しません。
- **サイト運営者にできること：** ChatGPT が直接引用する可能性があるため、自社の製品・料金・ドキュメントのページを分かりやすく保ち、OAI-SearchBot（OpenAI の検索用クローラー）が取得できる状態にしてください。根拠が食い違っているので、第三者メディアでの露出も続けてください。

### [当社ラボでの観察] 他サイトのリンクからの人の訪問はほとんどありませんでした。pw.migurei.ai にリンクした当社の GitHub リポジトリは最初の 54 時間（2026年10月）で 0 件、3 本のリンクがあるツール紹介ページは約 2 日間（2026年11月）で 0 件でした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-16、2026-10-30 までに再確認
- **根拠：** pw.migurei.ai の当社サーバーログ、2026-10-14〜2026-10-16 と 2026-11-02 まで。加えて、ある企業ページからの 11 本のリンクが 6 か月で訪問者 0 人だったというサイト運営者の Zenn 記事。
- **出典：** [github.com](https://github.com/Migurei/ai-bot-registry) (2026-10-16), [api.github.com](https://api.github.com/repos/Migurei/ai-bot-registry) (2026-10-16), [zenn.dev](https://zenn.dev/hirajo/articles/site-cited-as-reference) (2026-10-15)
- **証明していないこと：** スターが 0 のリポジトリに 54 時間は短すぎます。もう一方のサイトは業種が違い、nofollow やリンクの位置が原因かもしれません。アクセス解析はリファラーのある訪問しか見えません。ボットについては何も言えず、リンクがボットの入口になる可能性は残ります。
- **サイト運営者にできること：** 他サイトに置くリンクにはそれぞれ固有の utm_source を付け、そのチャネルにさらに力を入れる前に、14 日後の訪問者数を数えてください。
- **ほかに挙げている原則：** [D6](https://pw.migurei.ai/ja/handbook/agent-world#d6)

### [外部の情報源] 158,099件のAI回答と468,037件の引用を分析した研究（arXiv プレプリント、2026-10-10）では、アプリの検索段階でページが取得されるかが引用の差の32%を説明し、ページの性質は2.8%にとどまりました。アプリはモデルの記憶からもブランド名を挙げます。

- **確かさ：** 外部の情報源。記録 2026-10-28、2027-01-28 までに再確認
- **根拠：** 2026-10-10 に投稿された arXiv のプレプリント。LLMO支援会社のブログ経由で知り、要旨のみ読みました。
- **出典：** [arxiv.org](https://arxiv.org/abs/2610.15033) (2026-10-10), [jinrai.co.jp](https://jinrai.co.jp/blog/2026/10/27/geo-report-2026-10/) (2026-10-27)
- **証明していないこと：** 査読前です。要旨には対象市場やアプリ、日本を含むかが書かれていません。32%は著者のモデル内での分散の割合で、引用されたページの割合ではありません。全文は未読です。
- **サイト運営者にできること：** ページのレイアウトを作り直す前に、AIアプリが使う検索エンジンに自社ページがインデックスされているか、またそれらのインデックスに既にある第三者のページに自社が載っているかを確認してください。

### [当社ラボでの観察] 2026-10-28 に「日本のサイトの何割が AI ボットをブロックしているか」と尋ねると、ChatGPT と Gemini は 1.0%（363,583 サイト中）、20.4%、32.3%（主要 99 サイト中）という調査を引用しました。数字は対象サイトが違うため約 30 倍の差がありますが、それを説明した回答はありませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-29、2026-11-29 までに再確認
- **根拠：** 2026-10-28 の 2 つのテスト質問に対する ChatGPT、Gemini、Claude、DeepSeek の回答 24 件と、2026-11-05 までの追加回。引用元は 2026-11-03 に確認しました。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 相関にすぎません。各アプリ・各質問数回、各回 1 日だけです。アプリが引用したからといって、人がその情報源を読んでいるとは限りません。ChatGPT がページ上の文言で情報源を選ぶことは証明できていません。
- **サイト運営者にできること：** 統計を公開するときは、母数、日付、測定主体をタイトルと最初の一文に書き、他の調査の数字と母数を並べて示してください。

### [当社ラボでの観察] 2026-10-28 までの3か月間、Search Console の「生成 AI 機能」レポートで migurei.ai は155回表示され、その大半がトップページでした。一方 pw.migurei.ai は通常の Web 検索で32回表示されていたのに0回で、2026-11-01 時点でも2回だけでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-31、2026-11-28 までに再確認
- **根拠：** 自社ドメインの Search Console レポートを 2026-10-30、2026-11-01、2026-11-03 に確認したものです。
- **出典：** [migurei.ai](https://migurei.ai/) (2026-10-31)
- **証明していないこと：** レポートには検索クエリがなく、AI による概要と AI モードの区別も、クリック数もありません。トップページの表示はブランド名検索によるものかもしれません。ベトナムの表示の一部は自社チームの可能性があります。リンク表示は Parallel World の名前が出たことを意味しません。Gemini アプリの数値でもありません。
- **サイト運営者にできること：** Search Console の「検索パフォーマンス」で「生成 AI 機能」レポートを開き、ページで絞り込んで、Google がすでに AI 回答に使っている自社ページを確認してください。重要な文章とリンクはそのページに置いてください。
- **ほかに挙げている原則：** [B1](https://pw.migurei.ai/ja/handbook/japanese-buyers#b1)

### [当社ラボでの観察] 2026-10-25 から 2026-11-01 まで、pw.migurei.ai の当社 MCP エンドポイントには 141 ドメイン（MCP ディレクトリ、エージェント索引、信頼性チェッカー）を名乗る 276 種類のユーザーエージェントから 13,087 件のリクエストがありましたが、それらのドメインから当社サイトへのブラウザ訪問は 1 件もありませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-11-02、2026-11-23 までに再確認
- **根拠：** pw.migurei.ai と migurei.ai の当ラボのサーバーログ（2026-10-25〜2026-11-04）と、2026-11-01 に閲覧した公開ディレクトリページ。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** リファラーがないことは人がいないことを意味しません。多くのディレクトリは noreferrer やリダイレクトを使っています。141 ドメインにはセキュリティスキャナーや死活監視も含まれます。30 日間で成功した 16,050 件の呼び出しのうち、実際にツールを使ったのは 70 件だけでした。
- **サイト運営者にできること：** MCP ディレクトリへの掲載から来るのは購入者ではなくボットだと考えてください。掲載ページの管理権を取得する前に、そのページが AI アプリの使う検索インデックス（Brave、Bing、Exa など）に入っているか確認しましょう。

**ここにも関係する主張：**

- [[外部の情報源] Ahrefsによると（日本、2026-09-29〜2026-09-30）、日本でAIアプリが最も多く引用する10ドメインは日本語版Wikipedia、Google、note、Yahoo!知恵袋、YouTube、アメブロ、PR TIMES、my-best、Weblio、コトバンクです。ChatGPTではPR TIMESが2位、Geminiではnoteが1位です。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-94565634)
- [[当社ラボでの観察] 2026-10-26 に当社の MCP サーバーが公式 MCP Registry に掲載されると、エンドポイントへのリクエストは 2.3 日で 188 種類のユーザーエージェントから 4,362 件となり（それまでの 25 日間は 16 件）、GPTBot は MCP ディレクトリのページ（mcppedia.com、verifymcp.io）から pw.migurei.ai へのリンクを 2 回たどりました。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-a2fe5b0c)
- [[当社ラボでの観察] 日本のサイトの AI ボット対応を調べている調査を尋ねると、Gemini は Google のインデックス登録から約38時間後の 2026-10-28 に3回中3回私たちの調査ページを挙げました。しかし 2026-11-05 にはページがインデックスに残っていたにもかかわらず3回中0回でした。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-6ef39c97)
- [[当社ラボでの観察] 2026-10-29、Claude は当社の GitHub リポジトリを読んだあと、日本のサイトについての当社の週次調査を最も直接的な出典として挙げ、pw.migurei.ai のページにリンクしました。これは 12 回中 1 回で、そのリポジトリは 2026-11-03 から公開されていません。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-45c854d0)

## A7. 新しさ

アプリは新しいページや実際に更新されたページを好みます。ページの引用される部分は数週間で薄れ、サイトマップの lastmod は正確なときだけ使われます。

**原則の確かさ：** 外部の情報源

### [外部の情報源] Profound によると、AIアプリに引用されたページはピークから11日で引用が半減するのが一般的です（中央値、78%が2週間以内）。複数のアプリに引用されたページは長持ちし、Claude Sonnet 5.5 はより新しいページを引用します。

- **確かさ：** 外部の情報源。記録 2026-10-14、2027-01-14 までに再確認
- **根拠：** 7つのAIアプリにわたる約883,000ページ（2025-09-08〜2026-09-08）を扱った Profound のブログ記事2本（2026-09-30、2026-10-13）。
- **出典：** [www.tryprofound.com](https://www.tryprofound.com/blog/the-half-life-of-an-ai-citation-is-11-days) (2026-09-30), [www.tryprofound.com](https://www.tryprofound.com/blog/what-s-changed-with-sonnet-5-5) (2026-10-13)
- **証明していないこと：** Profound は計測ツールを販売しており、ページ更新で引用が長続きするかは検証しておらず、日本の内訳もありません。当方の12件のテスト質問では、ChatGPT は当方の新しいページより古い調査を引用し続け、新しさは勝敗を決めませんでした。
- **サイト運営者にできること：** 引用されたいページはデータを実際に更新し、ページに日付を示し、サイトマップの lastmod を正確に保ってください。一度きりのニュースやプレスリリースは最も早く引用が消えます。

### [外部の情報源] Google と Bing がサイトマップの lastmod をクロールの予定に使うのは、それがページが実際に変わった日である場合だけです。Google は priority と changefreq を無視し、Bing は常に今日の日付になっている lastmod を無視することがあります。

- **確かさ：** 外部の情報源。記録 2026-10-10、2027-01-10 までに再確認
- **根拠：** Google のサイトマップ文書と 2023 年の Bing Webmaster ブログ記事、いずれも 2026-10-10 に確認。加えて当社サーバーログ、2026-10-20〜2026-10-26。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap) (2026-10-10), [blogs.bing.com](https://blogs.bing.com/webmaster/february-2023/The-Importance-of-Setting-the-lastmod-Tag-in-Your-Sitemap) (2023-02-01)
- **証明していないこと：** クロールがどれだけ速くなるかは述べていません。Bing の記事は 2023 年のものです。当社の検証は日付が途中で変わり続けたためきれいに測れず、1 ボット 5 ページでは少なすぎます。Bing への URL 送信では、24 時間で Bingbot が来たのは 9 ページ中 0 ページでした。
- **サイト運営者にできること：** lastmod は、本文のハッシュなどを使って各ページの内容が実際に変わった日から作り、サイトマップの生成日やコミット日は使わないでください。priority と changefreq は省いてください。

### [当社ラボでの観察] pw.migurei.ai の 2 ページを書き直した後（2026-10-16 公開）も、Google と Bing は旧版を保持していました。Googlebot が再取得したのは 2026-10-18 にインデックス登録をリクエストした後で、Bingbot は 2026-10-27 時点でも再取得していませんでした。

- **確かさ：** 当社ラボでの観察。記録 2026-10-17、2026-10-30 までに再確認
- **根拠：** pw.migurei.ai の当社サーバーログ、Google Search Console と Bing の URL 検査、2026-10-15〜2026-10-27。
- **出典：** 当社のデータ、外部リンクなし
- **証明していないこと：** 再取得されても、インデックスや Gemini が新版を使っているとは限りません。1 サイト 2 ページの観察で、割合ではありません。バイト数は違いますが、本文を一語ずつ比べてはいません。再取得後いつインデックスが更新されるかは不明です。
- **サイト運営者にできること：** ページを書き直したら、サイトマップの lastmod をコミット日ではなく新しい内容が公開された日にしてください。そのうえで Search Console と Bing Webmaster Tools でインデックス登録をリクエストし、各ボットが再取得したかをログで確認してください。

## A8. 機械が読める

内容が JavaScript なしで読める HTML にあり、ブラウザの設定による自動リダイレクトがなく、robots.txt が許可し、構造化データがあること。ボットが JavaScript を実行することは増えているので、JavaScript によるリダイレクトもボットに影響します。

**原則の確かさ：** 外部の情報源

### [当社ラボでの測定] 英語版への JavaScript のリダイレクトにより、Google は当社の日本語ページ 5 件の正規 URL を英語の URL として記録しました。2026-10-14 に削除した後、再クロールされた 5 ページはすべて自分自身を正規 URL として示し、2026-10-22 まで変わりませんでした。

- **確かさ：** 当社ラボでの測定。記録 2026-10-22、2027-01-22 までに再確認
- **根拠：** pw.migurei.ai に対する Search Console の URL 検査（基準値 2026-10-15、その後 2026-10-17、2026-10-19、2026-10-22）と、自社ログで確認した Googlebot の訪問です。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/specialty/international/managing-multi-regional-sites) (2026-10-15)
- **証明していないこと：** 対照群はありません。修正の効果を、サイトマップの日付、インデックス登録リクエスト、Google 自身の再クロールから切り分けられません。1 サイト、5 ページで、判定基準は変更後に決めました。Google にあることは、日本語の検索や AI による概要に表示されることを意味しません。
- **サイト運営者にできること：** 自動の言語リダイレクトを削除し、言語メニューと hreflang は残してください。Search Console の URL 検査で、各言語ページの「ユーザーが指定した正規 URL」を確認してください。HTML では自分自身を指しているのに別の言語を指している場合は、リダイレクトのスクリプトを探してください。

### [否定された] 否定されました。ブラウザの言語に基づく JavaScript のリダイレクトによって、当社の日本語ページが Google から外れることはありませんでした。修正が反映される前（2026-10-15 確認）から日本語ページ 5 件はすべて Google にありました。ただし Google は英語の URL を正規 URL として記録していました。

- **確かさ：** 否定された。記録 2026-10-13、2027-01-13 までに再確認
- **根拠：** pw.migurei.ai に対する自社の Search Console の URL 検査（2026-10-13〜2026-10-19）と、Google の多地域サイトに関するドキュメントです。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/specialty/international/managing-multi-regional-sites) (2025-12-10), [developers.google.com](https://developers.google.com/search/docs/specialty/international/locale-adaptive-pages) (2025-12-10), [pw.migurei.ai](https://pw.migurei.ai/en/company) (2026-10-13)
- **証明していないこと：** 対照群はなく、ラボのサイト 1 つ、5 ページ、1 アカウントでの結果です。サイトマップの日付、手動のインデックス登録リクエスト、Google 自身の再クロールの影響を切り分けられません。「Google にある」ことは、日本語の検索や AI による概要に表示されることを意味しません。
- **サイト運営者にできること：** 自動の言語リダイレクトでページを Google のインデックスから外せるとは考えないでください。それでも Google が勧めるとおり、このようなリダイレクトは避けてください。別の言語のページを正規ページとして記録させる可能性があるからです。

### [外部の情報源] ある日本のサイトのログ（2026-09-30 報告）によると、2026-09-25 以降 OAI-SearchBot と GPTBot はページ取得時に JavaScript を実行しています。OAI-SearchBot のリクエストに占める Next.js のプリフェッチは2%から84%に増えました。

- **確かさ：** 外部の情報源。記録 2026-10-14、2026-12-14 までに再確認
- **根拠：** サイト運営者による Zenn 上のログ分析（2026-09-30）、2026-10-14 閲覧。OpenAI のボット説明は JavaScript に触れていません。
- **出典：** [zenn.dev](https://zenn.dev/hirajo/articles/chatgpt-crawler-js-rendering) (2026-09-30), [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-14)
- **証明していないこと：** 書き手1人の観察で、OpenAI の発表はありません。自社サイトでは OAI-SearchBot のページ取得をまだ見ていないため、レンダリングも確認していません。レンダラーがどの言語を名乗るかも不明です。
- **サイト運営者にできること：** OpenAI のボットはブラウザのように JavaScript を実行すると考えてください。スクリプトがボットを別ページへ飛ばしたり（自動言語リダイレクトなど）内容を隠したりしないことを確かめ、JavaScript の有効・無効の両方でページを確認してください。

### [否定された] 反証されました：pw.migurei.ai の llms.txt を読むのは検索エンジンだけではありません。2026-10-16 以降、学習用ボット（GPTBot、ClaudeBot、おそらく Amazonbot）が他の URL と同じように取得しました。一方、OpenAI、Anthropic、Perplexity の AI 検索ボットとユーザー操作による取得は 0 回でした。

- **確かさ：** 否定された。記録 2026-10-14、2026-11-14 までに再確認
- **根拠：** pw.migurei.ai の当ラボのサーバーログ（2026-10-01〜2026-10-21、可能な範囲でボットの IP を検証）と、結果の予測を事前に記録したテスト。
- **出典：** [zenn.dev](https://zenn.dev/nogi_fanguide/articles/nogizaka-llmo) (2026-10-14), [llmstxt.org](https://llmstxt.org/) (2026-10-14)
- **証明していないこと：** アプリが当ラボのログに見えない他社のインデックスやキャッシュ経由で llms.txt を使っている可能性があります。AI 検索ボットは当サイトにほとんど来ないため、0 回はあまり意味を持ちません。1 サイト、3 週間、.md の URL は 2 件のみです。
- **サイト運営者にできること：** ChatGPT、Claude、Perplexity の回答に届く手段として llms.txt や .md 版に頼らないでください。AI に読ませたい内容はサイトマップに載せた HTML ページに置きましょう。llms.txt は低コストな補助として残し、各 URL を行の中で単独で読み取れるように書いてください。

### [外部の情報源] 2026-07-01 以降、Cloudflare は（無料プランを含め）AI ボットの設定を Search、Agent、Training の 3 グループに分けています。2026-09-15 からは、広告を表示するページで Training と Agent のボットが既定でブロックされ、Search のボットは引き続き許可されます。

- **確かさ：** 外部の情報源。記録 2026-10-16、2026-11-16 までに再確認
- **根拠：** Cloudflare のブログ（2026-07-01）、Help Net Security（2026-07-02）、および API でこの設定を読む方法を書いた Zenn の記事です。2026年10月には自社ゾーンの設定も確認しました。
- **出典：** [blog.cloudflare.com](https://blog.cloudflare.com/content-independence-day-ai-options/) (2026-07-01), [www.helpnetsecurity.com](https://www.helpnetsecurity.com/2026/07/02/cloudflare-ai-crawler-controls/) (2026-07-02), [zenn.dev](https://zenn.dev/hirajo/articles/cloudflare-ai-crawler-settings) (2026-10-13), [migurei.ai](https://migurei.ai/robots.txt) (2026-10-16)
- **証明していないこと：** OAI-SearchBot、Claude-SearchBot、PerplexityBot がどのグループに属するか、robots.txt へのリクエストがブロックの対象外かは、どの情報源にも書かれていません。設定から分かるのは現在の状態だけです。当社のゾーンでは 3 グループとも ブロックされていませんでした。
- **サイト運営者にできること：** Cloudflare を使っているなら、AI ボットが自社ページに来ていないと判断する前に、ダッシュボードまたは Bot Management の API で Search、Agent、Training の設定を確認してください。

### [外部の情報源] Google は HTML のリンク（href 付きの a タグ）から新しいページを見つけます。ドキュメントには JSON-LD や本文中の URL を拾うとは書かれておらず、OpenAI も OAI-SearchBot がどのように URL を見つけるかを公表していません。

- **確かさ：** 外部の情報源。記録 2026-10-16、2027-01-16 までに再確認
- **根拠：** Google のリンクのベストプラクティスのページ（2026-10-16 確認）、OpenAI のボットに関するドキュメント（2026-10-13 確認）、2026年10月の migurei.ai での自社テストです。
- **出典：** [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/links-crawlable) (2025-12-10), [developers.openai.com](https://developers.openai.com/api/docs/bots) (2026-10-13)
- **証明していないこと：** ドキュメントは Google についてのもので、OAI-SearchBot、Claude-SearchBot、PerplexityBot については書かれていません。書かれていないことは、しないことと同じではありません。72時間のテストでは JSON-LD にだけ置いた URL を辿った AI ボットはありませんでしたが、そもそも AI ボットの訪問が少なく、否定の根拠にはなりません。
- **サイト運営者にできること：** クロールさせたいリンクはすべて href 付きの通常の HTML リンクにし、JavaScript でページを開くボタンにはしないでください。JSON-LD 内の URL でページが見つかることには頼らないでください。

### [外部の情報源] Cloudflare は Verified bots を、robots.txt と HTTP 429（速度を落とせという応答）を守るかで継続的に評価し、信頼度を Radar で公開し、サイト運営者がしきい値を選べるようにする予定です。登録は BotBase フォームから申請でき、最低トラフィックの条件はありません。

- **確かさ：** 外部の情報源。記録 2026-10-17、2026-12-17 までに再確認
- **根拠：** Cloudflare の Verified bots に関するブログ記事（2026-10-16）と、Verified bots ポリシーおよび Web Bot Auth のドキュメント（2026-10-17〜2026-11-02 に確認）。
- **出典：** [blog.cloudflare.com](https://blog.cloudflare.com/verified-bots-accountability/) (2026-10-17), [developers.cloudflare.com](https://developers.cloudflare.com/bots/concepts/bot/verified-bots/policy/) (2026-10-08), [developers.cloudflare.com](https://developers.cloudflare.com/bots/concepts/bot/verified-bots/web-bot-auth/) (2026-10-08), [migurei.ai](https://migurei.ai/ja/scanner)
- **証明していないこと：** 運営者がしきい値を選べる時期は示されていません。各ボットにどの行動ラベル（例：SEO や Data Collection）が付くか、したがって AI ブロックのプリセットで遮断されるかは不明です。運営者のダッシュボードがボットの説明ページにリンクする根拠もありません。
- **サイト運営者にできること：** ボットを運用しているなら、Web Bot Auth の署名、公開 IP リスト、逆引き DNS のいずれかで身元を示し、robots.txt・crawl-delay・429 を守ったうえで BotBase フォームから申請してください。サイト運営者は、どのしきい値を使うか決めておいてください。
- **ほかに挙げている原則：** [C2](https://pw.migurei.ai/ja/handbook/open-and-closed#c2), [D7](https://pw.migurei.ai/ja/handbook/agent-world#d7)

### [当社ラボでの観察] JavaScript のカウントアップ演出だけで表示される数値は、JavaScript を実行しないボットには初期値として読まれます。2026-10-18、M-Meeting のページは HTML 上で「対応言語 0+」となっており、AI アプリは代わりに PR TIMES のプレスリリースから「4 言語」と答えました。

- **確かさ：** 当社ラボでの観察。記録 2026-10-18、2026-12-18 までに再確認
- **根拠：** migurei.ai 上の M-Meeting ページを当ラボが JavaScript なしで取得した結果と、4 つの AI アプリへのテスト質問（2026-10-18）。Vercel の AI クローラー調査（2024 年）と Google の JavaScript SEO ガイド。
- **出典：** [migurei.ai](https://migurei.ai/m-meeting/ja) (2026-10-18), [vercel.com](https://vercel.com/blog/the-rise-of-the-ai-crawler) (2024-12-17), [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/javascript/javascript-seo-basics) (2026-03-04)
- **証明していないこと：** ページが 0+ だったからアプリがプレスリリースを使った、というのは対照のない推論です。Vercel の調査は 2024 年のもので、OpenAI のボットは現在 JavaScript を実行している可能性があります。正しい対応言語数がいくつかは示しません。
- **サイト運営者にできること：** AI アプリに引用してほしい数値はすべて、サーバーが返す HTML に入れてください。カウントアップ演出は 0 からではなく実際の値から始めてください。JavaScript なしでページを取得して確認しましょう。

### [外部の情報源] 2026年10月に投稿された研究によると、Web 検索を使う AI モデルは、元のページを開かずに検索結果のスニペットから答えることが多く、そのとき古い回答や誤った引用が多くなる傾向があります。

- **確かさ：** 外部の情報源。記録 2026-10-17、2026-12-17 までに再確認
- **根拠：** arXiv に投稿された学術プレプリント（2026-10-15 投稿）の要旨。実運用の Web 検索付き商用モデル 1 つと公開モデル 6 構成。本文は未読です。
- **出典：** [arxiv.org](https://arxiv.org/abs/2610.21731) (2026-10-15)
- **証明していないこと：** 要旨にはモデル名、割合、言語が書かれておらず、スニペットが meta description から来るのか検索エンジンが切り出すのかも不明です。査読前の 1 本の論文です。ページ冒頭の修正で回答が変わるかは、当社のテストでは証明も否定もできていません。
- **サイト運営者にできること：** 正しく答えてほしい事実（何者か、主要な数字、ホスト名）を各ページの title と meta description に入れてください。スニペットだけで作られた回答でも正しくなるようにするためです。

**ここにも関係する主張：**

- [[当社ラボでの観察] 2026年10月、Amazonbot は llms.txt か migurei.ai の JSON-LD でしか見られない pw.migurei.ai のURLを取得しました。また llms.txt を生のテキストとして読んだため、句読点が付いたままのURLが404エラーになりました。](https://pw.migurei.ai/ja/handbook/bots-and-apps#c-54868ae6)

```json
{
  "@context": "https://schema.org",
  "@type": "TechArticle",
  "headline": "A. ボットと AI アプリ",
  "inLanguage": "ja",
  "dateModified": "2026-11-12",
  "author": {
    "@type": "Organization",
    "name": "migurei"
  },
  "mainEntityOfPage": "https://pw.migurei.ai/ja/handbook/bots-and-apps",
  "isPartOf": {
    "@type": "CreativeWork",
    "name": "AI エージェントのためのハンドブック：ウェブサイトが AI アプリにとって存在するには",
    "url": "https://pw.migurei.ai/ja/handbook"
  }
}
```