日本語EN

C. 開くことと閉じること

A グループの裏側です。A は「サイトが AI にとって存在しているか」を問い、このグループは「サイトは誰に開いていて、その見返りに何を得ているか」を問います。AI のために開けた扉は、ほかの人にも開いています。良いサイトは、開くべきところで開き、閉じるべきところで閉じています。

英語版から機械翻訳しています。内容が食い違う場合は英語版が正です。

デプロイのたびに当社のナレッジベースから作り直しています。原則 31 件、主張 200 件。最新の記録:2026-11-12。

Englishハンドブックの目次

各原則の後に、その原則を支える主張を並べています。根拠の確かさの説明はハンドブックの目次ページにあります。

根拠の確かさで絞り込む

C1. 開くことには代償がある

AI に開いた扉は、ほかの相手にも開いていて、何も返ってこないこともあります。良いサイトはすべてを開くのではなく、開くべきところで開き、閉じるべきところで閉じています。

原則の確かさ仮説

外部の情報源記録 2026-10-22、2026-12-22 までに再確認

サイトが AI ボットに対して「開きすぎ」か「閉じすぎ」かを定める公式な情報源はなく、標準は仕組みを示すだけです。2026-10-30 に Google、Microsoft、OpenAI が AI 学習用の新しい robots.txt グループへの対応を発表しましたが、基準値はやはりありません。

根拠
標準文書、AI 企業のボット説明ページとブログ、日本の政府ガイダンス、ツール各社のページ(2026-10-22〜2026-11-02 閲覧)。
証明していないこと
「見つからない」は「存在しない」ではありません。一部の日本の政策文書やエージェント決済の仕様は直接読んでいません。.jp サイトの調査結果は robots.txt での宣言であり、ボットの実際の挙動ではありません。
出典
サイト運営者にできること

検索、AI の回答、学習という目的ごとに、robots.txt でどのボットを許可するかを自分で決めてください。公式な基準は決めてくれません。学習だけを拒否したい場合は、新しい __usage_ai-training グループ(Microsoft は 2027-02-01 から対応)に注目してください。

当社ラボでの観察記録 2026-11-04、2026-12-04 までに再確認

migurei.ai が GPTBot のブロック(28.6 時間、2026-10-20〜2026-10-21)を解除すると、OAI-SearchBot は 5 時間以内に 26 ページを取得し、GPTBot は約 25 時間後に戻ってきました。GPTBot を許可している pw.migurei.ai では、2026-11-04 までの 30 日間、OAI-SearchBot のページ取得は 0 件でした。

根拠
migurei.ai と pw.migurei.ai の当ラボのサーバーログ(OpenAI ボットの IP を検証、2026-10-21〜2026-11-04)と OpenAI のクローラー文書。
証明していないこと
検証済みログはブロック期間の最後の 35 分しかカバーしておらず、GPTBot が止まったかは不明です。26 ページの集中取得は偶然で、ブロックが原因ではない可能性があります。1 サイト、1 回のみです。ChatGPT がサイトを引用するかについては何も示しません。
サイト運営者にできること

OpenAI からのアクセスを OAI-SearchBot のページ取得だけで判断しないでください。両方のボットを許可していれば、OpenAI は 1 回のクロールを両方に使うことがあります。GPTBot と OAI-SearchBot を合わせて数え、robots.txt の変更が反映されるまで約 24 時間見込んでください。

C2. 名前は身元ではない

User-Agent は自己申告にすぎません。ボットの身元は、運営元が公開する IP 範囲、逆引き DNS、または署名(Web Bot Auth)で決まります。名前で通すサイトは、その名前を借りた誰でも通します。

原則の確かさ外部の情報源(一部:当社ラボでの観察)

当社ラボでの観察記録 2026-10-22、2027-01-22 までに再確認

当社がスキャンした 21 サイト中 18 サイト(2026-10-03〜2026-10-21)は、AI 以外の IP から ChatGPT-User や Claude-User などの AI フェッチャーを名乗って送ったリクエストに、当社スキャナーへの応答とまったく同じように応答しました。

根拠
当社スキャナーによる 21 サイトの確認、AI フェッチャーのユーザーエージェントで計 90 回、2026-10-03〜2026-10-21。.jp サイト 61 件の追加調査、2026-11-02。
証明していないこと
IP が確認された本物のフェッチャーがどう扱われるかは示していません。CDN が本物の IP を通しつつ偽の名前を止めている可能性もあります。ユーザーエージェントごとにトップページへ 1 回だけの調査です。偽の名前に 200 を返すこと自体は害ではなく、公開コンテンツなら守る必要がないこともあります。
出典
当社のデータ、外部リンクなし
サイト運営者にできること

ChatGPT-User と Claude-User のユーザーエージェントで自社トップページを取得し、通常のリクエストと比べてください。本物と偽物を見分ける必要があるなら、名前ではなく AI 企業が公開している IP リストで照合してください。

当社ラボでの観察記録 2026-10-22、2027-01-22 までに再確認

当方のサイトでは、秘密ファイル(.env、.git)を探るリクエストの多くがAIボットの名前を使っています。migurei.ai では 2026-10-24〜2026-11-07、6種のAI・検索ボット名を名乗る499件のうち、検証できたのは105件(21.0%)だけでした。

根拠
pw.migurei.ai と migurei.ai の自社ログ(2026年10〜11月)および大規模なベトナムのサイトのログを、各社のIPリストと署名で照合しました。
証明していないこと
公開リスト外のIPが必ず偽物とは限りません。リストは変わり、プロキシのIPしか残らないログもあります。秘密が漏れた例はなく、当方の2サイトで成功応答を得た探索は0件でした。他サイトでの挙動は示しません。
出典
当社のデータ、外部リンクなし
サイト運営者にできること

ユーザーエージェントだけを信用しないでください。AIボットは各社公開のIPリストか Web Bot Auth 署名で検証し、.env や .git などのパスには404を返し、検証済みのリクエストだけをボット訪問として数えてください。

外部の情報源(一部:当社ラボでの観察)記録 2026-11-04、2026-11-18 までに再確認

AI各社は公開しているボットのIPリストを予告なく変更します。私たちが2026-10-21に保存したコピーと2026-11-04を比べると、16リスト中3つが変わっていました(PerplexityBot 8→13範囲、Perplexity-User 4→10、ChatGPT-User 234→235)。古いコピーによる判定は古いリストで行われていたことになります。

根拠
PerplexityとOpenAIが公開するボットIPリスト(2026-11-04に取得し、2026-10-21のコピーと比較)と自社サーバーログ。
証明していないこと
古いリストが原因で誤判定された実際のリクエストは見つかっていません。記録したPerplexityBotのIPはすべて新旧両方の範囲に含まれていました。ボット名を名乗りIPが記録されていないリクエストは再確認できず、偽物か本物か分かりません。
出典
サイト運営者にできること

AIボットをIPで検証している場合は、固定のコピーを同梱せず、各社のIPリストを定期的に取り直してください(私たちのコピーは2週間以内に古くなりました)。ボットの判別はUser-Agent名だけでなくIP範囲で行ってください。

外部の情報源記録 2026-11-05、2026-12-05 までに再確認

Cloudflare は 2026-11-04、「Personal Assistants」(人の代わりに動く AI エージェント)を Bot Analysis の独立したグループにし、エージェントごとのリクエスト数を表示したうえで、「Allow (do not block)」「Block on pages with ads」「Block」から選べるようにしました。

根拠
Cloudflare のブログ記事(2026-11-04、2026-11-05 に確認)と、migurei.ai と pw.migurei.ai の自社サーバーログ(2026-10-28〜2026-11-05)。
証明していないこと
対象プラン、初期設定、Cloudflare がどのボットをこのグループに入れるかは不明です。自社ログでは 9 日間で公開 IP 範囲から来た本物のリクエストは 6 件だけで、名前を使った大半は秘密ファイルを探る偽物でした。影響はまだ見えません。
出典
サイト運営者にできること

Cloudflare ダッシュボードの Bot Analysis を開き、どのパーソナルエージェントが来ているか確認し、設定を意図的に選んでください。名前だけで判断せず、各社が公開する IP リストと照合してください。

当社ラボでの観察(一部:外部の情報源)記録 2026-11-06、2026-12-06 までに再確認

migurei.ai では 2026-11-06 までの 14 日間に、DuckAssistBot を名乗るリクエストが 100 件ありました。Web Bot Auth で署名された 20 件はすべて署名が有効で通常のページを取得し、署名のない 79 件は .env などの秘密ファイルを探っていました。

根拠
migurei.ai の自社サーバーログ(2026-10-23〜2026-11-06)。署名は公開された鍵ディレクトリで検証。DuckDuckGo の DuckAssistBot ヘルプページ。
証明していないこと
有効な署名は、署名者が assistbot.duckduckgo.com に掲載された鍵を持つことを示すだけで、鍵が DuckDuckGo のものとは証明しません。IP は DuckDuckGo の公開リストと照合していません。DuckAssist に日本の利用者がいるか、訪問者を送るかは不明です。
サイト運営者にできること

名前だけでボットを信用しないでください。DuckAssistBot は Web Bot Auth の署名か DuckDuckGo の公開 IP リストで確認し、本物のクローラーが必要としない /.env などへのリクエストはブロックしてください。

外部の情報源記録 2026-11-06、2026-12-06 までに再確認

Cloudflare は 2026-11-05、Trusted Agent Delegation という連合を立ち上げ、パーソナル AI エージェントを識別する方法として Web Bot Auth(署名付きリクエスト)を掲げました。サイト運営者はすでにエージェントの通信量を確認し、エージェント別・サイトの区画別に許可・ブロックのルールを設定できます。

根拠
Cloudflare のブログ記事(2026-11-05)。2026-11-06 にウェブ閲覧ツールの要約を通して確認。
証明していないこと
読んだのはツールによる要約で、原文の全文ではありません。OpenAI、Anthropic、Google、Perplexity がリクエストに署名するとは示していません。自社ログの 14 日間で、これら各社の署名付きリクエストは 0 件でした。
出典
サイト運営者にできること

Cloudflare を使っているなら、Security Analytics のパーソナルアシスタント表示を確認し、重要な区画に限ってエージェント別ポリシーを設定してください。判断には User-Agent 名より署名による身元を優先してください。

C3. 与えるものと得るものの不均衡

AI ボットは、アプリが送ってくる人の訪問 1 回あたり、数百から数千ページを取得します。Google を除けば、現在 AI ボットに開くことは、得るより与えるほうが多い状態です。

原則の確かさ外部の情報源(一部:当社ラボでの観察)

外部の情報源(一部:当社ラボでの観察)記録 2026-10-22、2026-12-22 までに再確認

AIボットは、そのアプリが送り込む訪問者1人あたり数百〜数千ページを取得しています。Cloudflare Radar(2026-10-16〜2026-10-23)では Perplexity 3.3K対1、OpenAI 590対1、Anthropic 495対1で、Google は4.5対1です。

根拠
Cloudflare Radar の世界のクロール対参照比率のグラフ(2026-10-16〜2026-10-23)と、pw.migurei.ai、migurei.ai の自社ログおよび大規模なベトナムのサイトのログ。
証明していないこと
アプリがリファラーを落とすと比率は大きく出ます。当方のサイトでは人間の訪問の64〜88%にリファラーがなく、当方の比率は上限値です。学習用ボットはもともと訪問者を送りません。日本の内訳はありません。どの比率が「妥当」かも、どのボットを遮断すべきかも示しません。
サイト運営者にできること

30日間、ベンダーごとに、検証済みAIボットのページ取得数と、AIのリファラーや utm_source を持つ人間の訪問数の比率を自社で計算してください。Cloudflare Radar と並べて読み、遮断すれば比率は下がるもののAIでの露出も下がることを忘れないでください。

ほかに挙げている原則D5

C4. AI を招くファイルは地図にもなる

AI ボットのために書いた robots.txt、サイトマップ、llms.txt は誰でも読めます。そこに書いたパスは公開されたパスです。

原則の確かさ外部の情報源

当社ラボでの観察記録 2026-11-05、2026-12-05 までに再確認

2026-11-04 時点で、migurei.ai の llms.txt が AI を案内していた当社のアプリ用ホストのうち 2 つに、使える robots.txt がありませんでした。m-trans.migurei.ai は robots.txt と llms.txt に対してアプリの HTML ページをステータス 200 で返し、m-rag.migurei.ai は robots.txt を hub.migurei.ai のログインページへリダイレクトしていました。

根拠
2026-11-04 に当ラボのスキャナーで各 URL を 1 回取得し、RFC 9309(robots.txt の標準)と照らし合わせた結果。
証明していないこと
この HTML を robots.txt として読んだボットは確認しておらず、ボットがどう解釈したかは不明です。各 URL 1 回の取得のみです。2026-11-05 に llms.txt から m-trans.migurei.ai の行を削除しましたが、ホスト自体は変わっていません。
出典
サイト運営者にできること

AI を案内するすべてのホストで /robots.txt と /llms.txt を取得して確認してください。どちらもプレーンテキストか本当の 404 を返すべきで、ステータス 200 の HTML アプリページやログインページへのリダイレクトは不可です。この確認に通らないホストは llms.txt に載せないでください。

C5. 行動できるエージェントには制限が要る

エージェントが人の代わりにツールを呼び出したり購入したりするとき、問いは「読めるか」から「何をしてよいか」に変わります。必要のないページではツールを無効にし、取り消せない操作には印を付けます。

原則の確かさ外部の情報源

外部の情報源記録 2026-10-22、2026-12-22 までに再確認

WebMCP のドラフト(2026-10-20 付)では、サイトは Permissions-Policy: tools=() ヘッダーで AI エージェントがページ上のツールを呼ぶことを無効にでき、取り消せない操作には consequentialHint を付けてエージェントにまず利用者へ確認させることができます。

根拠
WebMCP の Community Group Draft Report(2026-10-20 付、W3C 標準ではありません)、2026-10-22 に確認。
証明していないこと
当社の調査対象で WebMCP を有効にしているサイトはまだありません。ドラフトは今後変わる可能性があります。ドラフトはプロンプトインジェクション対策を主にサイトではなくエージェントの責任としています。
サイト運営者にできること

ページで WebMCP のツールを提供しないなら、Permissions-Policy: tools=() の送信を検討してください。ツールを追加する場合は、決済や予約など取り消せない操作に consequentialHint を付けてください。

C6. 正面玄関は 1 つ

同じページを複数の入口(http://、別のポート、別のホスト)で返すと、複数のコピーができ、他者に読まれ、途中で書き換えられ、本来のページの代わりに引用されることがあります。AI には宣言した入口(canonical、https、ポート 443)で開き、ほかの入口はリダイレクトや HSTS で閉じます。

原則の確かさ外部の情報源(一部:当社ラボでの観察)

当社ラボでの観察(一部:外部の情報源)記録 2026-11-04、2026-12-04 までに再確認

2026-11-04 時点で、pw.migurei.ai と migurei.ai は http:// でもページ全体を返し、https:// へリダイレクトせず、HSTS ヘッダーも送っていませんでした。migurei.ai は Cloudflare の追加ポート 11個でも応答しました。宣言している正規(canonical)の入口は https のポート 443 だけです。

根拠
2026-11-04 の直接リクエスト、当社サーバーログ(30日分。migurei.ai は 2026-10-21 以降)、Cloudflare のネットワークポートに関するドキュメント、Mozilla HTTP Observatory。
証明していないこと
通信途中で内容が改ざんされたこと(その兆候はありません)や、Google や AI アプリが http 版を正規版に選んだこと(canonical タグは https を指しています)は示していません。追加ポートへのリクエストはほとんどがスキャナーで、AI ボットは見られませんでした。
サイト運営者にできること

自社ページを http:// や 8080・8443 などのポートでリクエストしてみてください。http から https へ 301 でリダイレクトし、Strict-Transport-Security ヘッダーを追加し、プランで可能なら WAF ルールで標準外のポートをブロックしてください。

外部の情報源記録 2026-11-04、2026-12-04 までに再確認

2026-11-04、Mozilla HTTP Observatory は pw.migurei.ai を F(5/100)、migurei.ai を F(0/100)と評価しました。両方とも HTTPS へのリダイレクト、HSTS、X-Frame-Options、nosniff、コンテンツセキュリティポリシーがなく、migurei.ai は Secure 属性のない Cookie も設定しています。

根拠
2026-11-04 の Mozilla HTTP Observatory API によるスキャンと、Mozilla が公開する採点表。
証明していないこと
Observatory はブラウザの安全性を評価するもので、AI ボットが何を読むかは評価しません。これらのヘッダーはどれも AI ボットが取得できる内容を変えません。日本の購入検討者がベンダーのヘッダーを確認するというデータもありません。修正後の点数は再スキャンするまで分かりません。
サイト運営者にできること

Mozilla HTTP Observatory で自社サイトをスキャンし、HTTPS リダイレクト、HSTS、X-Frame-Options、X-Content-Type-Options: nosniff、コンテンツセキュリティポリシーを追加し、Cookie に Secure を付けてください。AI での見え方が変わるとは期待しないでください。

C7. 誰が言っているかを明示する

自社で書いた、依頼した、またはお金を払って得た言及は、読む人(とそれを写し取るアプリ)にそれが分かるようにしなければなりません。書き手を明かすことで、アプリが本物の第三者の声と区別できない「さりげない宣伝」を防げます。

原則の確かさ外部の情報源(一部:当社ラボでの観察)

外部の情報源記録 2026-11-05、2027-05-05 までに再確認

日本では2023年10月1日から、一般消費者が広告と分からない広告(ステルスマーケティング)は景品表示法違反になります。事業者自身が書いた投稿や、事業者が内容の決定に関与して第三者に書かせた投稿は事業者の表示とされ、「広告」「PR」などの明示が必要です。

根拠
消費者庁のステルスマーケティングに関するページ(2026-11-05に確認)。「内容の決定に関与」の解釈は運用基準の要約記事による。
証明していないこと
これは法的助言ではありません。運用基準の原本は読んでいません。海外プラットフォーム上の英語の投稿に適用されるかどうか、また特定の既存投稿が違反かどうかは判断していません。
出典
サイト運営者にできること

第三者のプラットフォーム(note、寄稿記事、比較記事など)で自社製品について書くとき、または対価を払って内容に関与し他者に書かせるときは、「広告」「PR」と明示し、運営者が書いていることを示してください。迷う場合は弁護士に相談してください。

当社ラボでの観察記録 2026-11-05、2026-11-26 までに再確認

ChatGPT のある回答(2026-11-03)では、第三者の比較記事で有料(PR)掲載とされたツールが、その記事を引用しつつ表の先頭に挙げられ、PR や広告の表記はありませんでした。その後の18回の回答(2026-11-06〜2026-11-08)では再現しませんでした。

根拠
私たちが ChatGPT と Gemini に聞いたテスト質問(2026-11-03〜2026-11-08)と、引用された比較記事の確認。
証明していないこと
ChatGPT が有料掲載のためにそのツールを挙げたとは言えません。他の記事やモデルの記憶に含まれている可能性があります。回答は1件です。回答時点でその掲載に PR 表記があったかも不明です(ページ確認は15〜19時間後)。
出典
当社のデータ、外部リンクなし
サイト運営者にできること

比較記事の掲載枠を購入するなら、AI の回答でどう表示されるか確認してください。PR 表記が残ると期待せず、自社側の開示も明確にしてください。