AI ボット一覧(2026年11月):User-Agent・公式 IP リスト・本物か確かめる方法

User-Agent は名乗りにすぎない。IP が公式リストにあるかで確かめる。アクセスログで GPTBot や ClaudeBot を見つけても、その名前だけでは本物とは言えない。運営会社が公開している IP リストに、そのリクエストの送信元 IP があるかを照合し、リストがない会社は公式ドキュメントの方法(署名など)で確かめる。

私たちの観測では、migurei.ai に 2026年10月7日〜21日の間に届いた 12,801 件の .env などの探索リクエストのうち、3,000 件以上がこの一覧にあるボット名(約30種)を名乗っていた(200 を返したものは 0 件)。

全 58 件。公式 IP リストがあるのは 22 件。レジストリ版 bots-2026-11-02、確認日 2026-11-02。データ: bots.json(CC BY 4.0)。

AI ボットの用途別の件数:検索 16、その他 14、ユーザー操作 11、学習 9、不明 8
bots.json の用途別の件数(bots-2026-11-02)
会社用途User-Agent tokenrobots.txt token公式 IP リスト URL確かめ方確認日観測
OpenAI学習GPTBotGPTBothttps://openai.com/gptbot.jsonIP2026-11-02—
OpenAI検索OAI-SearchBotOAI-SearchBothttps://openai.com/searchbot.jsonIP2026-11-02—
OpenAIユーザー操作ChatGPT-UserChatGPT-Userhttps://openai.com/chatgpt-user.jsonIP2026-11-02—
OpenAIその他OAI-AdsBotOAI-AdsBothttps://openai.com/adsbot.jsonIP2026-11-02—
Anthropic検索Claude-SearchBotClaude-SearchBothttps://claude.com/crawling/bots.jsonIP2026-11-02—
Anthropicユーザー操作Claude-UserClaude-Userhttps://claude.com/crawling/bots.jsonIP2026-11-02—
Anthropic学習ClaudeBotClaudeBothttps://claude.com/crawling/bots.jsonIP2026-11-02—
Anthropic学習anthropic-aianthropic-aihttps://claude.com/crawling/bots.jsonIP2026-11-02—
Perplexityユーザー操作Perplexity-UserPerplexity-Userhttps://www.perplexity.com/perplexity-user.jsonIP2026-11-02—
Perplexity検索PerplexityBotPerplexityBothttps://www.perplexity.com/perplexitybot.jsonIP2026-11-022026-10-21 n=1
2026-10-31 n=12
当社の観測(運営会社の公表ではない)
Google学習Google-ExtendedGoogle-Extendedhttps://developers.google.com/static/search/apis/ipranges/googlebot.json
https://developers.google.com/static/search/apis/ipranges/special-crawlers.json
https://developers.google.com/static/search/apis/ipranges/user-triggered-fetchers.json
https://developers.google.com/static/search/apis/ipranges/user-triggered-fetchers-google.json
IP2026-11-02—
Googleユーザー操作Gemini-Deep-ResearchGemini-Deep-Researchhttps://developers.google.com/static/search/apis/ipranges/user-triggered-fetchers-google.json
https://developers.google.com/static/search/apis/ipranges/user-triggered-fetchers.json
IP2026-11-02—
Googleその他Google-CloudVertexBotGoogle-CloudVertexBothttps://developers.google.com/static/search/apis/ipranges/special-crawlers.jsonIP2026-11-02—
Googleその他GoogleOtherGoogleOtherhttps://developers.google.com/static/search/apis/ipranges/googlebot.json
https://developers.google.com/static/search/apis/ipranges/special-crawlers.json
IP2026-11-02—
Google検索GooglebotGooglebothttps://developers.google.com/static/search/apis/ipranges/googlebot.jsonIP2026-11-02—
Google検索Google-InspectionToolGoogle-InspectionToolhttps://developers.google.com/static/search/apis/ipranges/googlebot.jsonIP2026-11-02—
Microsoft検索bingbotbingbothttps://www.bing.com/toolbox/bingbot.jsonIP2026-11-02—
Apple学習Applebot-ExtendedApplebot-Extendedhttps://search.developer.apple.com/applebot.jsonIP2026-11-02—
Apple検索ApplebotApplebothttps://search.developer.apple.com/applebot.jsonIP2026-11-02—
DuckDuckGo検索DuckDuckBotDuckDuckBothttps://duckduckgo.com/duckduckbot.jsonIP2026-11-02—
Common Crawl学習CCBotCCBothttps://index.commoncrawl.org/ccbot.jsonIP2026-11-02—
Meta学習meta-externalagentmeta-externalagent—なし2026-11-02—
Metaユーザー操作meta-externalfetchermeta-externalfetcher—なし2026-11-02—
Meta検索meta-webindexermeta-webindexer—なし2026-11-02—
Metaその他meta-externaladsmeta-externalads—なし2026-11-02—
Metaその他facebookexternalhitfacebookexternalhit—なし2026-11-02—
Amazon学習AmazonbotAmazonbot—なし2026-11-02—
Amazon検索Amzn-SearchBotAmzn-SearchBot—なし2026-11-02—
Amazonユーザー操作Amzn-UserAmzn-User—なし2026-11-02—
ByteDance学習BytespiderBytespider—なし2026-11-02—
Mistral AIユーザー操作MistralAI-UserMistralAI-User—なし2026-11-02—
You.com検索YouBotYouBot—なし2026-11-02—
Exa検索ExaSearchBotExaSearchBot—なし2026-11-02—
Exaユーザー操作ExaUserExaUser—なし2026-11-02—
Cohere不明cohere-aicohere-ai—なし2026-11-02—
xAI不明xAI-SearchBotxAI-SearchBot—なし2026-11-02—
xAI不明GrokBot / xAI-GrokGrokBot / xAI-Grok—なし2026-11-02—
DeepSeek不明DeepSeekBotDeepSeekBot—なし2026-11-02—
Alibaba不明QwenbotQwenbot—なし2026-11-02—
Zhipu AI不明ChatGLM-SpiderChatGLM-Spider—なし2026-11-02—
Diffbot不明DiffbotDiffbot—なし2026-11-02—
Parallel Web Systems検索ShapBotShapBothttps://docs.parallel.ai/resources/shapbot.jsonIP2026-11-02—
Parallel Web Systemsユーザー操作Shap-UserShap-User—なし2026-11-02—
ByteDance不明TikTokSpiderTikTokSpider—なし2026-11-02—
Cốc Cốc検索coccocbotcoccocbot—なし2026-11-02—
Yandex検索YandexBot / YandexMobileBotYandexBot / YandexMobileBot—なし2026-11-02—
Huawei検索PetalBotPetalBot—なし2026-11-02—
Semrushその他SemrushBotSemrushBot—なし2026-11-02—
Ahrefsその他AhrefsBot / AhrefsSiteAuditAhrefsBot / AhrefsSiteAudit—なし2026-11-02—
Mozその他DotBotDotBot—なし2026-11-02—
Majesticその他MJ12botMJ12bot—なし2026-11-02—
Babbarその他BarkrowlerBarkrowler—なし2026-11-02—
Palo Alto Networksその他———なし2026-11-02—
migurei (ours)その他pw-trial-compare——なし2026-11-02—
migurei (ours)その他migurei-ci-deploy-check——なし2026-11-02—
Blueskyその他CardybCardyb—なし2026-11-02—
DeepSeekユーザー操作———なし2026-11-02—
Googleユーザー操作Google——なし2026-11-02—

自分のサイトで、ボットが robots.txt を守り、本物の IP から来ているかを調べる: AI ボットのアクセス確認(Parallel World)。実際のログでの AI ボットの初回訪問の記録: AI ボットの初回訪問の調査。

自分のサイトが AI ボットに返す応答を curl で確かめる手順: robots.txt だけでは分からない:curl で確かめる。

作成: Parallel World