AI・LLMボット一覧（94種）
AI・LLMボット に分類される AI クローラー・ボットは 94 種です。User-Agent 文字列・運営元・用途（学習用 / 検索引用 / エージェント）を一覧で確認でき、robots.txtrobots.txtクローラーに取得を許可する範囲を伝える、サイトのルートに置くテキストファイル。AI用語辞典で詳しく見る → で許可するかブロックするかの判断に使えます。
AI・LLM に関わるボットのため、AEOAEOAI検索の回答に自社情報を引用・言及してもらうための最適化のこと。AI用語辞典で詳しく見る → では最優先で確認したいカテゴリです。 全体像は AIクローラー Bot ディレクトリ（全 254 種）からご覧ください。
94 件のボットを収録（運営元 56 社）。下の表は User-Agent の文字列そのままです。robots.txt に貼るときは引用符を付けずに記述してください。
| User-Agent | 運営元 | 用途 | 説明 |
|---|---|---|---|
ClaudeBot用語解説 | Anthropic | 学習用 | Anthropic が学習データの収集のためにページを取得します。ブロックすると Anthropic の AI 回答に自社情報が載りにくくなります。 |
Google-Extended用語解説 | 学習用 | Google が学習データの収集のためにページを取得します。ブロックすると Google の AI 回答に自社情報が載りにくくなります。 | |
GPTBot用語解説 | OpenAI | 学習用 | OpenAI が学習データの収集のためにページを取得します。ブロックすると OpenAI の AI 回答に自社情報が載りにくくなります。 |
GrokAgent | xAI | 学習用 | xAI が学習データの収集のためにページを取得します。ブロックすると xAI の AI 回答に自社情報が載りにくくなります。 |
Meta-ExternalAgent | Meta | 学習用 | Meta が学習データの収集のためにページを取得します。ブロックすると Meta の AI 回答に自社情報が載りにくくなります。 |
muse- | Meta | 学習用 | Meta が学習データの収集のためにページを取得します。ブロックすると Meta の AI 回答に自社情報が載りにくくなります。 |
ChatGPT-User/2.0 | OpenAI | 検索引用 | OpenAI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Claude-SearchBot | Anthropic | 検索引用 | Anthropic が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Claude-User | Anthropic | 検索引用 | Anthropic が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
OAI-SearchBot用語解説 | OpenAI | 検索引用 | OpenAI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
PerplexityBot用語解説 | Perplexity AI | 検索引用 | Perplexity AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
ChatGPT Operator | OpenAI | エージェント | OpenAI のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
ChatGPT Agent | OpenAI | ― | OpenAI が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
AI2Bot | Allen Institute for AI | 学習用 | Allen Institute for AI が学習データの収集のためにページを取得します。ブロックすると Allen Institute for AI の AI 回答に自社情報が載りにくくなります。 |
anthropic-ai | Anthropic | 学習用 | Anthropic が学習データの収集のためにページを取得します。ブロックすると Anthropic の AI 回答に自社情報が載りにくくなります。 |
ChatGLM-Spider | Zhipu AI | 学習用 | Zhipu AI が学習データの収集のためにページを取得します。ブロックすると Zhipu AI の AI 回答に自社情報が載りにくくなります。 |
cohere-ai | Cohere | 学習用 | Cohere が学習データの収集のためにページを取得します。ブロックすると Cohere の AI 回答に自社情報が載りにくくなります。 |
cohere-training-data-crawler | Cohere | 学習用 | Cohere が学習データの収集のためにページを取得します。ブロックすると Cohere の AI 回答に自社情報が載りにくくなります。 |
DeepSeekBot | DeepSeek | 学習用 | DeepSeek が学習データの収集のためにページを取得します。ブロックすると DeepSeek の AI 回答に自社情報が載りにくくなります。 |
DoubaoBot | ByteDance | 学習用 | ByteDance が学習データの収集のためにページを取得します。ブロックすると ByteDance の AI 回答に自社情報が載りにくくなります。 |
ERNIEBot | Baidu | 学習用 | Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。 |
ExaBot | Exa | 学習用 | Exa が学習データの収集のためにページを取得します。ブロックすると Exa の AI 回答に自社情報が載りにくくなります。 |
FirecrawlAgent | Firecrawl | 学習用 | Firecrawl が学習データの収集のためにページを取得します。ブロックすると Firecrawl の AI 回答に自社情報が載りにくくなります。 |
GrokBot | xAI | 学習用 | xAI が学習データの収集のためにページを取得します。ブロックすると xAI の AI 回答に自社情報が載りにくくなります。 |
HarkBot | Hark | 学習用 | Hark が学習データの収集のためにページを取得します。ブロックすると Hark の AI 回答に自社情報が載りにくくなります。 |
iaskspider | iAsk | 学習用 | iAsk が学習データの収集のためにページを取得します。ブロックすると iAsk の AI 回答に自社情報が載りにくくなります。 |
img2dataset | Open Source Community | 学習用 | Open Source Community が学習データの収集のためにページを取得します。ブロックすると Open Source Community の AI 回答に自社情報が載りにくくなります。 |
KimiBot | Moonshot AI | 学習用 | Moonshot AI が学習データの収集のためにページを取得します。ブロックすると Moonshot AI の AI 回答に自社情報が載りにくくなります。 |
LAIONDownloader | LAION | 学習用 | LAION が学習データの収集のためにページを取得します。ブロックすると LAION の AI 回答に自社情報が載りにくくなります。 |
MistralAI-Training | Mistral AI | 学習用 | Mistral AI が学習データの収集のためにページを取得します。ブロックすると Mistral AI の AI 回答に自社情報が載りにくくなります。 |
MyCentralAIScraperBot | MyCentral AI | 学習用 | MyCentral AI が学習データの収集のためにページを取得します。ブロックすると MyCentral AI の AI 回答に自社情報が載りにくくなります。 |
PanguBot | Huawei | 学習用 | Huawei が学習データの収集のためにページを取得します。ブロックすると Huawei の AI 回答に自社情報が載りにくくなります。 |
QwenBot | Alibaba | 学習用 | Alibaba が学習データの収集のためにページを取得します。ブロックすると Alibaba の AI 回答に自社情報が載りにくくなります。 |
TerraCotta | Ceramic AI | 学習用 | Ceramic AI が学習データの収集のためにページを取得します。ブロックすると Ceramic AI の AI 回答に自社情報が載りにくくなります。 |
TongyiBot | Alibaba | 学習用 | Alibaba が学習データの収集のためにページを取得します。ブロックすると Alibaba の AI 回答に自社情報が載りにくくなります。 |
YiyanBot | Baidu | 学習用 | Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。 |
AddSearchBot | AddSearch | 検索引用 | AddSearch が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
AIWebIndex | Lyrenth | 検索引用 | Lyrenth が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Amzn-User | Amazon | 検索引用 | Amazon が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Andibot | Andi | 検索引用 | Andi が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
AzureAI-SearchBot | Microsoft | 検索引用 | Microsoft が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Bravebot | Brave | 検索引用 | Brave が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Cloudflare-AutoRAG | Cloudflare | 検索引用 | Cloudflare が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
DuckAssistBot | DuckDuckGo | 検索引用 | DuckDuckGo が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
ExaSearchBot | Exa | 検索引用 | Exa が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
iAskBot | iAsk | 検索引用 | iAsk が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
kagi-fetcher | Kagi | 検索引用 | Kagi が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
KernelSearchBot | Kernel | 検索引用 | Kernel が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Kimi-SearchBot | Moonshot AI | 検索引用 | Moonshot AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Kimi-User | Moonshot AI | 検索引用 | Moonshot AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
LinerBot | LINER | 検索引用 | LINER が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
LinkupBot | Linkup | 検索引用 | Linkup が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Meta-ExternalFetcher | Meta | 検索引用 | Meta が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
meta-webindexer | Meta | 検索引用 | Meta が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
MistralAI-Index | Mistral AI | 検索引用 | Mistral AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
MistralAI-User-1.0 | Mistral AI | 検索引用 | Mistral AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Perplexity-User-1.0 | Perplexity AI | 検索引用 | Perplexity AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
PhindBot | Phind | 検索引用 | Phind が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Reflectionbot | Reflection AI | 検索引用 | Reflection AI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
SBIntuitions-SearchBot | SB Intuitions | 検索引用 | SB Intuitions が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
TavilyBot | Tavily | 検索引用 | Tavily が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
WRTNBot | WRTN | 検索引用 | WRTN が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
xAI-SearchBot | xAI | 検索引用 | xAI が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
YouBot | You | 検索引用 | You が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
AI2Bot-DeepResearchEval | Allen Institute for AI | エージェント | Allen Institute for AI のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
AmazonBuyForMe | Amazon | エージェント | Amazon のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Claude-Code | Anthropic | エージェント | Anthropic のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Devin | Cognition AI | エージェント | Cognition AI のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Google-Gemini-CLI | エージェント | Google のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 | |
GoogleAgent-Mariner | エージェント | Google のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 | |
GoogleAgent-URLContext | エージェント | Google のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 | |
Manus-User | Manus | エージェント | Manus のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Mozilla-Tabstack | Mozilla | エージェント | Mozilla のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
NovaAct | Amazon | エージェント | Amazon のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
aiHitBot | aiHit | ― | aiHit が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
atlassian-bot | Atlassian | ― | Atlassian が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
bedrockbot | Amazon | ― | Amazon が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
Claude-Web | Anthropic | ― | Anthropic が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
Google-Firebase | ― | Google が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 | |
KlaviyoAIBot | Klaviyo | ― | Klaviyo が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
OAI-AdsBot | OpenAI | ― | OpenAI が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
QuillBot | QuillBot | ― | QuillBot が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
SBIntuitionsBot | SB Intuitions | ― | SB Intuitions が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
alphalens-bot | Alphalens | 検索引用 | Alphalens が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
amazon-QBusiness | Amazon | 検索引用 | Amazon が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Diffbot-User | Diffbot | 検索引用 | Diffbot が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Shap-User | Parallel | 検索引用 | Parallel が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。 |
Cursor | Anysphere | エージェント | Anysphere のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
opencode | OpenCode | エージェント | OpenCode のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Trae | ByteDance | エージェント | ByteDance のユーザー操作代行型エージェントです。ユーザーの指示でページを開きます。 |
Anomura | Direqt | ― | Direqt が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
ShapBot | Parallel | ― | Parallel が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
ZipchatBot | Zipchat | ― | Zipchat が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
meta-externaltest | Meta | ― | Meta が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。 |
robots.txt の記述例
このカテゴリの代表的な User-Agent をブロックする場合の書き方です。許可する場合は該当ブロックごと削除してください。判定は各社の公式ドキュメントで最新情報をご確認ください。
User-agent: ClaudeBot Disallow: / User-agent: Google-Extended Disallow: / User-agent: GPTBot Disallow: / User-agent: GrokAgent Disallow: / User-agent: Meta-ExternalAgent Disallow: /
他のカテゴリ
免責事項：本ツールの診断結果は参考情報であり、AIサービスでのコンテンツ収録を保証するものではありません。判定は取得時点の robots.txt 記述・HTTP レスポンス・HTML にもとづく機械的な推定であり、実際の動作は各サービスの仕様変更、WAF やレート制限、CDN の設定により異なる場合があります。