検索エンジン一覧（62種）

検索エンジン に分類される AI クローラー・ボットは 62 種です。User-Agent 文字列・運営元・用途（学習用 / 検索引用 / エージェント）を一覧で確認でき、robots.txtrobots.txtクローラーに取得を許可する範囲を伝える、サイトのルートに置くテキストファイル。AI用語辞典で詳しく見る → で許可するかブロックするかの判断に使えます。

検索エンジンのクローラーです。AI 検索の回答の根拠としても参照されます。 全体像は AIクローラー Bot ディレクトリ（全 254 種）からご覧ください。

62 件のボットを収録（運営元 13 社）。下の表は User-Agent の文字列そのままです。robots.txt に貼るときは引用符を付けずに記述してください。

検索エンジンカテゴリの User-Agent 一覧（62 件）
User-Agent運営元用途説明
Applebot-Extended用語解説Apple学習用Apple が学習データの収集のためにページを取得します。ブロックすると Apple の AI 回答に自社情報が載りにくくなります。
BaiduspiderBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-adsBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-cproBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-favoBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-imageBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-newsBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Baiduspider-videoBaidu学習用Baidu が学習データの収集のためにページを取得します。ブロックすると Baidu の AI 回答に自社情報が載りにくくなります。
Amzn-SearchBotAmazon検索引用Amazon が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。
KagibotKagi検索引用Kagi が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。
YaDirectFetcherYandex検索引用Yandex が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。
YandexSearchShopYandex検索引用Yandex が AI 検索の回答にページを引用するために取得します。ブロックすると AI 経由の流入機会が減ります。
AdIdxBotMicrosoft―Microsoft が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
ApplebotApple―Apple が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
baiduBaidu―Baidu が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
bingbotMicrosoft―Microsoft が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
BingPreviewMicrosoft―Microsoft が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
BingVideoPreviewMicrosoft―Microsoft が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
DuckDuckBotDuckDuckGo―DuckDuckGo が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
GooglebotGoogle―Google が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
IbouBotIbou―Ibou が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
MicrosoftPreviewMicrosoft―Microsoft が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
MojeekMojeek―Mojeek が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
MojeekBotMojeek―Mojeek が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
PetalBotHuawei―Huawei が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
SeznamBotSeznam―Seznam が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
SlurpYahoo―Yahoo が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexAccessibilityBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexAdditionalYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexAdditionalBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexAdNetYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexBlogsYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexCalendarYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexCheckBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexComBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexDirectYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexDirectDynYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexFaviconsYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexFeedYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexImageResizerYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexImagesYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexMarketYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexMediaYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexMobileBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexMobileScreenShotBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexOntoDBYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexOntoDBAPIYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexPagecheckerYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexPartnerYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexRCAYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexRenderResourcesBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexScreenshotBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexSitelinksYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexSpravBotYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexUserproxyYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexVerticalsYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexVertisYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexVideoYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexVideoParserYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。
YandexWebmasterYandex―Yandex が運用するクローラー／ボットです。robots.txt での許可状況を確認できます。

robots.txt の記述例

このカテゴリの代表的な User-Agent をブロックする場合の書き方です。許可する場合は該当ブロックごと削除してください。判定は各社の公式ドキュメントで最新情報をご確認ください。

User-agent: Applebot-Extended
Disallow: /

User-agent: Baiduspider
Disallow: /

User-agent: Baiduspider-ads
Disallow: /

User-agent: Baiduspider-cpro
Disallow: /

User-agent: Baiduspider-favo
Disallow: /

他のカテゴリ

ディレクトリでこの条件を絞り込む 全 254 種の一覧へ 収録データの全体像

免責事項：本ツールの診断結果は参考情報であり、AIサービスでのコンテンツ収録を保証するものではありません。判定は取得時点の robots.txt 記述・HTTP レスポンス・HTML にもとづく機械的な推定であり、実際の動作は各サービスの仕様変更、WAF やレート制限、CDN の設定により異なる場合があります。

週1回・無料

新着ツール・比較・使い方を、
週1でまとめて受け取る

毎日更新している掲載データの中から、編集部が選んでメールでお届けします。いつでも配信停止できます。

  • 新着ツールその時に話題のツールと、最初に試すときの要点
  • 比較と料金の更新よく比べられる組み合わせと、料金が変わったツール
  • 使い方の解説記事実際に試して書いた記事から、読みごたえのあるものを厳選
無料会員登録 ツールを探す 料金プラン

登録により 利用規約に同意したとみなされます。確認メールのリンクを押すと登録が完了します。

My-Best.AI｜AIツール比較・ランキング・おすすめ最新AI情報
Logo