GPTBotはブロックすべきか。
GPTBotは、OpenAIのモデルを学習させるためにページを集めます。これをブロックしても、ChatGPTの回答から外れるわけではありません。その役割を担うのは別のクローラー、OAI-SearchBotです。大手AI企業は今、学習用と回答用に別々のクローラーを動かしており、それぞれについて判断できます。
学習、検索、そして人からの依頼。
| 会社 | クローラー | 役割 | ブロックした場合 |
|---|---|---|---|
| OpenAI | GPTBot | OpenAIのモデルを学習させるためにページを集める | ページは学習から外れる。ChatGPT検索には影響しない |
| OpenAI | OAI-SearchBot | ChatGPT検索のためにページを取得する | OpenAIによると、ChatGPT検索の回答に表示されなくなる |
| OpenAI | ChatGPT-User | 人がChatGPTに頼んだときにページを訪れる | OpenAIによると、人が頼んだものなのでrobots.txtが適用されない場合がある |
| Anthropic | ClaudeBot | Claudeの学習のためにページを集める | 今後のページは学習から外れる |
| Anthropic | Claude-SearchBot | Claudeの検索結果を作る | Anthropicによると、Claudeの検索で見えにくくなる可能性がある |
| Anthropic | Claude-User | 人がClaudeに尋ねたときにページを取得する | Claudeはその人のためにページを読めない |
| Google-Extended | Geminiの学習と、Geminiアプリでのグラウンディングを制御する | Geminiはページを使えない。Googleによると検索には影響しない | |
| Perplexity | PerplexityBot | Perplexityの検索結果を作る。Perplexityによると学習には使われない | Perplexityの回答からページが外れることがある |
2026年10月20日に閲覧した各社のページより：OpenAIのクローラーについてのページ、Anthropicのクローラーについてのページ、Google-Extendedに関するGoogleのページ、Perplexityのクローラーについてのページ。
学習はブロックし、回答は許可する。
多くのサイトは、学習用クローラーをブロックし、検索用クローラーを許可しています。そうすればページはモデルの学習から外れつつ、引用はされ続けます。これは方針の選択であって間違いではありません。無料のAI対応度チェックは、スコアの横に学習用クローラーの状況を表示しますが、ブロックを減点にはしません。
ホスティングも確認しましょう。2025年7月1日、Cloudflareは初期設定をAIクローラーのブロックに変えました（Cloudflare）。そのため、誰も決めていないのにサイトがAIクローラーをブロックしていることがあります。設定はCloudflareのダッシュボードにあります。
4つのステップで約10分。
robots.txtを読む
yoursite.com/robots.txtを開き、GPTBot、OAI-SearchBot、ClaudeBot、Claude-SearchBot、Google-Extended、PerplexityBotを探します。
ファイアウォールとホスティングを確認する
robots.txtで許可していても、セキュリティの設定がクローラーを追い返すことがあります。最もよくあるのはCloudflareのAIクローラーの設定です。
1日待つ
OpenAIによると、ChatGPT検索がrobots.txtの変更を反映するまで約24時間かかります。
聞かれる前にお答えします。
GPTBotはブロックすべきですか？
ページをOpenAIのモデルの学習に使われたくないなら、ブロックしてください。ChatGPT検索はOAI-SearchBotを使うので、ブロックしてもChatGPT検索から外れることはありません。ChatGPTに推薦されたいなら、OAI-SearchBotは許可したままにしましょう。
GPTBotをブロックすると、ChatGPTでの可視性に影響しますか？
OpenAIによると、ChatGPT検索には影響しません。GPTBotは学習用、OAI-SearchBotは検索用で、それぞれの設定は別々です。
GPTBotはブロックしつつ、ChatGPT検索は許可するには？
robots.txtにUser-agent: GPTBotの行を加え、続けてDisallow: /と書き、OAI-SearchBotは許可したままにします。
AIクローラーはrobots.txtに従いますか？
大手AI企業は、自社のクローラーは従うとしています。OpenAIは、人が頼んだためにページを訪れるChatGPT-Userは従わない場合があると注記しています。
AIが購入検討者にあなたのことをどう伝えているかを確認しましょう。
プランは月額€79（税抜）から。すべてのプランで11のアシスタントすべてを利用できます。無料のAI対応度チェックから始めることもできます。