AIクローラーを遮断しよう

生成AIの普及に伴い、Webサイト上の文章や画像がAIの学習や回答生成を目的として自動的に利用されるケースが増えていることを知ってますか?

ChatGPTやGeminiなどのAIは、Web上のページを自動で巡回する仕組み(AIクローラー)を動かしています。

対象は大手サイトだけでなく、個人ブログや企業サイト、専門サイトも含まれます。

つまり、あなたのサイトに書いている文章や画像も、すでに取得・利用されている可能性があります。


目次

AIクローラー対策をしていないのは危険

AIクローラーは、検索エンジンとは違い、

  • 収集されても通知されない
  • どこでどう使われるか分からない
  • サイト運営者がコントロールしにくい

という特徴があります。

独自コンテンツを運営している場合、対策をしていない状態は無防備に近いと感じています。


私は、すぐに対策しました

私は、自分が運営しているドメインすべてで、AIクローラー対策を行いました。

使ったのは、私が利用しているエックスサーバーの「AIクローラー遮断設定」です。
この機能を有効化(ON)にすると、主要なAIクローラーからのアクセスが遮断されます。

以下が、遮断対象となるAIクローラーの一覧です(エックスサーバー公式の遮断対象リストより)

  • GPTBot
  • ChatGPT-User
  • OAI-SearchBot
  • ClaudeBot
  • Claude-User
  • Claude-SearchBot
  • anthropic-ai
  • claude-web
  • Google-Extended
  • meta-externalagent
  • CCbot
  • SBIntuitionsBot
  • PerplexityBot
  • MistralAI-User
  • Bytespider
  • cohere-ai
  • cohere-training-data-crawler
  • img2dataset
  • ChatGLM-Spider
  • AI2Bot
  • sider.ai
  • TheKnowledgeAI

上記は、AIの学習データ収集や回答生成に使われることがある主要なクローラーです。

これらをまとめて遮断できるのが、エックスサーバーの機能の特徴です。

サーバーの管理画面から設定でき、.htaccessの編集などは不要で、画面操作だけで完了しました。

AIクローラー遮断対応サーバー

▶ エックスサーバー公式サイトはこちら


これからは「遮断できるか」がサーバー選びの条件

これまでは、速度や価格がサーバー選びの基準でした。

これからはそこに、

・AIクローラーを遮断できるか

という条件が加わると思います。

私はたまたまエックスサーバーを使っていたので、そのまま対策できましたが、これから契約する人は、最初から対応しているサーバーを選んだ方が楽です。


私が使っているサーバー(AIクローラー対策済み)

レンタルサーバー 高速・高機能・...
レンタルサーバー 高速・高機能・高安定性の【エックスサーバー】 高速かつ高い安定性を誇る高性能レンタルサーバー【エックスサーバー】稼働率99.99%以上の高い安定性で、業界トップクラスの高コストパフォーマンスを誇る高品質レンタル...

AIクローラー対策を今すぐ行う


▶ エックスサーバー公式サイトはこちら

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!
目次