生成AIの普及に伴い、Webサイト上の文章や画像がAIの学習や回答生成を目的として自動的に利用されるケースが増えていることを知ってますか?
ChatGPTやGeminiなどのAIは、Web上のページを自動で巡回する仕組み(AIクローラー)を動かしています。
対象は大手サイトだけでなく、個人ブログや企業サイト、専門サイトも含まれます。
つまり、あなたのサイトに書いている文章や画像も、すでに取得・利用されている可能性があります。
AIクローラー対策をしていないのは危険
AIクローラーは、検索エンジンとは違い、
- 収集されても通知されない
- どこでどう使われるか分からない
- サイト運営者がコントロールしにくい
という特徴があります。
独自コンテンツを運営している場合、対策をしていない状態は無防備に近いと感じています。
私は、すぐに対策しました
私は、自分が運営しているドメインすべてで、AIクローラー対策を行いました。
使ったのは、私が利用しているエックスサーバーの「AIクローラー遮断設定」です。
この機能を有効化(ON)にすると、主要なAIクローラーからのアクセスが遮断されます。
以下が、遮断対象となるAIクローラーの一覧です(エックスサーバー公式の遮断対象リストより)
- GPTBot
- ChatGPT-User
- OAI-SearchBot
- ClaudeBot
- Claude-User
- Claude-SearchBot
- anthropic-ai
- claude-web
- Google-Extended
- meta-externalagent
- CCbot
- SBIntuitionsBot
- PerplexityBot
- MistralAI-User
- Bytespider
- cohere-ai
- cohere-training-data-crawler
- img2dataset
- ChatGLM-Spider
- AI2Bot
- sider.ai
- TheKnowledgeAI
上記は、AIの学習データ収集や回答生成に使われることがある主要なクローラーです。
これらをまとめて遮断できるのが、エックスサーバーの機能の特徴です。
サーバーの管理画面から設定でき、.htaccessの編集などは不要で、画面操作だけで完了しました。
AIクローラー遮断対応サーバー
▶ エックスサーバー公式サイトはこちら
これからは「遮断できるか」がサーバー選びの条件
これまでは、速度や価格がサーバー選びの基準でした。
これからはそこに、
・AIクローラーを遮断できるか
という条件が加わると思います。
私はたまたまエックスサーバーを使っていたので、そのまま対策できましたが、これから契約する人は、最初から対応しているサーバーを選んだ方が楽です。
私が使っているサーバー(AIクローラー対策済み)

AIクローラー対策を今すぐ行う

