CloudflareのAIクローラー管理ルールがGooglebotをブロックする可能性
サマリー
CloudflareはAIクローラーの管理方法を更新し、9月15日からトレーニングをブロックするサイトはGooglebotなどもブロックされる可能性があります。サイトオーナーは設定を確認し、必要に応じて変更することが求められます。この変更は、サイトの検索可視性に影響を与える可能性があります。
本文
Cloudflareは、すべての顧客がAIクローラーを「検索」「エージェント」「トレーニング」の3つに分類し、それぞれを個別に管理できるようにしました。9月15日からは、トレーニングをブロックするサイトはGooglebotやApplebot、Bingbotなどの複合クローラーもブロックされることになります。サイトオーナーは、期限前にCloudflareダッシュボードでこれらの設定を確認または変更できます。新しいルールにより、AIクローラーの管理がより細分化され、サイトの可視性に影響を与える可能性があります。
