RedditがAIクローラーに宣戦布告：RSSを廃止し、公開APIを制限
RedditがRSSフィードのサポート終了と公開APIへのオープンアクセス廃止を決定した。AIクローラーの横行に対抗するためとされ、かつて「デフォルトでオープン」だったインターネットが「デフォルトで閉鎖的」な方向へと向かっていることを改めて
AI爬虫 に関するニュース
Googleは敗訴後もDMCAでAIクローラー阻止を諦めず、専門家「奇妙な戦略だ」
米連邦裁判所がGoogleとRedditによるDMCAを根拠としたAIクローラー差し止め請求を棄却したにもかかわらず、両社は上訴と代替法的手段の追求を表明した。法律専門家たちはこの戦略を「目的に合わない道具の使い方」と批判している。
PatreonがCloudflareと連携してAIクローラーを積極的にブロック
クリエイタープラットフォームのPatreonは、Cloudflareと提携し、robots.txtによる「礼儀的なお願い」から踏み出して、許可なくコンテンツを収集するAIクローラーを技術的に強制遮断する体制へと移行した。この動きはコンテンツ
AIエージェントクローラーには許可が必要：Cloudflareの新ルールと認可ガイド
Cloudflareは2026年9月15日より、自社プラットフォーム上でAIエージェントクローラーをデフォルトでブロックする方針を発表した。これによりウェブサイト所有者が明示的に許可しない限り、AIボットはコンテンツにアクセスできなくなる。
Cloudflareの新規則：AIトレーニング用クローラーは検索クローラーと分離必須、違反すれば遮断
Cloudflareは9月15日までに、すべてのAI企業に対して検索インデックス用クローラーとAIトレーニング・AIエージェント用クローラーの明確な分離を義務付ける新方針を発表した。期限までに対応しない場合、該当クローラーは多数のパブリッシ
AIロボットがインターネットを席巻：ウェブトラフィックの主力軍に
最新のWIRED報道によると、AIボットは世界のウェブトラフィックの20-30%を占めるまでに成長し、従来の検索エンジンボットを上回る存在となっている。この現象はAI開発のデータ需要によるもので、出版社は防御策を強化し、インターネット生態系
AIロボットがウェブサイトトラフィックの重要な源に
最新データによると、AI駆動のボットクローラーがグローバルウェブトラフィックの15-20%を占め、パブリッシャーは技術的・法的対抗策を講じている。