Cloudflareは2026年7月、robots.txtを拡張してAIボットの振る舞いを制御する「Content Signals」に新たな利用許諾パラメータを追加した。コンテンツをAIボットが「その場で使うだけ」なのか「引用・リンク付きで参照」してよいのか「要約・転載までフル活用」してよいのかを3段階で明示できる仕組みで、Web運用担当者はこれを機に自社コンテンツのAI活用ルールを整理する必要がある。
- Cloudflareが2025年9月に導入した「Content Signals Policy」はrobots.txtに機械可読な意思表示を追加し、380万を超えるドメインへ展開済み
- 2026年7月、Enterprise Bot Management顧客向けに「use」パラメータを新設し、Immediate（保存・再利用不可）／Reference（索引化・引用・リンク併記）／Full（要約・転載可）の3段階を追加
- Cloudflareは検証済みボット（Verified Bot）がこの意思表示を守っているかをBotBaseで可視化し、違反すればVerified認定を外す仕組みを整えている
何が起きたのか
コンテンツ配信網大手のCloudflareは、robots.txtを拡張してAIボットにコンテンツの利用条件を伝える「Content Signals」の仕組みを拡張した。2025年9月に導入した基本版は、検索利用の可否・AIの学習利用の可否・AI回答への引用利用の可否を意思表示する仕組みで、すでに380万を超えるドメインに展開されている。
2026年7月の拡張では、Enterprise Bot Management顧客がコンテンツの利用範囲を「保存・再利用なし」「索引化や引用・リンク併記」「要約や再現を含むフル利用」の3段階で細かく指定できるようになった。
出典: （Help Net Security「Cloudflare changes AI crawler access rules」にもとづくエムズ編集部の整理）
www.helpnetsecurity.com/2026/07/02/cloudflare-ai-crawler-con
robots.txtはあくまで意思表示であり、無視するボットを技術的に止める強制力は持たない。それでもCloudflareは、意思表示を守らない検証済みボットの「Verified」認定を外すことでボット運営側に順守を促す仕組みを組み込んでおり、意思表示と実効性をセットで設計している点が特徴だ。
押さえるべき3つのポイント
今回のアップデートで押さえておきたいポイントは次の3つだ。
- robots.txtの延長線上の仕組み：新しいファイルを追加するのではなく、既存のrobots.txtにコメントと機械可読な1行を足すだけで運用できる設計になっている。
- 3段階の利用許諾レベル：Immediate・Reference・Fullという3段階で、AIボットにどこまでコンテンツを使わせるかを細かく指定できるようになった。
- Verified Bot認定との連動：意思表示を守っているかをBotBaseで可視化し、違反したボットは検証済み扱いから外れる仕組みでルールの実効性を高めている。
自社サイト運用への活かし方
AI検索やAI回答が当たり前になった今、自社のコンテンツを「検索には使わせるが学習には使わせない」といった線引きを明示できるかどうかが、Web運用担当者にとって新しい実務課題になっている。意思表示なきコンテンツは意図せぬ形でAIに使われるというのが今回のアップデートが示す現実で、まさに油断大敵という言葉がしみるところですね。
この考え方は、複数サイトの情報を一つに集約してSEO評価を管理してきた『メディカルドック』の統合設計とも通じる。歯科・病院・整骨院の3サイトを1つに統合し記事資産を一点集約した際も、どのコンテンツをどう評価させるかという構造整理が鍵になったわけです。AIボットへの意思表示や構造化データの整備はWeb事業の企画・運営支援で設計を組み立てられる領域で、AIO（AI最適化）を見据えたサイト構造の見直しはポータルサイト構築×AIのリニューアル支援でも対応できるんですね。
よくある質問
出典・参考
- Windows Central「Cloudflare updates robots.txt with new AI content controls」 https://www.windowscentral.com/artificial-intelligence/cloudflare-updates-robots-txt
- Help Net Security「Cloudflare changes AI crawler access rules」 https://www.helpnetsecurity.com/2026/07/02/cloudflare-ai-crawler-controls/
- Cloudflare Blog「Your site, your rules: new AI traffic options for all customers」 https://blog.cloudflare.com/content-independence-day-ai-options/
※本記事は上記の公開情報をもとに、株式会社エムズ編集部が独自に整理・考察したものです。内容は執筆時点（2026-09-22）の情報です。考察部分は当社の見解であり、特定の製品・導入を推奨するものではありません。
自社サイトのAIボット対策、
意思表示できていますか？
robots.txtの整備からサイト構造の見直し、AIO対応まで、Web運用のルール設計をご支援しています。ご相談・お見積りは無料です。
無料で相談する →
