☁️ Cloud & Infrastructure

【Cloudflare】AI学習のためのリダイレクト:カノニカルタグを301リダイレクトに変換

非推奨ドキュメントがAIモデルを汚染しているとしたら? Cloudflareはカノニカルタグを学習ボット向けのハードリダイレクトに切り替え、巧妙な問題への巧妙な解決策を提示した。

CloudflareダッシュボードでAIクローラーリダイレクトがカノニカルURLを強制している様子

⚡ Key Takeaways

  • カノニカルタグが、ボットがコンテンツとして扱う非推奨バナーを無視し、認証済みAI学習クローラー向けの自動301リダイレクトに変わる。 𝕏
  • Cloudflare Radarは、ウェブトラフィック全体のAIレスポンスコード(2xx/3xxなど)を追跡し、執行ギャップを明らかにする。 𝕏
  • 手動ルールよりもスケーラブル — UA追跡やパスごとの設定は不要。 𝕏
  • ユニークな洞察:初期ウェブのホットリンク戦争を反映し、コンテンツ所有者にAIデータダイエットに対する処方的制御を与える。 𝕏
Jordan Kim
Written by

Jordan Kim

Cloud and infrastructure correspondent. Covers Kubernetes, DevOps tooling, and platform engineering.

Worth sharing?

Get the best Developer Tools stories of the week in your inbox — no noise, no spam.

Originally reported by Cloudflare Blog

Stay in the loop

The week's most important stories from DevTools Feed, delivered once a week.