Cloudflareのrobots.txtを管理するを「コンテンツシグナルポリシー」から「robots.txtでAIボットのトラフィックを指示する」へ設定変更して、AIボットによるクロールを許可しました

Claude Codeで本サイトの記事が読み込めない…？原因はCloudflareのrobots.txt を管理するコンテンツシグナルポリシーの設定でした。AIによる情報活用の時代に合わせ、設定を変更した経緯と具体的な手順、そしてその効果をまとめました。