10月30日、OpenAI、Google、Microsoftはそれぞれ、ベンダー間でのAIトレーニングに関する設定シグナルのサポートを発表しました。ウェブサイトでは、robots.txt内で戦略トークン __usage_ai-training をUser-Agentとするグループを記述し、Disallow / Allow を用いてパスごとに「AIトレーニングへの使用を許可しない／許可する」を表現します。参加しているベンダーはこのルールに従って処理するため、各社のクローラーに対して個別にルールを書く必要がなくなります。この提案は、Anthropicの標準技術責任者であるKevin Kelley氏がIETFに提出した草案に基づいており、AIPREFワーキンググループによる「AIトレーニング」の定義を基盤としています。
信頼度：高（95） · イベント日時 2026-10-30
理由
- これまでウェブサイトはGPTBot、Google-Extended、ClaudeBotなどを個別にブロックする必要があり、1つでも漏れれば暗黙の許諾とみなされていました。Googleによれば、このトークンでトレーニング拒否を宣言し、かつGoogle-Extendedに対する個別ルールがない場合、GoogleはGoogle-Extendedも禁止されているものと解釈します。各社が従来から持つ固有のコントロール機能は引き続き有効であり、統一された表明を行った後に特定のベンダーのみを許可するといった運用も可能です。
- 実装時期にはばらつきがあります。The Vergeによると、Anthropicはすでに採用済みです。Googleは2027年に他社と共同でサポートを開始する計画だと述べています。Microsoftは2027年2月1日からクロール時に実行すると表明しています。OpenAIは「今後数か月以内」としています。Metaはこの方向性を支持していますが、遵守するか否かは明言していません。
- Microsoftは同時に自社ルールも調整しました。ページレベルの「AIトレーニング」設定と、回答生成時にウェブページを参照する「AI接地（grounding）」用の個別設定を追加し、接地についてはDisallowまたはMicrosoft製品限定で無効化するDisallowExtendedを選択可能にしました。これらの設定は、Bing検索結果におけるウェブページのランキング資格には影響しません。また、従来のNoArchive / NoCache設定は、2027年3月1日以降、トレーニングおよび接地に関する設定として読み取られなくなります。
使い方
- トレーニングへの使用を拒否したいウェブサイトは、robots.txtに
User-Agent: \_\_usage\_ai-trainingを記述し、その次の行にDisallow: /を追加します（必要に応じてAllowで特定のディレクトリを許可できます）。ワイルドカードのUser-Agent: *はこのトークンとして扱われません。草案の全文はIETF datatracker（draft-kelley-aipref-training-preference-signal）で確認できます。 - Bing / Copilotを利用するサイト管理者は、Bing Webmaster Blogの移行ガイドも参照してください。NoArchive / NoCacheを使用しているサイトは、2027年3月1日までに新しい設定へ移行する必要があります。また、12月15日以降は、Bing Webmaster Toolsで暫定的な接地設定を登録できます。
リスク
- これは個人が提出したIETF草案（-00版）に過ぎず、草案自体にIETFによる承認を得ていない旨が明記されています。AIPREFワーキンググループの用語集の残りの部分については、現在も議論が続いています。
- これはあくまで設定の表明であり、アクセス制御ではありません。参加していないベンダーやクローラーは無視する可能性があります。また、ライセンス料や支払いに関する事項は含まれていません。
- OpenAIの原文へのリクエストは拒否されました（403）。OpenAIの具体的なコミットメントやスケジュールは、RSSの要約やThe Vergeの報道に基づいています。
開く · Google検索センターブログ · Bingブログ · IETF草案 draft-kelley-aipref-training-preference-signal · The Verge