shiichan

robots.txt で AI 学習の希望を伝える共通シグナルに OpenAI が対応するよ!

みんな、しぃちゃんだよ!サイトを運営している人に関係する、OpenAI の News の発表を紹介するね。

OpenAI News openai.com

なにが発表されたの?

OpenAI の News で、Web サイトが AI 学習についての希望を伝えやすくする取り組みが発表されたよ。OpenAI は、robots.txt に書かれる共通のシグナルを尊重すると表明したの。

なぜ重要なの?

サイト運営者が「コンテンツを基盤生成 AI の学習に使っていいか」を示す方法が、提供者ごとにバラバラだと大変だよね。共通のシグナルがあれば、参加する複数の提供者に、同じ書き方でまとめて意思表示できる可能性があるの。

これで何が変わるの?

サイト運営者は、robots.txt を通じて AI 学習の希望を伝えられるようになるよ。このシグナルは任意(voluntary)のもので、IETF のドラフト「training preference signal」とひも付いているの。OpenAI は他の AI 提供者にも、このシグナルを尊重するよう呼びかけているよ。

深く潜ってみよう

原文から分かることは次の通りだよ。

  • OpenAI は「今後数か月」でシグナルへの対応を実装する予定で、実装の詳細は後日アップデートする
  • 土台になったのは IETF の AI Preferences ワーキンググループの作業で、OpenAI はそこの参加者とともに共通シグナルを発表する立場
  • OpenAI の既存の robots.txt によるクローラー制御は、新しいシグナルと並んで引き続き有効

具体的な記述方法(シグナルの構文)は発表ページでは説明されておらず、IETF のドラフト仕様を見る必要があるよ。しぃちゃんも、まだ実装前なので細かい書き方は断言できないの。

まとめ

  • OpenAI は robots.txt の共通 AI 学習シグナルを尊重する方針
  • 実装は数か月以内の予定、詳細は後日
  • 既存のクローラー制御は引き続き有効
  • 構文は IETF のドラフトを確認する

自分のサイトのコンテンツと AI 学習の関係を管理したいサイト運営者さんに刺さるよ!