新たな制御により、パブリッシャーは複数のクローラーに対して自らのAI学習に関する優先設定を適用できるようになる。
新たな制御により、パブリッシャーは複数のクローラーに対して自らのAI学習に関する優先設定を適用できるようになる。
OpenAI、Google、Microsoft、Anthropicは、パブリッシャーがAIによるスクレイピングを拒否するための新しい標準を採用すると述べており、これは以前にSearch Engine Roundtableによって報じられた。この制御により、パブリッシャーは個別に設定するのではなく、複数のAI企業にわたって自らのAI学習に関する優先設定を適用できるようになる。
共有される「ポリシートークン」シグナルは、Anthropicの標準担当技術責任者であるケビン・ケリーによって、インターネットエンジニアリングタスクフォース（IETF）の一環として提案されたものだ。このシグナルはウェブサイトのrobots.txtファイル内に置かれ、長年にわたり、検索インデックス作成やアーカイブ、あるいはAI学習のために、どのウェブクローラーがそのサイトをスクレイピングしてよいのか、あるいはしてはいけないのかを示してきた。現在、各サイトはAI企業ごとに個別にAI学習に関する優先設定を通知しなければならない。
この発表は、出版社が自社サイトをスクレイピングし、そのコンテンツをAIモデルに供給するAIクローラーの継続的な流入に直面している最中に出てきました。一部の企業や組織は不正なスクレイピングに対抗しようと試みており、Really Simple Licensing（RSL）規格により、出版社は自社サイトを訪れるクローラーに対して料金を請求できるようになり、CloudflareはデフォルトでAIクローラーをブロックしています。
OpenAI、Google、Microsoft、Anthropicは、共有トークンに遭遇した場合、自社のAIクローラーによるサイトへのアクセスを制限すると述べています。ただし、Microsoftはより細かな制御機能を提供し、出版社にはAIトレーニングや、AIの誤った生成を抑えるために検証済みの情報源を指し示す「AIグラウンディング」プロセスから除外する選択肢を与えます。なお、Microsoftは、ウェブサイトの設定に関わらず、Bingの検索結果には依然として表示されると指摘しています。
Anthropicはすでにこの信号を採用していますが、GoogleとMicrosoftは来年に対応する予定です。一方、OpenAIは「今後数か月以内」に導入すると述べています。
エマ・ロス
アンソロピック
マイクロソフト
人気記事
Redditが全員のログインを義務化
MicrosoftのAIの未来には雇用が減少する見込み
Apple Pencilのおかげで、Duoは私の新しいお気に入りのノートになりました
Anthropicの事業計画：神を創るか、試みるなかで死ぬか
サム・アルトマンは数学者たちに共感を示しつつも、OpenAIによる数学分野への攻勢は止まらないと語っています。
これがネイティブ広告のタイトルです