새로운 제어 기능은 출판사들이 여러 크롤러에 걸쳐 자신의 AI 학습 선호 사항을 적용할 수 있도록 해줍니다.
새로운 제어 기능은 출판사들이 여러 크롤러에 걸쳐 자신의 AI 학습 선호 사항을 적용할 수 있도록 해줍니다.
OpenAI, Google, Microsoft, 그리고 Anthropic은 출판사들이 AI에 의해 데이터를 수집되는 것을 거부할 수 있는 새로운 표준을 채택할 것이라고 밝혔습니다. 이는 앞서 Search Engine Roundtable에서 보도된 바와 같습니다. 이러한 제어 기능을 통해 출판사들은 개별적으로 설정해야 했던 AI 학습 선호 사항을 여러 AI 기업에 걸쳐 일괄적으로 적용할 수 있게 됩니다.
공유된 “정책 토큰” 신호는 Anthropic의 표준 담당 기술 책임자인 Kevin Kelley가 인터넷 엔지니어링 태스크 포스(IETF)의 일환으로 제안한 것입니다. 이 신호는 웹사이트의 robots.txt 파일 내에 포함되며, 오랫동안 검색 색인, 아카이브 또는 AI 학습 등을 위해 어떤 웹 크롤러가 해당 사이트를 크롤링할 수 있고 할 수 없는지를 알려 왔습니다. 현재는 각 AI 기업마다 개별적으로 AI 학습 선호 사항을 알리고 있어야 합니다.
이 발표는 출판사들이 자사 웹사이트를 스크랩하고 그 콘텐츠를 AI 모델에 제공하는 AI 크롤러들의 지속적인 유입에 대처하고 있는 시점에 나온 것입니다. 일부 기업과 단체들은 무단 스크랩에 맞서기 위해 노력해 왔으며, Really Simple Licensing(RSL) 표준을 통해 출판사들은 자사 사이트를 방문하는 크롤러들에게 비용을 부과할 수 있는 권한을 얻었고, 클라우드플레어는 기본적으로 AI 크롤러를 차단하고 있습니다.
OpenAI, Google, Microsoft, 그리고 Anthropic은 공유 토큰을 발견하면 자사의 AI 크롤러가 해당 사이트에 접근하는 것을 제한하겠다고 밝혔습니다. 다만 Microsoft는 보다 세분화된 제어 옵션을 제공하여, 출판사들이 환각 현상을 줄이기 위해 AI 모델에 검증된 정보원을 지정하는 과정인 AI 교육 또는 AI 기반 설정에서 제외될 수 있도록 할 예정입니다. Microsoft는 이러한 설정에도 불구하고 웹사이트는 사용자의 선택과 관계없이 여전히 Bing의 검색 결과에 표시된다고 언급했습니다.
Anthropic은 이미 이 신호를 도입했지만, Google과 Microsoft는 내년에 이를 지원할 계획입니다. OpenAI는 “향후 몇 달 안에” 이를 적용할 것이라고 밝혔습니다.
에마 로스
Anthropic
Microsoft
가장 인기 있는
레딧, 모든 사용자에게 로그인을 의무화할 예정
마이크로소프트의 AI 미래에는 일자리가 더 적어진다
애플 펜슬 덕분에 듀오는 이제 저의 새로운 최애 노트북이 되었습니다
Anthropic의 사업 계획: 신을 만들거나 아니면 시도하다가 죽는 것
샘 알트먼은 수학자들에 공감하지만, OpenAI의 수학 관련 공세는 멈추지 않을 것이라고 말합니다.
이것은 네이티브 광고의 제목입니다