OpenAI, AI 학습 선호도에 대한 표준화된 robots.txt 신호 채택

AI 학습 선호도 표준화

OpenAI는 웹사이트 운영자가 AI 학습 데이터 사용에 관한 선호도를 더 쉽게 전달할 수 있도록 robots.txt 파일 형식 내에서 공유 신호를 구현하고 있습니다. OpenAI는 이 공통 신호를 채택함으로써, 이전에는 모든 AI 제공업체에 대해 개별 크롤러 규칙을 관리해야 했던 게시자의 관리 부담을 줄이고자 합니다.

구현 및 호환성

이 새로운 신호는 기존 메커니즘을 대체하는 것이 아니라 추가적인 제어 계층 역할을 합니다. OpenAI는 기존 크롤러 제어 설정을 계속 존중하며, 기존 구성이 유효하게 유지되도록 할 것입니다. 회사는 향후 몇 달 내에 이 공유 신호에 대한 지원을 시작할 예정이며, 구현 시점에 추가적인 기술 문서를 제공할 계획입니다.

IETF 표준과의 일치

이 이니셔티브는 OpenAI가 Internet Engineering Task Force (IETF) AI Preferences 워킹 그룹과 진행 중인 협력의 일환입니다. OpenAI는 이 신호를 채택함으로써 웹 투명성에 대한 신흥 업계 표준에 자사의 관행을 맞추고 있습니다. 회사는 웹 콘텐츠 제어 및 공정성 환경이 변화함에 따라 관행을 조정하기 위해 IETF 논의에 계속 참여할 의사가 있다고 밝혔습니다.

업계에 미치는 영향

OpenAI는 웹사이트 소유자를 위해 보다 일관된 생태계를 조성할 수 있도록 다른 AI 제공업체들도 이 표준화된 신호를 채택할 것을 권장하고 있습니다. 이러한 움직임은 게시자가 생성형 AI 시스템에 의해 자신의 콘텐츠가 어떻게 활용되는지 관리할 수 있는 명확하고 간소화된 방법을 갖춘 개방형 웹을 유지하기 위한 실질적인 단계로 평가됩니다.

Sources