메타의 수정된 상업 약관, 여전히 광범위한 스크래핑 허용... 법률 전문가들이 10월 30일 마감 전 경고

메타는 비즈니스 계정에 대한 다가오는 서비스 약관에서 'train'이라는 단어를 제거했지만, 법률 전문가들은 수정된 문구가 여전히 해당 계정과 연관된 웹사이트를 스크래핑할 수 있는 광범위한 권한을 부여하며, robots.txt 준수는 계약상 의무가 아닌 자발적 약속으로 남아 있다고 말합니다.

금요일 오후에 발표된 이 수정안은 니만 연구소(Nieman Lab)가 목요일에 보도한 기사에 따른 것입니다. 해당 기사는 새로운 상업 약관이 비즈니스 계정과 '연관된' 웹사이트의 광범위한 스크래핑을 허용하고, 메타가 이 콘텐츠를 AI 모델 훈련에 사용할 가능성이 있다고 보도했습니다. 새로운 약관은 10월 30일부터 시행될 예정이며, 비즈니스 계정은 그 전에 거부할 수 있는 옵션이 없습니다.

메타가 수정된 약관에서 변경한 사항

메타의 수정안은 허용된 사용 사례 목록에서 'train'이라는 단어를 제거하고, 사용 범위를 모든 메타 제품 대신 '광고 및 비즈니스 제품'으로 좁혔습니다. 또한 회사는 플랫폼 보안 및 무결성에 관한 문구를 추가했습니다.

수정된 섹션은 이제 일부 다음과 같이 읽힙니다:

귀하는 당사(또는 당사를 대신하여 행동하는 모든 기관)가 귀하의 제품 또는 서비스와 연관되거나, 귀하 또는 사용자의 메타 회사 제품 및 서비스 사용을 통해 제공되는 도메인, 웹 페이지 또는 URL(및 이를 통해 이용 가능한 모든 콘텐츠)에 접근, 색인, 캐시, 분석, 수집, 검색 또는 크롤링하기 위해 자동화된 소프트웨어(예: 웹 스크래퍼, 봇, 로봇, 스파이더, 크롤러 및 사용자 에이전트)를 사용하고 테스트 자격 증명을 생성하며, 그러한 도메인, 웹 페이지 또는 URL에서 주기적으로 업데이트를 가져오는 것을 승인합니다. 광고 및 비즈니스 제품을 제공, 개발, 개선, 연구 및 유지하기 위해(귀하가 광고 및 기타 상업 콘텐츠를 만들고 전달하는 데 도움이 되는 비즈니스, 상업 및 관련 제품 포함, 귀하의 제품 및 서비스에 대한 정보를 사용자에게 제공하고, 귀하의 제품 및 서비스에 관심이 있을 수 있는 사용자와 연결) 및 메타 회사 제품의 무결성 및 보안을 유지하기 위해.

보관된 원본 버전은 다음과 같습니다:

귀하는 당사(또는 당사를 대신하여 행동하는 모든 기관)가 귀하의 제품 또는 서비스와 연관되거나, 귀하 또는 사용자의 메타 회사 제품 및 서비스 사용을 통해 제공되는 도메인, 웹 페이지 또는 URL(및 이를 통해 이용 가능한 모든 콘텐츠)에 접근, 색인, 캐시, 분석, 수집, 검색 또는 크롤링하기 위해 자동화된 소프트웨어(예: 웹 스크래퍼, 봇, 로봇, 스파이더, 크롤러 및 사용자 에이전트)를 사용하고 테스트 자격 증명을 생성하며, 그러한 도메인, 웹 페이지 또는 URL에서 주기적으로 업데이트를 가져오는 것을 승인합니다. 메타는 이러한 상업 약관 및 기타 적용 가능한 보충 약관에 따라 제공되는 메타 회사 제품, 서비스 및 기능을 제공, 개발, 개선, 연구, 훈련 및 무결성을 유지하기 위해 그러한 도메인, 웹 페이지 또는 URL의 모든 콘텐츠를 사용할 수 있습니다.

법률 전문가들이 수정안이 핵심 우려를 해결하지 못한다고 말하는 이유

니만 연구소가 자문한 세 명의 법률 전문가들은 수정된 약관과 메타의 관련 발언에 회의적이었습니다. 그들의 반대 의견은 세 가지 핵심에 집중되어 있습니다: 'develop'이라는 단어가 여전히 AI 훈련을 포함하고, robots.txt는 법적으로 집행 가능하지 않으며, '귀하의 제품 또는 서비스와 연관된'이라는 문구가 여전히 전체 사이트 스크래핑을 허용한다는 것입니다.

'Develop'은 'train'을 포함할 만큼 광범위합니다

Loevy & Loevy의 미디어 및 지적 재산권 변호사인 Matt Topic은 문구 변경이 권한의 본질을 바꾸지 않는다고 말했습니다:

출판사들은 여전히 우려해야 한다고 생각합니다. 새로운 약관의 수정된 버전은 여전히 메타가 스크랩한 콘텐츠를 사용하여 어떤 '비즈니스 제품'도 개발할 수 있도록 허용합니다. 그것은 정의된 용어로 보이지 않으며, 아마도 메타는 AI 비즈니스 제품을 개발하고 있을 것입니다. 'develop'은 'train'을 포함할 만큼 광범위하다고 생각합니다.

메타는 현재 비즈니스 제품의 예로 '광고, 메타 비즈니스 도구 및 메타 비즈니스 스위트'를 나열하고 있습니다.

robots.txt는 법적 권리가 아닌 선호도입니다

위스콘신 대학의 법학 교수인 Benjamin Sobel은 robots.txt가 웹사이트의 선호도를 나타내지만, 그러한 선호도에 대한 준수는 전적으로 자발적이라고 설명했습니다. 그는 이를 집주인이 '내 집을 보지 마세요'라는 표지판을 세우는 것에 비유했습니다. 표지판은 선호도를 표현하지만 집행 가능한 법적 권리를 만들지는 않습니다.

여전히 선호도를 표현할 수 있으며, 법적으로 집행 가능한 선호도가 아닌 한, 여전히 무시될 수 있습니다.

메타는 수정된 서비스 약관에 robots.txt 선호도를 존중하는 것에 대한 특정 언어를 포함하지 않았습니다.

'귀하의 제품 또는 서비스와 연관된'은 여전히 전체 사이트를 포함합니다

코넬 로스쿨의 디지털 및 정보 법학 교수인 James Grimmelmann은 허용된 사용에 대한 추가된 언어가 크롤링될 수 있는 범위를 제한하지 않는다고 말했습니다:

[업데이트]는 제 우려를 해결하지 못합니다. 허용된 사용에 대한 더 많은 언어를 추가하지만, '광고 및 비즈니스 제품을 개발'하는 언어는 여전히 트럭이 지나갈 수 있을 만큼 광범위합니다. 이것은 메타가 전체 사이트를 스크래핑할 수 있게 하는 '귀하의 제품 또는 서비스와 연관된' 언어를 제한하는 데 아무런 역할을 하지 않습니다.

메타가 robots.txt 및 수정안에 대해 말하는 것

토요일에 메타 대변인은 회사가 약관을 수정한 이유가 '초기 약관 통합에서 robots.txt 선호도가 존중된다는 점이 명확하지 않았기 때문'이라고 말했습니다. '뉴스 사이트는 다른 모든 콘텐츠 소유자와 마찬가지로 robots.txt 플래그를 통해 크롤러를 비활성화할 수 있습니다. 그동안 그래왔고, 변경되지 않았습니다.'

별도의 성명에서 대변인은 다음과 같이 말했습니다: '우리는 여러분의 의견을 들었고 명확히 하고자 합니다: 우리가 통합한 크롤링 약관은 광고 및 비즈니스 제품에만 적용되었으며, 우리는 약관 자체에서 이를 명확히 했습니다. 이것은 뉴스 사이트를 스크래핑하는 것에 관한 것이 아니며, 이러한 업데이트는 그러한 선호도를 무시하는 새로운 권리를 부여하지 않습니다.'

대변인은 또한 메타가 이해를 돕기 위해 '광고 창의적 생성 AI 약관'을 일반 상업 약관에 통합하고 있다고 말했습니다.

메타의 스크래핑 권한이 어떻게 확장되었는지

메타의 현재 약관은 이미 비즈니스 계정과 연관된 웹사이트의 스크래핑을 허용하지만, 매우 특정한 시나리오에서만 허용합니다. 해당 문구는 계정이 메타의 생성 AI 기능을 사용하여 광고를 실행할 때 적용되는 메타의 서비스 약관에 나타나며, 스크랩된 콘텐츠는 '광고를 최적화'하는 데만 사용될 수 있습니다.

이 문구를 더 일반적인 서비스 약관에 추가하고, 스크랩된 콘텐츠가 모든 '광고 및 비즈니스 제품'에 사용될 수 있도록 허용하는 것은 메타의 스크래핑 권한의 상당한 확장입니다. 수정된 약관에 따라 메타는 웹 스크래퍼, 봇, 스파이더, 크롤러 및 사용자 에이전트와 같은 자동화된 소프트웨어를 배포하고, 콘텐츠에 접근, 색인, 캐시, 분석, 수집, 검색 또는 크롤링하기 위해 '테스트 자격 증명'을 생성하며, 해당 도메인, 웹 페이지 및 URL에서 주기적으로 업데이트를 가져올 수 있습니다.

영향을 받는 대상 및 10월 30일 마감의 의미

거의 모든 뉴스 조직은 최소한 하나의 메타 비즈니스 계정을 보유하고 있으며, 이를 통해 기업은 Facebook 페이지, Threads 계정, Instagram 프로필 및 WhatsApp 채널을 한 곳에서 관리할 수 있습니다. 10월 30일 시행일 이전에 비즈니스 계정이 새로운 약관을 거부할 수 있는 토글 또는 양식은 없습니다. 권한 부여를 피할 수 있는 유일한 방법은 메타 플랫폼에서 상업적 존재를 완전히 제거하는 것입니다.

출판사 및 업계 단체의 반응

니만 연구소의 보도로 인해 최소한 세 개의 저널리즘 조직이 다가오는 약관에 대해 공개적으로 우려를 제기했습니다.

영국 미디어를 대표하는 무역 조직인 영국 뉴스 미디어 협회(UK News Media Association)는 10월 16일 금요일에 성명을 발표하고 정부 관리들의 개입을 촉구했습니다. 최고 경영자 Theo Bamber는 다음과 같이 말했습니다:

뉴스 출판사와 비즈니스 웹사이트에서 AI 제품을 훈련시키기 위해 무엇이든 스크래핑하려는 메타의 이 뻔뻔한 토지 쟁탈 시도는 가장 나쁜 종류의 오만한 기술 플랫폼 괴롭힘입니다. 우리는 장관과 규제 기관이 영국 창작자와 비즈니스 커뮤니티를 위해 나서서 이러한 터무니없는 행동을 지적하고 메타가 이 끔찍한 선례를 만드는 것을 막아야 합니다.

미국 최대 뉴스 출판 무역 협회인 뉴스/미디어 얼라이언스(News/Media Alliance)는 이 약관을 규탄했습니다. 회장 겸 CEO Danielle Coffey는 이 업데이트를 '터무니없고 아마도 불법'이라고 부르며 다음과 같이 말했습니다:

회사가 비즈니스가 메타가 웹사이트에서 콘텐츠를 스크래핑하는 것을 허용하지 않는 한 자사 잠재 고객에 대한 접근을 거부하기로 한 결정은 충격적이고 악의적인 정책이며, 회사의 시장 지배력에 대한 명백한 남용입니다. 10월 30일에 시행되는 것을 허용할 수 없습니다.

실무자들이 논의한 기술적 완화 조치

Hacker News의 댓글 작성자들은 사이트 운영자가 robots.txt를 보안 통제로 취급해서는 안 된다고 주장했습니다. 한 댓글 작성자는 다음과 같이 썼습니다: 'robots.txt에 절대 의존하지 마세요. 구성하되 의존하지 마세요. 봇은 봇이 할 수 있는 일을 할 것입니다.' 같은 댓글 작성자는 서버 수준에서 연결을 닫고, 이상적으로는 소켓을 조용히 닫고 웹 데몬의 첫 번째 TCP RST와 운영 체제의 두 번째 TCP RST를 억제할 것을 권장했습니다.

또 다른 댓글 작성자는 사용자 에이전트 차단이 더 이상 메타의 크롤러에 효과적이지 않다고 보고했습니다: 'UA로 차단하는 것은 이제 의미가 없습니다. meta-externalagent는 회전하고 일부는 메타가 아닌 ASN에서 옵니다. 우리는 ASN과 TLS JA4를 일치시켰고 실제로 효과가 있었습니다.'

별도의 댓글 작성자는 약관 변경이 실제로 아무것도 바꾸지 않는지 의문을 제기하며, 메타가 robots.txt가 있음에도 불구하고 이미 상당히 정기적으로 자신의 웹사이트를 스크래핑하고 있다고 언급하고, 변경의 목적이 더 강렬한 스크래핑을 정당화하기 위한 것인지 물었습니다.

주요 사실 요약

메타는 다가오는 비즈니스 계정 서비스 약관에서 'train'이라는 단어를 제거하고 허용된 스크래핑 사용을 '광고 및 비즈니스 제품'으로 제한했습니다.
수정된 약관은 여전히 비즈니스의 제품 또는 서비스와 '연관된' 도메인, 웹 페이지 및 URL의 광범위한 스크래핑을 허용하며, robots.txt 존중에 대한 구속력 있는 언어는 여전히 포함하지 않습니다.
메타는 robots.txt 선호도가 존중되며 업데이트가 그러한 선호도를 무시하는 권리를 부여하지 않는다고 말합니다.
법률 전문가 Matt Topic, James Grimmelmann, Benjamin Sobel은 모두 수정안이 자신들의 우려를 해결하지 못한다고 말했습니다.
새로운 약관은 10월 30일부터 시행되며, 그 전에 비즈니스 계정에 대한 거부 옵션이 없습니다.
유럽 출판사 협의회, 영국 뉴스 미디어 협회, 미국 뉴스/미디어 얼라이언스가 모두 공개적으로 반대했습니다.