"내 글 AI 학습에 쓰지 마"…구글·오픈AI, 일괄 차단 허용

AI 학습용 자료 수집 거부 표준 도입
검색 노출 유지하면서 학습차단 가능

앞으로 웹사이트 운영자가 자신의 콘텐츠를 인공지능(AI) 학습에 활용하지 못하도록 한 번에 차단할 수 있게 된다. 구글과 오픈AI 등 주요 AI 기업들이 학습용 자료 수집을 일괄 거부할 수 있는 공통 표준을 도입하기로 했다.

오픈AI와 구글, 마이크로소프트(MS)는 웹사이트 운영자가 AI 학습 목적의 자료 수집을 일괄 제어할 수 있는 공통 표준을 지원한다고 1일 밝혔다.

기존에는 웹사이트 운영자가 'robots.txt' 파일에 각 AI 기업의 크롤링 봇(웹사이트 정보를 자동으로 수집하는 프로그램)을 개별적으로 차단해야 했다. 새로운 봇이 등장할 때마다 차단 목록을 추가해야 하는 번거로움도 있었다.

앞으로는 AI 학습용 자료 수집을 거부한다는 설정 한 번으로 주요 AI 기업의 크롤링 봇을 차단할 수 있다. 검색엔진 노출은 유지하면서 AI 학습 목적의 자료 수집만 제한하는 것도 가능해진다.

MS는 공식 블로그에서 "웹사이트 운영자는 검색엔진에 콘텐츠를 노출하는 것과 생성형 AI가 저작물을 활용하는 방식을 결정하는 것 사이에서 선택을 강요받아서는 안 된다"고 밝혔다. 오픈AI도 이번 조치를 "개방형 웹을 향한 실용적인 발걸음"이라고 평가했다.

이번 표준은 국제인터넷표준화기구(IETF)의 논의를 바탕으로 마련됐다. 앤스로픽은 이미 적용하고 있으며 구글과 MS는 내년부터, 오픈AI는 향후 수개월 안에 도입할 예정이다. 메타는 취지에 공감한다는 입장을 밝혔지만 참여 여부는 확정하지 않았다.

이번 조치는 언론사와 출판계 등이 AI 기업의 무단 콘텐츠 수집에 반발하며 잇따라 소송을 제기하는 가운데 나왔다.

이지예 기자 easy@asiae.co.kr