홍콩 사우스차이나모닝포스트(SCMP) 보도
[파이낸셜뉴스] 중국 포털사이트 바이두가 미국 검색 업체 구글이 자사 콘텐츠를 수집하는 것을 차단한 것으로 알려졌다.
홍콩 사우스차이나모닝포스트(SCMP)는 24일 바이두 온라인 백과사전 '바이두 바이커'의 'robots.txt' 최신 버전을 확인한 결과 구글과 마이크로소프트 빙(Bing)의 웹 크롤러(웹사이트를 돌아다니며 콘텐츠를 색인화해 검색 결과에 나타나도록 하는 자동화 프로그램)가 차단됐다고 보도했다. robots.txt는 웹 크롤러에 사이트 및 웹페이지를 수집할 수 있도록 허용하거나 제한하는 규약이다.
인터넷 아카이브 서비스인 웨이백 머신 따르면 차단 시기는 지난 8일로 보이며, 이는 인공지능(AI) 모델 훈련을 위한 방대한 데이터에 대한 수요가 급증하는 가운데 온라인 자산을 보호하려는 바이두의 노력을 보여준다고 SCMP는 분석했다.
앞서 미국 온라인 커뮤니티 기업 레딧은 지난달 구글을 제외한 다른 검색 엔진이 자사 사이트 게시물을 색인화하는 것을 차단한 바 있다. 구글은 자사 AI 모델을 훈련하기 위해 레딧과 수백만 달러 규모 계약을 체결했다.
camila@fnnews.com 강규민 기자
※ 저작권자 ⓒ 파이낸셜뉴스, 무단전재-재배포 금지