클라우드플레어 부서는 구글이 AI 학습 데이터를 위해 사이트를 “협박” 수단으로 사용한다고 주장합니다

클라우드플레어의 마테우스 프린스는 구글이 검색에서 지배적 위치를 이용해 인공지능 학습에 부당한 이점을 얻고 있다고 비난했습니다. 그는 회사가 방대한 데이터에 접근하고 있으며, 웹사이트 소유자들이 트래픽 손실 위협으로 콘텐츠 공유를 강요받는다고 강조했습니다.

프린스가 말한 내용

- 구글은 오픈AI보다 3.2배 더 많은 웹 데이터를 수집합니다;
- 마이크로소프트보다 4.8배,
- 다른 검색 업체들보다 6배 이상입니다.

그는 이러한 불균형이 AI 시장을 부당하게 만들며 영국 경쟁 당국(CMA)에게 현재 조사 중인 상황을 검토할 것을 촉구했습니다.

왜 중요한가

웹 크롤러는 사이트를 색인화하는 자동 봇입니다.

- 마이크로소프트, 오픈AI 및 다른 기업들은 AI 학습용과 검색 결과용으로 별도의 크롤러를 사용합니다.
- 구글은 하나의 공통 크롤러(Googlebot)를 검색과 AI 데이터 수집 모두에 사용합니다.

출판사가 콘텐츠 보호를 위해 Googlebot을 차단하면, 동시에 구글 검색 결과에서 사라지고 상당한 트래픽 손실을 겪게 됩니다. 프린스는 구글이 이러한 독점을 이용하는 한 공정한 AI 시장은 불가능하다고 봅니다.

추가 조치

구글은 이미 "AI Overview"를 도입했습니다—검색 결과 상단에 AI 답변 블록을 표시해 사이트 내용을 요약하고 사용자가 원본 리소스로 이동할 필요성을 줄입니다.

이에 대응해 마이크로소프트는 라이선스 프로그램을 시작했으며, 콘텐츠 제작자는 AI 학습에 그들의 자료가 사용될 때 직접 보상을 받게 됩니다.

결론

클라우드플레어는 구글이 검색 지배력을 통해 비례하지 않은 이점을 얻고 있어 인공지능 시장의 공정성과 투명성을 위협한다고 주장합니다. 회사는 규제 기관이 개입해 모든 참여자에게 보다 평등한 조건을 제공할 것을 요청하고 있습니다