People Inc. CEO, Google이 웹 크롤링을 통해 시장 지배력을 남용하고 있다고 비난

프랑스 칸 — People Inc.의 CEO Neil Vogel은 Google이 검색과 AI 모두에 동일한 크롤러 (crawler)를 사용함으로써 시장 지배력을 남용하고 있다고 비난했습니다.

중요한 이유: 일부 퍼블리셔 (publishers)들은 AI 모델에 콘텐츠가 휩쓸리는 것을 방지하기 위해 크롤러 (crawlers)를 차단하기를 원하지만, 검색 트래픽은 광고 및 제휴 수익을 위한 핵심 지표로 남아 있습니다.

---

그의 발언: "우리는 실제로 Google을 차단할 수 없습니다. Google이 검색에 사용하는 것과 동일한 크롤러 (crawler)를 AI에도 사용하기 때문인데, 이는 엄청난 시장 지배력 남용입니다."라고 Vogel은 말했습니다.

• "우리는 그들과 생산적인 일을 하고 싶지만, 아마도 그들과는 생산성보다는 더 많은 대립을 향해 가고 있는 것 같습니다."라고 그는 덧붙였습니다.

상대측 입장: Google은 퍼블리셔 (publishers)들이 Google-Extended를 통해 검색에 영향을 주지 않으면서 Gemini 모델 학습에 자신의 콘텐츠가 사용되는 것을 방지할 수 있다고 밝혔습니다.

• 또한 Google은 퍼블리셔 (publishers)들이 Google의 AI 검색 기능에 나타나거나 해당 기능의 근거 (ground)를 마련하는 데 도움을 주는 것을 거부 (opt out)할 수 있는 새로운 기능을 테스트하고 있습니다.

빠른 요약: 당시 Dotdash Meredith였던 People Inc.는 AI 크롤러 (crawlers)를 위해 권한 기반 모델로 전환하면서 기본적으로 콘텐츠 스크래핑 (scraping)을 차단하기 위해 Cloudflare와 파트너십을 맺은 퍼블리셔 (publishers) 중 하나였습니다.

• "그 전에는 모두가 '오, 괜찮아. 우린 당신들이 필요 없으니 차단할 필요 없어'라고 말했습니다. 그러다 차단하는 순간 전화가 울리기 시작하죠."라고 그는 말했습니다.
• "모두가 전화를 합니다. 알고 보니 모두가 우리를 필요로 하기 때문입니다. 우리는 대규모로 매우 훌륭한 콘텐츠를 만들어내며, 우리가 얼마나 많이 크롤링 (crawled)되는지도 알고 있습니다. 희소성이 핵심입니다."

전체적인 그림: 미국 최대의 퍼블리셔 (publishers) 중 하나로서, People은 Meta, OpenAI, Microsoft와 AI 라이선스 계약을 맺고 있습니다. 그러나 Vogel은 본질적으로 두 가지 유형의 AI 퍼블리셔 (publisher) 계약이 존재한다고 언급했습니다.

• "OpenAI 및 Meta와 맺고 있는 것과 같은 '무제한 이용 계약 (all-you-can-eat deal)'이 있습니다. 그들이 우리에게 비용을 지불하면, 우리 콘텐츠를 원하는 만큼 사용할 수 있는 방식입니다,"라고 그는 말했습니다.
• "그리고 Microsoft와 맺고 있는 좋은 계약이 있는데, 이는 조금 더 '단품 주문 방식 (à la carte)'인 '종량제 (pay as you go)'에 가깝습니다."

주목할 점: AI-퍼블리셔 (AI-publisher) 계약의 미래에 대한 질문에 대해, Vogel은 계약이 갱신될 가능성이 높다고 생각한다고 말했습니다.

• "AI에는 세 가지가 필요합니다. 모델 (model), 전력 (power), 그리고 입력 데이터 (inputs)입니다. 우리는 입력 데이터이며, 우리는 누구보다 더 많은 입력 데이터를 만들어냅니다. 그리고 사람들이 검색하는 바로 그 내용이 우리가 만드는 것입니다,"라고 그는 말했습니다.

편집자 주: 이 기사는 Google의 코멘트를 포함하여 업데이트되었습니다.