Cloudflare의 'Disallow AI Training' 설정: 혼합 용도 크롤러 차단율 36.6%, 검색 차단율 1% 미만, 학습

본 기사는 필자가 운영하는 AI Quotidia의 해외 뉴스 해설 기사입니다.

미국 Cloudflare가 웹사이트를 검색 결과에 남겨두면서도 AI 학습에는 사용되는 것을 차단할 수 있는 설정인 'Disallow AI Training'을 발표했습니다.

• 무료를 포함한 모든 플랜 및 모든 고객에게 제공합니다.
• 검색 색인 생성과 AI 학습을 같은 봇으로 수행하는 혼합 용도 크롤러는 Cloudflare상의 인증된 크롤러 통신 중 36.6% (회사 발표)입니다. 따라서 한쪽을 차단하면 양쪽을 모두 차단해야 하는 이분법적 선택이 있었습니다.
• 회사 블로그에 따르면, 검색 봇을 차단하는 사이트는 1% 미만, AI 학습을 어떤 방식으로든 제한하는 사이트는 17% (모두 Cloudflare 경유 사이트의 통계)입니다.

전체 버전에서는 '일본 독자에게 의미하는 바'에 대한 해설과 FAQ, Quotidia의 관점(전문)을 게재하고 있습니다. 더 읽기.