AI 작문의 한계점

데이터: Graphite.io ; 참고: Common Crawl에서 URL을 샘플링한 세 가지 AI 탐지 도구의 평균을 기반으로 함; 차트: Megan Morrone/Axios

ChatGPT에 의해 촉발된 AI 생성 글의 홍수는 정체된 것으로 보이며, 이는 AI 콘텐츠가 결국 웹을 장악하지 못했다는 신호입니다.

전체적인 상황: 디지털 마케팅 에이전시인 Graphite의 새로운 분석에 따르면, 주로 AI에 의해 생성된 온라인 뉴스 기사, 블로그 게시물 및 리스트클(listicles)의 비중은 1년 이상 50% 근처를 유지하고 있습니다. 이러한 정체는 AI가 인간의 온라인 글쓰기를 장악할 것이라는 우려가 아직 실현되지 않았음을 나타냅니다.

중요한 이유: AI가 작성한 기사의 확산을 연구해 온 연구자들은 일단 모델이 해당 콘텐츠를 학습하기 시작하면, 인터넷이 저품질의 기계 생성 콘텐츠가 반복되는 거대한 피드백 루프(feedback loop)가 될 수 있다고 경고합니다. UC Berkeley의 교수이자 AI 모델 CTO인 Dan Klein은 Axios에 "이 모델들은 이러한 모델 없이 생성된, 우리가 웹에 올린 모든 정보 덕분에 똑똑해진 것입니다"라고 말하며, "만약 우리가 이러한 모델과 독립적인 지식을 생성하는 것을 멈춘다면, 무엇이 그 모델들을 가동하게 될까요?"라고 설명했습니다.

수치로 보는 현황: Graphite에 따르면, AI 생성 기사는 2022년 11월 ChatGPT 출시 이후 급증했으나 성장은 멈췄습니다. ChatGPT 출시 후 1년 이내에 주로 AI가 생성한 기사는 새로운 온라인 기사의 35.9%를 차지했습니다. 2년 이내에는 48%에 도달했습니다. 하지만 2025년 초 이후, 그 비중은 새로운 기사의 약 절반 수준에서 머물고 있습니다.

방법론: Graphite는 AI 연구 및 학습 데이터셋에 자주 사용되는 대규모 공개 웹 아카이브인 Common Crawl에서 55,400개의 영어 URL을 무작위로 샘플링했습니다. 해당 페이지들은 최소 100단어 이상이어야 하며, 발행일이 2020년 1월에서 2026년 3월 사이여야 하고, 기사 또는 리스트클로 분류되어야 했습니다. 그런 다음 Graphite는 각 기사를 AI 확인 도구인 Pangram, GPTZero 및 Copyleaks를 통해 검사했습니다.

현실 점검: AI 생성 글을 집계하는 것은 여전히 까다로운 작업입니다. 많은 기사가 더 이상 순수하게 인간이나 AI에 의해서만 작성되지 않기 때문입니다.

인간은 개요 작성(outlining), 초안 작성(drafting), 재작성(rewriting) 또는 편집(editing)을 위해 AI를 사용할 수 있으며, 이는 "AI"와 "인간" 사이의 경계를 차트가 시사하는 것보다 더 모호하게 만듭니다. Graphite는 기사 텍스트의 대부분이 AI가 작성했거나 AI의 도움을 받은 것으로 감지될 때만 해당 기사를 주로 AI가 생성한 것으로 분류합니다. 행간의 의미를 살펴보면, Graphite의 분석은 다음과 같이 말합니다: "AI 콘텐츠의 품질은 빠르게 향상되고 있습니다. 많은 경우, AI가 생성한 콘텐츠는 인간이 작성한 콘텐츠만큼 좋거나 오히려 더 낫습니다. 사람들이 콘텐츠가 AI에 의해 생성되었는지 여부를 구별하는 것은 종종 어렵습니다." 결론은 다음과 같습니다: AI는 이제 인간만큼 많은 기사를 작성하고 있지만, 현재로서는 기계 생성 글쓰기에 한계가 있는 것으로 보입니다.