
1년 동안 ChatGPT가 학생들의 학습을 돕는다는 세계에서 가장 강력한 증거였던 한 연구
요약
ChatGPT가 학습에 긍정적 영향을 미친다는 결론을 담았던 유명 논문이 데이터 결함으로 인해 철회되었습니다. 이 논문은 높은 인용수를 기록하며 교육 정책에 영향을 미쳤으나, 분석 과정의 오류가 밝혀지며 학술적 신뢰성을 잃었습니다.
핵심 포인트
- ChatGPT의 학습 효과를 입증했던 주요 논문이 데이터 불일치로 철회됨
- 이미 500회 이상의 인용이 발생하여 잘못된 정보가 학계에 확산됨
- 피어 리뷰 과정에서 결함을 걸러내지 못한 학술지의 책임 문제 제기
- 잘못된 연구 결과가 교육 정책 및 에듀테크 산업에 미치는 위험성 경고
1년 동안, 한 연구가 ChatGPT가 학생들의 학습을 돕는다는 세계에서 가장 강력한 증거였습니다.
거의 500,000회의 접속. 500회 이상의 인용. 1,000 이상의 Altmetric 점수. 대학들은 이를 근atic으로 교실에 AI를 도입하는 것을 정당화했습니다. 정책 입안자들은 생성형 AI (Generative AI)가 교육에 적합한지 질문을 받았을 때 이 연구를 지목했습니다.
2026년 4월 22일, 해당 학술지는 이 논문을 철회했습니다. 증거는 결함이 있었고, 결론은 유효하지 않았습니다.
논문의 제목은 "The effect of ChatGPT on students' learning performance, learning perception, and higher-order thinking(ChatGPT가 학생들의 학습 성과, 학습 인지 및 고차원적 사고에 미치는 영향)"이었습니다. Nature Portfolio의 학술지인 Humanities and Social Sciences Communications에 2025년 5월에 발표되었습니다. 저자인 Hangzhou Normal University의 Jin Wang과 Wenxiang Fan은 51개의 연구를 종합하여 ChatGPT가 "학습 성과를 향상시키는 데 큰 긍정적 영향"을 미치며, "학습 인지를 강화하고 고차원적 사고를 촉진하는 데 중간 정도의 긍정적 영향"을 미친다고 결론지었습니다.
그들의 권고는 직접적이었습니다. ChatGPT는 "학생 학습을 강화하기 위해 다양한 학습 모드에 적극적으로 통합되어야 한다"는 것이었습니다.
학교들은 이에 귀를 기울였습니다. 에듀테크 (Edtech) 기업들은 이를 인용했습니다. 이 논문은 학술 논문 중 온라인 관심도에서 상위 1% (99th percentile)에 기록되었습니다.
그 후 UiT Norges arktiske universitet의 두 연구자, Magnus Ingebrigtsen과 Marko Lukic가 메타 분석 (Meta-analysis)을 한 줄씩 검토했습니다. 그들은 논문이 제출된 당일에 이미 논문을 끝냈어야 했을 세부 사항을 발견했습니다.
분석에서 가장 높은 가중치를 부여받은 연구가 Wang과 Fan이 논문을 발표하기 전에 이미 철회된 상태였습니다.
Nature는 그럼에도 불구하고 이를 피어 리뷰 (Peer review)를 통해 통과시켰습니다.
노르웨이 연구진은 2026년 4월 Springer Nature의 연구 윤리 그룹(research integrity group)에 문제를 제기했습니다. 해당 논문은 5일 후 철회되었습니다. 철회 공지문은 다음과 같습니다: "편집자는 메타 분석 (meta-analysis)의 불일치에 관한 우려로 인해 이 논문을 철회하기로 결정했습니다. 이러한 문제는 궁극적으로 편집자가 분석의 타당성과 그 결과로 도출된 결론에 부여할 수 있는 신뢰를 저해합니다. 저자들은 이번 철회와 관련된 서신에 응답하지 않았습니다."
문제를 공개적으로 처음 제기한 연구자 중 한 명인 에든버러 대학교의 Ben Williamson은 이를 솔직하게 표현했습니다. "이 논문은 애초에 출판되지 말았어야 할 논문처럼 보였습니다."
여기 여러분이 유념해야 할 부분이 있습니다.
철회는 조용히 이루어졌습니다. 하지만 논문은 바이럴 (viral)이 되었습니다. Williamson은 핵심적인 발견 내용이 수정된 이후에도 한참 동안 방법론적 주의 사항(methodological caveats)이 제거된 채 소셜 미디어에서 계속 유포될 가능성이 높다고 말했습니다.
이미 500편 이상의 논문이 이 연구를 인용하고 있습니다. 그러한 인용은 이제 다른 연구, 다른 결론, 그리고 다른 정책 권고 사항들에 내재되어 있습니다. 철회는 과거로 거슬러 올라가 영향을 미치지 못합니다. 결함이 있는 발견은 이미 문헌 속에 자리 잡았으며, 해당 논문이 철회되었다는 사실을 모르는 논문들에 의해 인용되고 있습니다.
한편, AI가 비판적 사고를 감소시키고, 인지적 의존성 (cognitive dependency)을 생성하며, AI를 제거했을 때 기술을 저하시킨다는 연구들은 철회되지 않았습니다. 이 연구들은 MIT, Stanford, Zurich, 그리고 The Lancet을 통해 계속해서 재현되고 있습니다.
ChatGPT가 학생들의 학습을 돕는다는 가장 강력한 증거는 철회되었습니다. 그것이 학생들에게 해를 끼친다는 증거는 여전히 유효합니다.
[IMG:1]
AI 자동 생성 콘텐츠
본 콘텐츠는 X @heynavtoor (자동 발견)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기