- FrontierPhysics는 현직 물리학자들의 실제 연구를 바탕으로 AI 에이전트의 문헌 조사, 실험, 논문 작성 전 과정을 평가하는

요약

FrontierPhysics는 현직 물리학자들의 실제 연구를 바탕으로 AI 에이전트의 문헌 조사, 실험, 논문 작성 전 과정을 평가하는 최초의 종단간 물리 연구 벤치마크입니다. 최신 모델들을 평가한 결과 최고 합격률은 27.4%에 그쳐, LLM들이 자율적인 과학 연구 수행에는 여전히 큰 한계가 있음을 보여주었습니다. 전문가들은 AI의 주요 약점을 물리학 지식 부족보다 '엄밀한 논리적 추론 부재'와 '물리적 직관 결여'에서 찾았습니다.

핵심 포인트

• FrontierPhysics는 물리 연구 전 과정을 평가하는 최초의 벤치마크입니다.
• 최상위 LLM들의 최고 합격률은 27.4%에 불과했습니다 (Claude Opus 5.5).
• AI의 주된 약점은 지식 부족이 아닌 논리적 추론 부재(48%)입니다.
• 숙련 연구자의 물리적 직관 결여(34%) 역시 중요한 한계로 확인되었습니다.