Anthropic Fellows Program 소속 연구진이 10월 20일 Agent4Sci 논문을 공개했습니다. AI 코딩 에이전트가 과학용

요약

Anthropic 연구진은 Agent4Sci 논문을 통해 AI 코딩 에이전트의 과학용 머신러닝 능력을 평가했습니다. 이 에이전트는 천문학 등 20개 분야 벤치마크에서 기존 최고 기록을 경신하는 성과를 보였습니다. 다만, 저자들은 이러한 성공이 순수한 연구 통찰보다는 공학적 요령에 기인할 수 있다고 분석하며 한계점을 제시했습니다.

핵심 포인트

• AI 에이전트가 과학 분야 ML 벤치마크에서 높은 성능을 입증함.
• Claude Opus 등 최신 모델들이 최고 기록을 경신했으나, 공학적 요령의 영향일 수 있음.
• 연구 아이디어 구상 및 실험 관리를 위한 플러그인 스킬 추가 시 성능 향상이 기대됨.
• 논문은 NeurIPS 2026 평가 데이터셋 트랙 논문이며, 관련 코드가 공개되었음.