이번 주에 저는 Physics Intern에 대해 강연했습니다. 이는 Hugging Face에서 이론 물리학 (theoretical physics)의 어려운 문제들을 해결하기 위해 구축한 멀티 에이전트 스캐폴드 (multi-agent scaffold)입니다.

이 모델은 CritPt (현재 Artificial Analysis에서 가장 어려운 벤치마크 중 하나)에서 새로운 SOTA (State-of-the-Art)를 기록했으며, Codex / CC에 바로 연결하여 사용할 수 있는 일련의 기술 세트로 패키징되어 있습니다.

오늘날 물리학자들이 AI 도구를 어떻게 사용하고 있는지에 대해 제가 배운 몇 가지 사항은 다음과 같습니다:

• 거의 모든 사람이 자신의 연구에 LLM (Large Language Models)을 시도해 보았으며 (대부분 채팅 UI를 통해, 약 30%는 CC / Codex 사용), 그중 약 절반은 유용하다고 느꼈습니다.
• CLI (Command Line Interface) 도구를 사용하는 사람은 거의 없으며, 대신 데스크톱 앱을 사용하는 것을 선호합니다.
• 검증 (Verification)이 주요 병목 현상이며, 모델이 엄격하게 제약되지 않으면 내용을 지어내는 경향이 있기 때문에 우리는 "vibe physics" (직관에 의존하는 물리학)로부터 아직 매우 멀리 떨어져 있습니다.

슬라이드 링크: https://t.co/ZCLJMAuFBY