마지막 인간이 쓴 논문: 에이전트 네이티브 연구 아티팩트

요약

본 논문은 기존 과학 출판 방식이 연구 과정 중 발생하는 실패한 실험이나 분기적 탐색 과정을 '스토리텔링 세금'과 핵심 구현 세부 사항 누락을 초래하는 '엔지니어링 세금'이라는 구조적 비용을 부과한다고 지적합니다. 이에 대한 대안으로, 논문은 네 가지 층위로 구성된 기계 실행 가능한 연구 패키지 프로토콜인 에이전트 네이티브 연구 아티팩트(Ara)를 제안합니다. Ara는 과학적 논리 외에도 완전한 명세가 포함된 코드, 실패 기록을 보존하는 탐색 그래프, 그리고 모든 주장의 출처를 추적하는 증거를 포함하여 AI 에이전트의 이해와 재현에 최적화되어 있습니다.

핵심 포인트

• 기존 과학 논문은 '스토리텔링 세금'과 '엔지니어링 세금'이라는 구조적 비용으로 인해 연구 과정의 중요한 디테일(실패, 분기)을 누락시킨다.
• 에이전트 네이티브 연구 아티팩트(Ara)는 논문을 대체하는 4가지 층위로 구성된 기계 실행 가능한 패키지 프로토콜이다.
• Ara의 핵심 요소에는 완전한 명세가 포함된 코드, 실패를 보존하는 탐색 그래프, 그리고 출처 기반 증거 추적 기능이 포함된다.
• Ara는 기존 평가 벤치마크(PaperBench, RE-Bench)에서 질문 답변 정확도와 재현 성공률을 유의미하게 향상시키는 성능 개선을 입증했다.