AtomicCommitBench: 코딩 에이전트가 스쿼시된 패치(Squashed Patches)로부터 커밋 히스토리를 재구성할 수 있는가?
요약
코딩 에이전트가 생성한 스쿼시된 패치로부터 논리적인 커밋 히스토리를 재구성하는 연구와 이를 평가하기 위한 AtomicCommitBench를 소개합니다. 실제 프로젝트 데이터를 기반으로 에이전트의 커밋 그룹화 능력을 분석하고 성능 지표를 제안합니다.
핵심 포인트
- 스쿼시된 패치에서 재생 가능한 커밋 시퀀스를 재구성하는 과업 정의
- 800개의 실제 커밋 에피소드를 포함한 AtomicCommitBench 구축
- PPAR, ARI, TCR 등 커밋 재구성을 위한 다각적 평가 지표 도입
- GPT-5.4 및 GLM-5 기반 설정이 우수한 성능을 보임
- 의존성 인식(DACE)이 그룹화 오류를 줄이는 데 효과적임
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv Codex (cs.SE)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기