코딩 에이전트를 위한 버전 관리 벤치마크

요약

GitButler 팀이 운영하는 vc-bench를 통해 Claude Code와 Codex가 버전 관리 작업을 수행할 때 Git, Jujutsu, GitButler의 성능을 비교했습니다. 이 실험은 최종 Git 이력과 작업 트리가 요구사항에 맞는지로 성공 여부를 판정하며, GitButler는 표준 Git 대비 작업 시간을 약 65% 단축하고 명령 수를 78% 줄이는 결과를 보였습니다.

핵심 포인트

• 성공 여부는 명령어 순서가 아닌 최종 이력과 트리가 핵심입니다.
• GitButler는 기본 Git보다 작업 시간이 현저히 짧고, 사용된 명령 수도 적었습니다.
• 측정은 준비된 환경에서의 버전 관리 작업에 한정됩니다.
• 결과는 도구별 에이전트의 단계와 시간에 차이가 있음을 보여줍니다.