jfrog/agent-belt

요약

jfrog/agent-belt는 Claude Code, Cursor, GitHub Copilot 등 다양한 AI 코딩 에이전트의 성능을 재현 가능한 방식으로 평가하기 위한 프레임워크입니다. 멀티 턴 시나리오를 통해 규칙 검사, 워크스페이스 차이 분석, 멀티 저지 LLM 합의 방식을 사용하여 에이전트의 동작을 검증합니다.

핵심 포인트

• Claude Code, Cursor, Copilot 등 다양한 코딩 에이전트를 대상으로 하는 멀티 턴 시나리오 평가 지원
• 규칙 검사, 워크스페이스 차이(diff), 멀티 저지 LLM 합의를 통한 다각도 검증 체계 제공
• pass^k 분산 측정을 통해 평가 결과의 신뢰성 확보
• Git 워크트리 및 Docker 샌드박스를 지원하여 격리된 환경에서의 테스트 가능