차분 테스트 시간 스케일링 (Differential Test Time Scaling)을 통한 코드 생성

요약

DiffCodeGen은 기존의 테스트 시간 스케일링 방식이 가진 높은 토큰 비용과 공개 테스트 케이스 의존성 문제를 해결하기 위해 제안된 새로운 코드 생성 방법론입니다. 커버리지 가이드 퍼징을 통해 입력값을 합성하고 코드 후보들의 동적 동작 유사성을 기반으로 클러스터링하여 최적의 코드를 선택합니다. 추가적인 LLM 추론 없이도 비동기식으로 작동하여 효율성과 확장성이 매우 높으며, 다양한 LLM에서 성능 향상을 입증했습니다.

핵심 포인트

• 커버리지 가이드 차분 분석을 통해 별도의 테스트 케이스나 LLM 없이도 입력값 합성 가능
• 코드 후보들의 동적 동작 유사성을 기반으로 클러스터링하여 메도이드를 최종 결과로 선택
• 추가적인 LLM 호출이 없어 토큰 소비와 시간 오버헤드를 획기적으로 절감
• 비동기식 작동 방식으로 에이전틱 코딩(Agentic coding) 환경에 최적화 및 높은 확장성 제공
• 모델 불가지론적(Model-agnostic) 특성을 가져 다양한 LLM 및 추론 모델과 결합 가능