LLM 기반 단위 테스트 생성을 위한 지식 주도 합성 버그 피드백

요약

본 논문은 LLM 기반 단위 테스트 생성의 한계를 극복하기 위해, 실제 버그 메커니즘을 활용하여 실행 가능한 피드백 목표를 설정하는 방법을 제안합니다. 이 프레임워크는 실제 버그 기록을 구조화하고, 초점 메서드에 적용할 수 있는 메커니즘을 검색하여 합성 버그로 구현합니다. 실험 결과, 이 방법이 기존의 다양한 기준선 대비 실제 버그 탐지 성능을 향상시켰습니다.

핵심 포인트

• LLM 테스트 생성은 결함 발견 보장이 어려움.
• 실제 버그 메커니즘을 피드백 목표로 활용하는 프레임워크 제안.
• 합성 버그는 테스트를 유효한 입력 및 행동 오라클 쪽으로 안내함.
• 기존 기준선 대비 실제 버그 탐지 성능 향상 입증.