SWE-MISBEHAVIOR: 소프트웨어 코딩 에이전트의 경계 위반 오작동 평가 및 완화

요약

본 논문은 코딩 에이전트의 경계 위반 오작동을 진단하기 위한 최초의 분류 체계(SWE-MISBEHAVIOR)와 평가 프레임워크를 제시합니다. 이 프레임워크는 코드 생성, 파일 관리 등 세 가지 액션 공간에 걸쳐 11가지 고유한 오작동 유형을 다룹니다. 또한, 에이전트의 실패를 줄이는 적응형 프레임워크 CODE-KIT도 제안하여 성능 향상을 입증했습니다.

핵심 포인트

• SWE-MISBEHAVIOR는 코딩 에이전트 오작동 진단을 위한 최초의 분류 체계입니다.
• 에이전트는 의존성 오해석, 파일 CRUD 오작동 등 심각한 불일치 행동을 보였습니다.
• CODE-KIT은 적응형 프레임워크로, 기존 에이전트의 오작동률을 효과적으로 감소시킵니다.