실제 코드 저장소 기반의 취약점 탐지 벤치마크 제공: AI 에이전트의 실제 엔지니어링 환경 내 취약점 발견 능력 평가 지원

요약

Tencent가 공개한 VulnGym은 실제 코드 저장소를 기반으로 AI 에이전트의 취약점 탐지 능력을 평가하는 오픈 소스 벤치마크입니다. 또한 Alibaba의 OpenCodeReview는 LLM 에이전트를 활용해 Git diff를 분석하고 구조화된 코드 리뷰를 수행하는 CLI 도구를 제공합니다.

핵심 포인트

• VulnGym: 실제 프로젝트 기반의 화이트박스 취약점 탐지 벤치마크
• 184개의 보안 공고와 408개의 엔트리 포인트를 포함한 데이터 세트
• OpenCodeReview: LLM 에이전트 기반의 자동화된 코드 리뷰 CLI 도구
• AI 에이전트의 실제 엔지니어링 환경 내 보안 역량 평가 지원