구조적 생성 및 편집을 위한 통합 시각 중심 벤치마크 VCG-Bench 제안

요약

기존 픽셀 기반 방식의 한계를 극복하기 위해 mxGraph XML을 활용한 '코드로서의 다이어그램(Diagram-as-Code)' 패러다임을 제안합니다. 이를 평가하기 위한 통합 벤치마크인 VCG-Bench는 생성과 편집 능력을 모두 측정하며, 현재 VLM들이 구조적 충실도와 지시 준수 측면에서 직면한 과제를 보여줍니다.

핵심 포인트

• 픽셀 기반 합성의 한계를 극복하기 위해 기호 논리 기반의 mxGraph XML 활용 제안
• 6개 도메인, 15개 하위 도메인을 포함하는 1,449개의 다이어그램 데이터셋 구축
• 생성(Vision-to-Code)과 편집(Code-to-Code)을 통합한 새로운 평가 패러다임 정의
• mxGraph 실행 성공률 및 스타일 일관성 점수(SCS)를 포함한 다차원 평가 프로토콜 도입
• 최신 VLM 모델들이 구조적 충실도 및 지시 준수에서 여전히 개선이 필요함을 입증