3D-DefectBench: 미세 결함 3D 생성에 대한 비전-언어 모델 평가 파이프라인의 통제된 요인 연구

요약

본 논문은 생성형 3D 시스템의 자동 평가를 위한 새로운 벤치마크이자 프레임워크인 3D-DefectBench를 소개합니다. 이 벤치마크는 VLM 기반의 3D 결함 탐지 파이프라인을 체계적으로 분석하며, 기하학, 질감, 프롬프트 준수 등 아홉 가지 미세한 결함을 제공합니다. 연구 결과, 모델 선택 외에도 카메라 프로토콜이나 레이블 구성 같은 전체 파이프라인 요인이 성능에 큰 영향을 미침을 보여줍니다.

핵심 포인트

• 3D-DefectBench는 3D 생성 시스템 평가를 위한 체계적인 프레임워크입니다.
• VLM 기반 결함 탐지 시, 모델 자체보다 전체 파이프라인 구성 요소가 중요합니다.
• 6뷰 RGB 프로토콜이 비용 효율적이면서도 강력한 기본 성능을 제공했습니다.
• 자동화된 심판은 인간 레이블러에 미치지 못하며, 파이프라인 전반의 보정이 필요합니다.