Insights
AI가 자동으로 큐레이션·번역·정리하는 기술 동향 피드입니다.
자율주행 VLM의 검증을 위해 누락된 테스트 영역을 식별하는 SliceScorer와 SliceNav를 제안합니다. SliceScorer는 노출 기반 및 이웃 실패 사전 확률을 결합하여 위험한 테스트 슬라이스를 추천하며, SliceNav는 LLM을 통해 검증 워크플로우를 자동화합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv Codex (cs.SE)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기자율주행 시각-언어 모델 (Vision-Language Models, VLMs)은 운행 설계 영역 (Operational Design Domains, ODDs)에 의해 정의된 다양한 조건 전반의 장면을 정확하게 이해해야 하지만, 검증은 여전히 부족한 상태입니다. 많은 슬라이스 (slices)가 누락되어 있어 경험적인 실패율을 신뢰하기 어렵습니다. 우리는 (i) 희귀하고 테스트가 부족한 영역을 우선시하기 위한 노출 기반 커버리지 사전 확률 (exposure-based coverage prior)과, (ii) 유사한 테스트 조건으로부터 위험을 전파하는 이웃 실패 사전 확률 (neighbor-failure prior)을 결합하여 누락된 슬라이스 추천을 위한 결정론적 점수 산정 규칙인 SliceScorer를 제안합니다. SliceScorer는 의도적으로 단순하게 설계되었습니다. 즉, 해석 가능하고, 감사 가능하며, 보수적입니다. 이러한 특성은 안전 필수 (safety-critical) 검증에 필수적입니다. 선언된 ODD를 넘어서는 스트레스 테스트를 위해, 우리는 SliceScorer를 SliceNav 내에 내장했습니다. SliceNav는 LLM (Large Language Model)이 조율하는 검증 파이프라인으로, 모델이 개발자의 질의를 해석하여 관련 연산자 (분류, 점수 산정, 획득, 평가) 및 어휘 확장을 선택하며, 모든 점수 산정을 결정론적이고 감사 가능하게 유지하면서 검증 워크플로우를 구성합니다. 세 가지 자율주행 VLM (WiseAD, DriveMM, Cosmos-Reason2-2B)에 대한 실험 결과, SliceNav는 조건 공간 전반에 걸쳐 다양한 추천을 유지하면서도 기존의 슬라이스 발견 방법보다 고위험 커버리지 격차를 더 효과적으로 드러냄을 보여줍니다. 절제 연구 (Ablations)를 통해 두 점수 산정 구성 요소가 모두 기여함을 확인하였으며, 정성적 분석을 통해 개발자 질의부터 타겟팅된 평가에 이르는 엔드 투 엔드 (end-to-end) 워크플로우를 입증했습니다.