적응형 3D 장면 재구성(3D Scene Reconstruction)을 위한 특징 최적화 비전

3차원 장면 재구성(Three-dimensional scene reconstruction)은 시각적으로 판별력이 있고 기하학적으로 유용한 국소 이미지 증거(local image evidence)에 의존합니다. 고정된 특징 임계값(feature thresholds)과 균일한 특징 예산(feature budgets)은 배포하기는 쉽지만, 반복되는 질감(texture), 저시차(low-parallax) 영역, 또는 불안정한 지점(unstable points)에 계산 자원을 낭비할 수 있습니다. 본 논문은 3D 재구성을 위한 적응형 특징 최적화 비전 프런트엔드(adaptive feature-optimized vision front end)를 제안합니다. 이 방법은 질감(texture), 재현성(repeatability), 판별력(distinctiveness), 예상 삼각측량 각도(expected triangulation angle), 그리고 공간적 범위(spatial coverage)를 기준으로 후보 특징들의 점수를 매긴 다음, 고정된 재구성 파이프라인(reconstruction pipeline) 하에서 유용한 트랙(tracks)을 최대화하도록 뷰(view)별 특징 예산을 할당합니다. 소규모 합성 다중 뷰 프로토타입을 통해 복도(corridor), 파사드(facade), 물체 테이블(object-table), 그리고 복잡한 장면(cluttered scenes)에 걸쳐 네 가지 선택 정책을 평가합니다. 무작위(random), 질감 전용(texture-only), 그리고 균일 그리드(uniform-grid) 베이스라인과 비교했을 때, 적응형 정책은 넓은 이미지 범위를 유지하면서도 가장 우수한 품질 인식 완결성(quality-aware completeness)과 가장 낮은 총 재구성 RMSE(aggregate reconstruction RMSE)를 달성했습니다. 이 결과는 현대적인 학습 기반 매칭(learned matching)이나 신경 재구성(neural reconstruction) 시스템을 대체하는 것이 아닙니다. 이는 고전적 및 학습 기반 3D 파이프라인이 어떤 시각적 증거에 계산 자원을 투입할지 더 신중하게 결정할 수 있도록 돕는 모듈형 프런트엔드 정책입니다.