TurboGS: 오차 유도형 희소 픽셀 샘플링 및 최적화를 통한 3D Gaussian Splatting 가속화

소비자 수준의 애플리케이션은 고충실도(high-fidelity)의 새로운 시점 렌더링(novel view rendering)과 함께 3D Gaussian Splatting (3DGS)의 빠른 최적화를 요구합니다. 그러나 기존의 3DGS 가속 접근 방식은 미세한 디테일을 희생하면서 중복된 픽셀에 대해 여전히 상당한 계산량을 발생시킵니다. 본 논문에서는 지각적으로 정보가 풍부한 픽셀에 최적화를 집중함으로써 3DGS를 가속화하는 오차 유도형(error-guided) 학습 프레임워크인 TurboGS를 제안합니다. TurboGS는 네 가지 핵심 구성 요소로 구축되었습니다: (1) 타일 단위 희소 픽셀 샘플링(tile-wise sparse pixel sampling)은 학습 중 다중 시점 재구성 오차(multi-view reconstruction errors)에 의해 구동되며, 어려운 영역을 우선시하고 잘 재구성된 영역은 건너뛰어 중복된 그래디언트(gradient) 계산을 방지합니다; (2) 희소 정규화된 상호 상관(sparse Normalized Cross-Correlation)을 포함한 타일 단위 구조 인식 손실(tile-wise structure-aware loss)은 미세한 디테일을 보존하고 학습을 안정화하기 위해 희소하지만 효과적인 감독(supervision)을 제공합니다; (3) 오차 유도형 가우시안 밀도 제어(error-driven Gaussian density control) 전략은 모델 용량을 동적으로 할당하고 중복된 프리미티브(primitives)를 제거합니다; (4) 맞춤형 하이브리드 옵티마이저(tailored hybrid optimizer)는 희소한 감독 하에서 수렴을 안정화하고 개선하기 위해 Hessian 정보 기반 업데이트를 Adam 모멘트 댐핑(Adam moment damping)과 결합합니다. 표준 벤치마크에 대한 실험을 통해 TurboGS가 단일 RTX 5090 GPU 카드에서 100초 이내에 기존 3DGS 대비 최대 10배 빠른 학습 속도로 대등하거나 더 우수한 렌더링 품질을 제공할 수 있음을 입증했습니다.