DR-GS: 물리 기반의 변형 가능하고 재조명 가능한 2D Gaussians
요약
DR-GS는 물리 기반 역렌더링을 통해 기하학, 조명, 재질을 분리하는 통합 Gaussian 프레임워크입니다. 기존 Gaussian Splatting의 한계인 조명 고착 문제와 재질 편집 제한을 해결하여 동적 변형과 재조명이 가능한 고품질 3D 에셋 생성을 지원합니다.
핵심 포인트
- 기하학, 조명, 재질 표현의 명시적 분리 구현
- 동적 변형 및 재조명 시 물리적 일관성 유지
- 광택 표면의 반사 및 정반사 하이라이트 보존
- 재구성 이후의 자유로운 파라미터 편집 가능
Gaussian splatting (GS)은 명시적인 매개변수화 (parameterization) 및 효율적인 렌더링 능력 덕분에 VR/AR 및 디지털 콘텐츠 제작 분야에서 상당한 주목을 받아왔습니다. 그러나 변형 가능한 객체를 위한 기존의 GS 기반 방식들은 두 가지 주요 한계에 직면해 있습니다: (i) 조명이 텍스처에 잘못 구워져(baked) 있어, 동적인 변형 및 조명 변화 시 물리적으로 일관되지 않은 반응을 일으킵니다; (ii) 스냅샷 기반 재구성은 재구성 이후의 재질 편집 (material editing)을 제한합니다. 이러한 과제를 해결하기 위해, 우리는 물리 기반 역렌더링 (inverse rendering), 재조명 (relighting), 그리고 변형 인지 조작 (deformation-aware manipulation)을 통합하는 통합 Gaussian 프레임워크인 Deformable and Relightable GS (DR-GS)를 제안합니다. 기하학 (geometry), 조명 (illumination), 그리고 재질 (material) 표현을 명시적으로 분리함으로써, DR-GS는 정적 스냅샷의 한계를 극복하여 다양한 조건에서도 비현실적인 외관 문제를 해결하는 동시에 재구성 이후의 파라미터 편집을 가능하게 합니다. 광범위한 실험을 통해 DR-GS는 정적 재구성, 동적 변형, 그리고 재조명 전반에 걸쳐 선도적인 시각적 품질을 달성하며, 광택이 있는 표면에서의 반사 및 정반사 하이라이트 (specular highlights)를 안정적으로 보존함을 보여줍니다. 나아가 이는 완전히 분리된 기하학-조명-재질 파이프라인을 구축하여, 고품질 3D 에셋 생성 및 포괄적인 사후 편집을 가능하게 합니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.GR (Graphics)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기