스냅샷 편광 디스플레이 역렌더링 (Snapshot Polarimetric Display Inverse Rendering)

역렌더링 (Inverse rendering)은 그래픽스 (Graphics) 및 비전 (Vision) 분야의 핵심 과제로 남아 있으며, 특히 프레임당 정보 예산이 매우 제한적인 경량 데스크톱 워크플로우에 필요한 스냅샷 (Snapshot) 구성에서 더욱 그러합니다. 기존의 역렌더링 연구들은 시간적 변조 (Temporal modulation), 분광 인코딩 (Spectral encoding), 그리고 편광 (Polarization)을 포함하여, 샷당 정보를 풍부하게 하기 위해 사용 가능한 다양한 차원들을 탐구해 왔습니다. 본 연구에서는 선형 편광된 RGB 이진 패턴을 투사하는 LCD와, 단일 샷에서 분광-편광 (Spectro-polarimetric) 측정을 획득하기 위해 1/4 파장판 (Quarter-wave plate)으로 보강된 RGB 편광 카메라를 사용하는 편광 디스플레이 역렌더링 (Polarimetric display inverse rendering)을 소개합니다. 피드포워드 트랜스포머 (Feed-forward transformer)는 이러한 측정값을 픽셀당 법선 (Normal), 알베도 (Albedo), 거칠기 (Roughness), 그리고 금속성 (Metallicity)으로 매핑합니다. 학습 데이터의 부족을 극복하기 위해, 우리는 생성적 매니폴드 (Generative manifold)를 통해 제한된 측정된 편광 양방향 반사 분포 함수 (Polarimetric bidirectional reflectance distribution functions, BRDF) 세트를 확장합니다. 실제 데스크톱 설정에서의 평가를 통해 다양한 장면에서 정확한 역렌더링 성능을 입증하였으며, 기존 방식들을 능가하는 성능을 보여주었습니다.