World Tracing: 가시 영역을 넘어선 생성적 픽셀 정렬 기하학 (Generative Pixel-Aligned Geometry

요약

World Tracing은 입력 픽셀과 정렬된 3D 포인트를 예측하면서 가려진 영역의 기하학적 구조까지 완성하는 새로운 생성적 표현 방식입니다. WT-DiT 모델을 통해 가시 표면과 가려진 표면을 동시에 재구성하며, 기존의 depth predictor와 image-to-3D 모델을 능가하는 성능을 보여줍니다.

핵심 포인트

• 픽셀과 정렬된 3D 포인트 스택을 통해 가시 및 가려진 표면을 동시에 예측
• WT-DiT(Diffusion Transformer)를 활용한 다층 기하학적 레이어 구현
• 픽셀 공간 플로우 매칭과 혼합 노이즈 스케줄을 통한 정밀한 학습
• 2D-3D 대응 관계 보존으로 텍스트 기반 3D 편집 및 비디오 합성 가능