렌즈를 통한 생성: 교차 좌표 조건 결합을 이용한 카메라 제어 비디오 생성

요약

본 논문은 'Gen Through the Lens'라는 이미지-투-비디오 프레임워크를 제안합니다. 이 프레임워크는 참조 이미지를 기반으로 영상을 합성하며, 카메라 움직임을 사실적이고 물리적으로 일관되게 구현하는 것이 특징입니다. 특히 세 가지 좌표 공간(카메라, 월드, 객체)의 조건 결합을 통해 정밀한 영상 제어를 가능하게 합니다.

핵심 포인트

• Gen Through the Lens: 이미지-투-비디오 생성 프레임워크 제시
• 세 가지 이질적 좌표 공간(카메라/월드/객체)의 조건 결합 사용
• 시간적, 공간적 일관성을 유지하며 카메라 움직임을 정밀 제어 가능
• 사실성과 편집 가능성 측면에서 기존 방법론 능가 입증