UniVidX: 다양한 비디오 생성을 위한 통합 다중 모달 프레임워크

요약

UniVidX는 RGB, 본질적 맵(intrinsic maps), 알파 채널 등 다양한 모달리티를 통합하여 모든 방향의 비디오 생성을 가능하게 하는 통일된 다중 모달 프레임워크입니다. 이 프레임워크는 확산 사전 지식과 확률적 조건 마스킹을 활용하며, SIGGRAPH 2026에 제출된 연구 결과물로, 비교적 적은 양의 데이터(1,000개 미만 비디오)만을 사용하여 높은 성능을 입증했습니다.

핵심 포인트

• UniVidX는 RGB, 본질적 맵, 알파 채널 등 다양한 모달리티를 통합하는 다중 모달 프레임워크입니다.
• 확산 사전 지식(diffusion priors)과 확률적 조건 마스킹을 사용하여 모든 방향의 비디오 생성을 구현합니다.
• SIGGRAPH 2026에 제출된 최신 연구 결과물입니다.
• 1,000개 미만의 적은 데이터셋으로도 효과적인 비디오 생성 성능을 보여줍니다.