Meridian: 기존 비디오를 기반으로 카메라 제어, FOV 및 불릿 타임을 생성하는 모델 (Minimax-H3 기반)
요약
Meridian은 MiniMax-H3을 기반으로 기존 비디오를 활용하여 새로운 시점의 영상을 생성하는 video-to-video 모델입니다. 이 모델은 카메라 경로, FOV 제어, 불릿 타임 효과 구현 등 다양한 기능을 제공합니다. 또한 빠른 미리보기를 통해 GPU 시간을 효율적으로 사용할 수 있습니다.
핵심 포인트
- MiniMax-H3 기반의 비디오-투-비디오 생성 모델
- 카메라 움직임(경로, FOV) 및 시점 제어 가능
- 액션 정지와 카메라 이동을 결합한 불릿 타임 구현
- 생성 전 프레이밍과 카메라 움직임을 미리 볼 수 있음
Meridian은 MiniMax-H3을 기반으로 하여 기존 영상의 새로운 시점(viewpoints)을 생성하는 비디오-투-비디오(video-to-video) 모델입니다. 세 가지 주요 특징이 있습니다.
- 카메라 경로 + FOV (Camera paths + FOV): 궤도(orbits), 돌리(dollies), 슬라이드(slides) 등을 결합하여 복잡한 경로를 만들고, 카메라 위치, 시야 방향(viewing direction), 그리고 시야각(field of view)을 제어할 수 있습니다.
- 불릿 타임 (Bullet time): 액션은 정지시키면서 카메라가 계속 움직이게 합니다.
- 빠른 미리보기 (Fast preview): 지오메트리(geometry)를 재구성한 후, 생성에 GPU 시간을 사용하기 전에 프레이밍과 카메라 움직임을 미리 볼 수 있습니다.
아직 초기 단계입니다: 큰 시점 변화는 아티팩트(artifacts)를 생성할 수 있습니다. X: https://x.com/ViggleAI/status/2099917946420117996 Hugging Face: https://huggingface.co/Viggle/Meridian 온라인으로 사용해 보기: https://huggingface.co/spaces/Viggle/Meridian /u/init-5가 제출했습니다. [링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0