Joints, 카메라, 액션! 임의 리깅을 위한 3D 모션 및 비디오 공동 생성
요약
본 논문은 임의 리깅을 지원하는 3D 모션과 비디오를 공동 생성하고, 이를 장면에 등록할 카메라까지 제공하는 모델을 제시합니다. 기존 방식의 한계를 극복하기 위해 3D 모션을 별도 모델로 분리하여 학습시키고, 소수의 크로스 어텐션 레이어를 통해 비디오 모델에 연결했습니다. 이 모델은 다양한 리깅과 환경에서 움직임을 충실하게 애니메이션화하며, 키프레임 기반 제어까지 가능합니다.
핵심 포인트
- 임의 리깅을 지원하는 3D 모션 및 비디오 공동 생성 모델 제시
- 3D 모션을 별도 모델로 분리하여 학습시켜 성능 향상
- 비디오 프레임에서 관절 위치를 파악해 카메라 복구 및 장면 배치 가능
- 텍스트로부터 다양한 리깅 애니메이션화에 강점 입증
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.GR (Graphics)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0