와~ 음악을 기반으로 하는 춤 영상 오픈 모델이 나왔네요!

Alibaba가 음악에 맞춰 장시간의 춤 영상을 생성할 수 있는 14B 모델을 오픈소스로 공개했습니다.

이제 로컬 환경에서 Wan-Dancer-14B를 직접 구동할 수 있습니다. 캐릭터와 노래 한 곡만 업로드하면, 비트와 완벽하게 동기화된 춤 영상이 생성됩니다. 스트리트 댄스, 탭댄스, 라틴, K-Pop, 중국 전통 무용 등 다양한 스타일을 지원하며, 비교적 긴 시간 동안의 연속적인 출력도 가능합니다.

이전에는 이런 음악 구동 기반의 정밀한 신체 동작 생성이 폐쇄형 대규모 모델에 의존하거나 효과가 미흡했습니다.

하지만 이제 가중치를 직접 오픈소스로 공개하여 로컬에서 실행할 수 있게 됨으로써 진입 장벽이 크게 낮아졌습니다.

이는 또 다른 범용 비디오 모델이 아니라, '음악 → 리듬 → 정밀한 춤 동작'이라는 특정(vertical) 능력을 로컬 배포가 가능한 수준으로 끌어올린 것입니다.

앞으로 콘텐츠 크리에이터들이 음악 시각화, 댄스 교육, 버추얼 아이돌 공연 등을 할 때 클라우드 서비스에 완전히 의존할 필요가 없어졌습니다.

프로젝트 주소

프로젝트 주소