MultiRef-Compass
요약
MultiRef-Compass는 다중 참조를 이용한 오디오-비디오 생성에 대한 통합 벤치마크입니다. 또한, Kuaishou의 Kolors 팀과 NTU가 큰 카메라 회전에도 기하학적 일관성을 유지하는 확산 기반의 MetaView 프레임워크를 공개했습니다.
핵심 포인트
- MultiRef-Compass는 오디오-비디오 생성 통합 벤치마크입니다.
- MetaView는 단일 이미지에서 고화질의 새로운 시점 합성을 가능하게 합니다.
- MetaView는 큰 카메라 회전에도 기하학적 일관성을 유지합니다.
MultiRef-Compass
A unified benchmark for multi-reference-to-audio-video generation with 350 samples and 14 metrics across four evaluation dimensions
Dataset:
https://huggingface.co/datasets/zxhhh/MultiRef-Compass
…
Paper:
https://paperswithcode.co/paper/2607.14189
…
MetaView: 단일 이미지로부터 고화질의 새로운 시점 합성
Kuaishou의 Kolors 팀과 NTU가 Hugging Face에 MetaView를 공개했습니다. 이 프레임워크는 큰 카메라 회전에도 불구하고 기하학적으로 일관된 뷰를 생성하는 확산 기반(diffusion-based) 방식입니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 X @huggingpapers (검증됨)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0