ByteDance Seed releases PV-VAE

요약

ByteDance Seed가 부분 컨텍스트를 활용하여 미래 프레임을 재구성하고 예측하는 예측 비디오 VAE(predictive Video VAE)인 PV-VAE를 출시했습니다. 이 모델은 기존 Wan2.2 대비 잠재 확산성을 개선했을 뿐만 아니라, 수렴 속도를 52% 빠르게 하고 FVD 점수를 34.42 향상시키는 성능을 보여주었습니다.

핵심 포인트

• PV-VAE는 부분 컨텍스트 학습을 통해 비디오의 미래 프레임을 예측하고 재구성하는 데 특화된 모델입니다.
• 기존 대비 잠재 확산성(latent diffusability)이 개선되어 더 높은 품질의 비디오 생성이 가능합니다.
• 수렴 속도가 52% 빨라져 효율적인 학습 및 추론이 가능해졌습니다.
• FVD(Fréchet Video Distance) 점수가 34.42 향상되는 등 성능 지표에서 큰 개선을 이루었습니다.