Stream-R1: Reward-guided distillation for streaming video generation

요약

Stream-R1은 보상 유도 증류(Reward-guided distillation) 기법을 사용하여 스트리밍 비디오 생성의 품질과 효율성을 높인 연구입니다. 이 모델은 각 픽셀에 균등한 가중치를 부여하는 대신, 프레임 간 상호 신뢰도와 공간-시간적 내부 퍼플렉시티를 활용하여 단일 보상 모델로 가중치를 재분배합니다. 그 결과, 기존의 Wan2.1 교사 모델을 초과하는 성능으로 23.1 FPS 이상의 고속 스트리밍 비디오 생성이 가능함을 보여줍니다.

핵심 포인트

• 스트리밍 비디오 생성에 보상 유도 증류(Reward-guided distillation) 기법 적용
• 픽셀 단위가 아닌, 상호 신뢰도 및 공간-시간 퍼플렉시티를 기반으로 가중치 재분배
• 단일 보상 모델을 사용하여 효율적인 비디오 생성 품질 향상 달성
• 기존 최고 성능 모델(Wan2.1) 대비 우수한 속도와 품질 (23.1 FPS 이상) 입증