비디오 편집 모델은 복잡한 지침을 처리할 수 있을까?

요약

NJU와 Kuaishou는 복잡한 지침을 처리하는 조합적 비디오 편집(compositional video editing) 진단 벤치마크인 CoVEBench를 공개했습니다. 이 벤치마크는 현재 모델들이 결합된 편집 작업에서 여전히 어려움을 겪고 있음을 보여줍니다. 또한, OmniGameArena는 VLM 게임 에이전트의 실시간 성능을 측정하는 UE5 기반 벤치마크입니다.

핵심 포인트

• CoVEBench: 조합적 비디오 편집 진단 벤치마크 제공
• 현재 모델들은 결합된(coupled) 편집 작업에서 실패 경향 보임
• OmniGameArena는 VLM 게임 에이전트의 실시간 성능 측정 도구
• 개선 동역학 곡선을 통해 에이전트 학습 및 개선 과정 추적 가능