Google의 Gemini Omni Flash가 Artificial Analysis 비디오 편집 리더보드(Video Editing Leaderboard)에서 1위로 데뷔하며, 당사의 비디오 리더보드들을 거의 석권했습니다.

비디오 생성을 넘어, Gemini Omni Flash는 대화형 비디오 편집(conversational video editing)을 지원합니다: 명령을 전달하면 모델이 나머지 장면을 보존하면서 비디오를 수정하며, Gemini API의 Interactions API를 통해 여러 턴에 걸쳐 각 편집이 이전 편집을 바탕으로 누적됩니다. Google이 문서화한 편집 유형에는 스타일 전이(style transfer), 객체 추가 및 제거, 조명 변경, 화면 텍스트 편집 등이 포함되며, 출력은 네이티브 오디오와 함께 720p 및 24 FPS로 제공됩니다.

Artificial Analysis Video Arena에서 Gemini Omni Flash는 Alibaba의 Wan 2.7과 HappyHorse 1.0을 제치고 비디오 편집 리더보드 1위로 데뷔했으며, 이는 Text to Video 및 Image to Video에서의 1위 기록에 추가된 성과입니다.

편집 비용은 생성 비용과 동일하게 책정됩니다: 출력 비디오 초당 약 $0.10 (분당 $6.00)이며, 별도의 편집 요율은 없습니다. Gemini Omni Flash를 이용한 비디오 편집은 Gemini API, Google AI Studio, Gemini Enterprise Agent Platform에서 사용할 수 있으며, Gemini 앱, Google Flow, YouTube Shorts를 포함한 소비자용 서비스에서도 제공됩니다.

커버리지에 관한 참고 사항: Gemini Omni Flash는 콘텐츠 차단(content blocks)으로 인해 당사의 비디오 편집 프롬프트 중 일부 생성을 거부했습니다. 이는 주로 인물이 포함된 프롬프트에서 발생했습니다. 비디오 편집 리더보드의 결과는 모델이 성공적으로 생성한 프롬프트를 반영합니다.

@GoogleDeepMind 축하합니다!

Artificial Analysis Video Arena에서의 Gemini Omni Flash 비디오 편집에 대한 더 자세한 분석과 예시는 아래 스레드를 확인하세요 🧵