오늘 공개한 음성 엔진은 더 큰 프로젝트의 일부였습니다.

요약

오늘 공개된 음성 엔진은 사실 더 큰 프로젝트의 일부였습니다. 이 새로운 애플리케이션은 비디오를 입력받아 소리를 분리하고, 텍스트로 변환하며, 번역 및 합성하여 동기화하는 엔드투엔드(end-to-end) 더빙 기능을 제공합니다. 오픈 소스이며 사용자 자신의 컴퓨터에서 무료로 작동하는 것이 특징입니다.

핵심 포인트

• 비디오 기반의 엔드투엔드 더빙 애플리케이션 구현
• 소리 분리, 텍스트 변환, 번역, 음성 합성까지 통합 처리
• 오픈 소스이며 로컬 환경에서 무료로 사용 가능함
• 고도의 멀티모달 AI 파이프라인을 제시