epGen: 영상 속 모든 소리에 개별 오디오 트랙을 제공하는 LTX-2.5용 오픈 LoRA

LTX-2.5는 하나의 혼합된 사운드트랙이 있는 비디오를 만듭니다. 저희의 LoRA 또한 동일한 실행에서 캡션된 각 소리마다 개별 트랙으로 출력합니다. '지프가 엔진을 으르렁거리는 모습'과 '택시가 경적을 울리는 모습'이라는 프롬프트를 입력하면, 비디오와 전체 혼합 사운드에 더해 각 소리가 개별 트랙으로 분리된 것을 얻을 수 있습니다. 동일한 가중치(weights)는 기존 비디오의 소리를 분리하는 데도 사용됩니다. 공간 오디오(헤드폰 착용 시)로 장면 속으로 걸어 들어가는 모습을 확인하세요: https://sepgen.github.io LTX-2.5 22B 개발 버전용 LoRA 두 개. 코드와 학습 설정 파일이 포함되어 있습니다. 💻 https://github.com/AviadDahan/SepGen 🤗 https://huggingface.co/collections/AviadDahan/sepgen 오늘 Hugging Face Daily Papers에서 다루었습니다. 이 작업이 마음에 드셨다면, 거기서 업보트(upvote)를 해주시면 큰 도움이 됩니다! https://huggingface.co/papers/2610.11361 설정이나 학습에 대한 질문에 답변드리겠습니다. /u/No_Inflation9351 님이 제출했습니다. [link] [comments]