이 멋진 기능 🚨사진 한 장이 편집 가능한 장면으로 변신합니다.
요약
DistScene은 단일 사진을 편집 가능한 희소 복셀 장면으로 변환하는 기술입니다. 이는 sparse DiT와 flow-matching, TRELLIS.2를 활용하며 LoRA로 미세 조정되었습니다. 또한, ElevenLabs의 대안으로 100% 로컬 및 무료 음성 복제 도구인 VoiceStudio도 소개하고 있습니다.
핵심 포인트
- DistScene은 사진을 편집 가능한 희소 복셀 장면으로 변환합니다.
- 기술 구현에 sparse DiT, flow-matching, TRELLIS.2 등이 사용되었습니다.
- VoiceStudio는 ElevenLabs의 대안으로 로컬에서 작동하는 무료 음성 복제 도구입니다.
이 놀라운 기술
단일 사진을 편집 가능한 장면으로 바꿉니다.
DistScene은 이미지를 희소(sparse) 복셀 장면으로 변환합니다. 이는 sparse DiT와 flow-matching 위에 TRELLIS.2를 활용한 것입니다. LoRA로 미세 조정되었습니다. 객체 중심의 보정(Object-centric correction)을 통해 손실된 디테일을 되살립니다.
가중치(Weights)와 코드는 아직 제공되지 않습니다. 페이지는 공개되어 있습니다.
http://coolbeam.github.io/DistScene
대안 (ALTERNATIVE)
ElevenLabs의 100% 로컬 및 무료 경쟁자: VoiceStudio
이 새로운 오픈소스 프로젝트는 음성 복제(voice cloning) 거대 기업인 ElevenLabs에 도전하며, 값비싼 클라우드 구독료와 높은 비용을 완전히 제거합니다.
• 646가지 다른 자연스러운 내레이션 및 음성 지원
AI 자동 생성 콘텐츠
본 콘텐츠는 X @DeepTechTR (AI/오픈소스)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기