5월에 출시된 LTX 2.3을 위한 오픈 소스 LoRA 모음
요약
본 기사는 LTX 2.3 모델을 활용하여 영화 및 비디오 제작에 적용할 수 있는 오픈 소스 LoRA 모음들을 소개합니다. 주요 기능으로는 VFX용 클린 플레이트 생성(Remove Foreground), 다양한 화면 비율 변환(Video Outpainting), 대사 수정(Dubbing) 등이 있습니다. 또한, 오래된 푸티지 복원(DeArchive), 캐릭터 연속성 유지(Character LoRA), 360도 환경 제작(VR Video Outpaint) 등 전문적인 영상 후반 작업에 유용한 다양한 도구들을 제공합니다.
핵심 포인트
- LTX 2.3 기반의 오픈 소스 LoRA들이 영화 및 비디오 제작 워크플로우를 혁신하고 있습니다.
- Remove Foreground는 VFX에서 필수적인 클린 플레이트 생성을 가능하게 합니다.
- Video Outpainting은 콘텐츠의 화면 비율을 유연하게 조정하여 다양한 플랫폼(예: 4:3 to 16:9, 와이드스크린 to 세로형)에 대응할 수 있게 합니다.
- DeArchive 기능은 저화질 또는 오래된 푸티지 복원 및 채색에 효과적입니다.
- VR Video Outpaint는 LED 월이나 버추얼 프로덕션 환경을 위한 360도 비디오 제작을 지원합니다.
사람들은 종종 현재 AI가 영화를 위해 실제로 무엇을 할 수 있는지 묻곤 합니다. 그래서 저는 로컬에서 실행 가능한 무료 LTX 2.3 모델을 중심으로 오픈 소스 커뮤니티가 개발한 몇 가지 기능들을 정리해 보았습니다. 그중 일부는 정말 놀랍습니다.
예를 들어, Remove Foreground는 VFX를 위한 클린 플레이트 (clean plates) 생성을 가능하게 합니다. Video Outpainting은 단순히 4:3 영화를 16:9로 변환하는 것에 그치지 않고, 세로형 드라마 형식을 와이드스크린으로 바꾸거나, 반대로 모바일 시청을 위해 와이드스크린을 세로형으로 바꿀 수도 있습니다.
Dubbing은 왜 유용한지에 대해 상당히 자명합니다 (아마도 특히 판매 및 배포 관점에서). 그럼에도 불구하고, 이는 포스트 프로덕션 (post-production) 단계에서 대사를 수정하는 데에도 잠재적으로 사용될 수 있으며, 이는 배우들이 계약 시 주의를 기울이기 시작해야 할 부분일 수도 있습니다.
DeArchive는 오래된 저화질 푸티지 (footage)를 복원하고 채색하는 데 있어 특히 인상적입니다. Character LoRA는 명백한 딥페이크 (deepfake) 우려를 불러일으키지만, 의상의 일관성을 포함하여 여러 샷에 걸쳐 캐릭터의 연속성 (continuity)을 유지하는 것도 가능해 보입니다.
Seamless Transition - 본질적으로 정지 이미지 간의 고급 모핑 (morphing) - 은 아마도 뮤직비디오 (MV), 광고 및 유사한 작업에 활력을 불어넣는 데 가장 유용할 것입니다.
Upscaling은 이미 값비싼 도구들이 많이 존재하는 분야이지만, 진정으로 훌륭한 무료 옵션은 매우 적습니다.
VR Video Outpaint는 다른 것들 중에서도 LED 월 (LED walls) 및 버추얼 프로덕션 (virtual production) 설정을 위한 360도 비디오 환경을 만드는 데 사용될 수 있습니다.
Credits:
Remove Foreground by WepeNerd https://huggingface.co/WepeNerd/Obscura_Remova
Horizontal Video Outpaint by MedOumoumad https://huggingface.co/oumoumad/LTX-2.3-22b-IC-LoRA-Outpaint
Vertical Video Outpaint by MedOumoumad https://huggingface.co/oumoumad/LTX-2.3-22b-IC-LoRA-Outpaint
noamiKenKorem의 Dubbing LoRA https://huggingface.co/Lightricks/LTX-2.3-22b-IC-LoRA-LipDub
MedOumoumad의 DeArchive https://huggingface.co/oumoumad/ltx-2.3-dearchive-lora
ingi_erlingsson의 Character LoRA https://x.com/ingi_erlingsson/status/2050681314139865201
ingi_erlingsson의 Seamless Transitions https://x.com/ingi_erlingsson/status/2054311054092493156
Zlikwid의 Upscale https://huggingface.co/Zlikwid/LTX_2.3_Upscale_IC_Lora
Burgstall의 VR Video Outpaint https://huggingface.co/TheBurgstall/VR-360-Outpaint-LTX2.3-IC-LoRA
(모든 영상은 해당 효과를 개발한 개발자들에 의해 제작되었습니다.)
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기