ComfyUI와 MiniMax H3를 기반으로 구축한 무료 오픈소스 영화 스튜디오: 아이디어부터 완성된 단편 영화까지, 개인 PC에서 구현
요약
IV Studio는 ComfyUI와 MiniMax H3를 기반으로 구축된 무료 오픈소스 영화 스튜디오입니다. 사용자가 노드 그래프에 직접 접근할 필요 없이 API를 통해 구동되며, 아이디어부터 단편 영화 완성까지 6단계의 제작 마법사 기능을 제공합니다. 캐릭터 일관성 유지, 장면 확장, 인물 제거 등 전문적인 AI 기반 영상 편집 워크플로우를 지원하는 것이 특징입니다.
핵심 포인트
- 노드 그래프 없이 API로 구동되는 데스크톱 앱 형태입니다.
- 아이디어부터 단편 영화까지의 6단계 제작 마법사 기능을 제공합니다.
- 캐릭터와 배경의 일관성을 유지하며 장면을 촬영할 수 있습니다.
- SAM 3.1 기반 인물 제거, 공백 채우기 등 전문 편집 기능이 포함됩니다.
- Ollama를 통한 로컬 모델 및 다양한 AI 에이전트가 통합되었습니다.
이것은 Comfy의 Open Source Higgsfield 챌린지 출품작인 IV Studio입니다. 이는 Windows 데스크톱 앱(MIT)이며, 사용자가 원하지 않는 한 직접 노드 그래프를 건드릴 필요 없이 API를 통해 자체 ComfyUI를 구동합니다.
기능:
- 작성 (Write it for me): 로컬 모델(Ollama를 통한 Qwen3-VL 또는 MCP를 통한 AI 에이전트)이 참고 사진을 보고 H3 프롬프트를 작성합니다. 검사기가 H3가 불리한 실수들(프레임 그리드 길이, 스피커 태그, 연결되지 않은 레퍼런스 등)을 포착하고 대부분을 원클릭으로 수정해 줍니다.
- 탐색 및 완성 (Hunt, then finish): 라이브 단계별 이미지를 통해 빠른 미리보기가 가능하며, 테이크는 OpenAI Whisper가 들은 내용, 유사성(likeness), 선명도에 따라 순위가 매겨집니다. 리뷰에서는 각 문제점을 타임스탬프와 함께 명시합니다. 최종 선택된 결과물은 DLSS 5 또는 SeedVR2를 사용하여 동일한 잠재 공간(latent)에서 완성됩니다.
- 프로젝트 (Projects): 아이디어부터 단편 영화까지의 6단계 마법사 기능을 제공합니다(스크립트, 출연진, 스토리보드 스케치 등을 애니매틱으로 구현할 수 있습니다). 모든 장면은 해당 스케치로부터 촬영되므로 얼굴과 방의 일관성이 유지됩니다.
- 스태징 보드 (Staging board): 사람과 카메라를 탑다운 평면도에 배치하면 정확한 화면 지시가 되거나, H3가 아크 움직임을 따라가는 회색 미리보기 클립이 됩니다.
- 영상 제작 편집기 (An editor that makes footage): 우클릭을 통해 장면 확장, 공백 채우기, 대사 재촬영, 인물 제거(SAM 3.1), 또는 세로 비율로 리프레이밍 할 수 있습니다.
- 추가 기능: 캐릭터 LoRA 학습, Replace (Genjutsu Level), 음악(MiniMax Music 3 / ACE-Step), 로컬 음성(VoxCPM2), Civitai LoRAs를 포함하며, Claude Code 또는 모든 에이전트가 사용자와 함께 지시할 수 있도록 142개 도구의 MCP 서버도 탑재되어 있습니다.
- 고성능 GPU가 없나요? 자체 Runpod 또는 Modal 계정에서 렌더링할 수 있으며 유휴 상태일 때는 GPU를 종료합니다. Runpod 경로는 완전히 새로운 기능이므로 피드백을 환영합니다. 4090과 64GB RAM으로 테스트했으며, 16GB 카드로는 더 작은 미리보기가 가능합니다. 각 모델은 호스트로부터 다운로드되며 SHA-256 값을 확인합니다.
다운로드: https://github.com/hollisorg/iv-studio/releases/latest
코드: https://github.com/hollisorg/iv-studio
이 시스템을 어떻게 구축하고 그래프를 구동하는지에 대한 질문에 기꺼이 답변드리겠습니다. submitted by /u/itsVariance [link] [comments]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기0