에이전트(Agent)를 활용하여 비디오, 이미지, 음악을 로컬 환경에서 만드는 방법 (Claude Code, Codex, Antigravity
요약
코딩 에이전트가 미디어 생성을 지원하는 네이티브 CLI 도구인 slopfab을 소개합니다. 이 에이전트는 프로젝트 페이지를 구축하고, 오디오 비디오, 이미지, 음악 등 다양한 콘텐츠 제작 과정을 계획하고 실행할 수 있습니다. ComfyUI나 Python 없이 로컬 환경에서 작동하며, 원격 실행 및 공유 가능한 워크플로우 기능을 제공하는 것이 특징입니다.
핵심 포인트
- 에이전트가 미디어 생성을 위해 샷 계획부터 실행까지 자동화합니다.
- MiniMax H3 등 다양한 최신 비디오/이미지/음악 생성 기능을 통합 지원합니다.
- ComfyUI나 Python 없이 네이티브 CLI 환경에서 로컬로 작동합니다.
- JSON 기반 명령어 학습과 공유 가능한 'Mods' 워크플로우를 제공합니다.
저는 코딩 에이전트가 미디어를 직접 생성할 수 있게 해주는 네이티브 커맨드라인 도구인 slopfab을 제작했습니다. 이를 압축 해제하고 해당 폴더에서 에이전트를 시작한 다음, 뮤직비디오, 단편 영화 또는 제품 사진 촬영 등을 요청하세요. 에이전트가 샷(shot)을 계획하고, 생성을 실행하며, 검토할 수 있는 프로젝트 페이지를 구축해 줍니다. 이것은 slopus.ai가 사용하는 것과 동일한 네이티브 백엔드이며, ComfyUI나 Python이 필요 없습니다.
기능:
- 오디오가 포함된 비디오: MiniMax H3 (텍스트/이미지/비디오/오디오 참조, 장편 연속성(long-form continuation), 클립 브리징(clip bridging), 인페인팅/아웃페인팅)
- 이미지: Krea 2, MOSS, Fibo 2.0, MiniMax H3 (다중 참조 편집 포함)
- 음악: YuE2 및 MiniMax Music3 (가사나 기악곡이 있는 노래)
- 유틸리티: 전사(Transcription), 스템/가사 분리(stem/lyrics separation), SeedVR2/RealESRGAN 업스케일링, 립싱크 점수화(lip-sync scoring), 스크립트 타이틀 및 오버레이
왜 에이전트에게 적합한가:
모든 명령어는 JSON 도움말과 출력을 가지고 있어 에이전트가 사용하면서 CLI를 학습할 수 있습니다.
- 모드(Mods): 공유 가능한 마크다운 워크플로우로, 선택적으로 JS 명령어를 포함할 수 있습니다. 예를 들어, '뮤직비디오' 레시피와 같은 다른 사람들이 드롭할 수 있는 작업 흐름입니다.
- 원격 실행: 모든 명령어는 SSH를 통해 원격 장치에서 실행될 수 있습니다.
- 생성된 콘텐츠는 자동으로 로컬 컴퓨터로 전송됩니다.
플랫폼:
네이티브 Windows 및 Linux, CUDA 또는 Vulkan을 지원합니다. 클라우드나 계정이 필요 없는 사용자 본인의 기기에서 작동합니다.
GitHub: https://github.com/bitti-ai/slopfab
피드백 환영합니다. 특히 겪는 문제에 대한 피드백 부탁드립니다.
submitted by /u/BittiAI [link] [comments]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기