저는 이 부분에 후반 편집을 전혀 하지 않았습니다. 모두 비디오 빌더에서 바로 나온 것입니다.
• 노래는 Suno로 만들었고, 가사는 Claude가 작성했습니다.
• 스토리와 밴드의 캐릭터 시트, 그리고 배경 장소는 제가 구상했으며, GPT image 2를 사용해 제작했습니다. 모델 설정은 다음과 같습니다: MiniMax H3 Singularity, 첫 번째 패스에서 25 스텝, 이어서 두 번째 패스에서는 latent upscale 모델을 사용하여 4 스텝의 768p turbo LoRA와 0.35 디노이즈를 적용했습니다. 저는 MCP/API 지원 기능을 갖춘 ComfyUI 비디오 빌더를 사용했는데, 이를 통해 에이전트가 대신 실행하게 하거나 나중에 생성된 프로젝트를 열어보고 가지고 놀 수 있습니다. 이 비디오 빌더는 모든 프롬프트를 자동으로 만들어 줄 수 있지만, 이번 영상의 경우 Claude에게 API/MCP 기능을 사용하여 프롬프트 생성을 돕게 했습니다. 어떤 LLM 에이전트든 이를 수행할 수 있습니다. Claude가 자체적으로 처리한 작업:
• 28개의 장면을 기획하고 모든 H3 프롬프트를 샷별로, 각 샷의 가사 단서와 감정 태그를 포함하여 작성했습니다.
• ElevenLabs Eleven v4 및 ElevenLabs 사운드 효과를 사용하여 스포큰 인트로와 아웃트로를 작성하고 음성 녹음을 했습니다 (제 API 키를 사용했습니다. 참고로 저는 $5 플랜 사용자입니다).
• VRGDG 비디오 빌더의 API를 통해 밤새 렌더링을 진행했습니다: 45개의 렌더, 5090에서 약 8 GPU 시간을 소요했으며, 여기에는 재촬영과 대체 장면 버전이 포함되었습니다.
• 모든 테이크를 프레임별로 확인하고 문제가 있는 부분은 다시 촬영했습니다.
• 모든 컷을 확인했고, 28개 장면의 오디오 싱크가 정확히 0ms 차이로 나왔습니다.
• 이전 장면에서 바로 이어지는 옵션 버전(latent continuation)도 만들었습니다. 제 비디오 빌더는 GitHub https://github.com/vrgamegirl19/comfyui-vrgamedevgirl 에서 찾을 수 있습니다. 저희는 스토리 흐름에 따라 이 영상처럼 비디오를 만들 수 있게 해주는 새로운 스토리 모드를 개발하고 있습니다 - 하지만 Claude가 필요하지는 않습니다! 워크플로우 폴더에서 2-pass 워크플로우(Workflows[MiniMaxH3_2Pass_LatentUpscale_Shareable.json])를 찾을 수 있습니다. /u/Cheap_Credit_3957 제출 [링크] [댓글]
