Claude 코드와 r2v MINIMAX H3, 그리고 몇 가지 LoRA에 캐주얼한 프롬프트('이건 별로야, 더 좋게 만들어 줘' 같은)를 사용합니다. 제 목표는 역동적인 애니메이션을 만드는 것이지만, 저는 애니메이션 자체를 좋아하지 않습니다. 관심 있는 분들을 위해, 이 AI 애니메이션을 제작하는 현재 제가 사용하는 워크플로우를 공유합니다.
하드웨어 및 설정 (Hardware & Setup)
- RunPod (RTX 4090, 24GB VRAM)
- ComfyUI 0.42.0
- 커스텀 Python 자동화 스크립트 (h3_ctrl.py)
1. 캐릭터 디자인 및 키프레임 (Character Design & Keyframes)
- 모델: Krea 2 Turbo (INT8)
- 텍스트 인코더: Qwen3VL 4B
- LoRA: Kegant V5 (1.0)를 사용하여 어둡고 신비로운 애니메이션 미학을 구현합니다.
- 설정: 8~10 스텝, CFG 1, Euler/Simple
- 생성 속도: 이미지당 약 12초
- 저는 각 장면에 대한 캐릭터 레퍼런스 시트와 키프레임을 생성하며, 여기에는 시작 프레임과 정확한 충격 프레임이 포함됩니다.
2. 비디오 생성 (Video Generation)
- 모델: MiniMax H3 Hybrid FL2VA + REF2VA (INT8)
- 텍스트 인코더: Qwen3VL 32B
- 해상도: 1344×768, 24 FPS
- 지속 시간: 클립당 5초, 생성된 오디오 포함
- LoRA 스택:
- Turbo 8-Step (LightX2V): 속도와 선명도 향상
- H3 Combat V2: 전투, 충격 및 드라마틱한 액션 표현
- BUNNY Motion Repair V2: 더 부드러운 연속 움직임 구현
- SuperHunman: 더 강하고 강력한 움직임 구현
- 액션 속도 + 가속 슬라이더: 둘 다 3.0으로 설정합니다.
3. 워크플로우 (The Workflow)
저는 수정된 BUNNY 투-패스(two-pass) 접근 방식을 사용합니다: 첫 번째 패스는 LoRA 스택을 사용하여 주요 움직임을 생성하고, 두 번째 패스는 디테일과 충격을 다듬습니다. 10 샘플링 스텝에 운동 형태를 위한 추가 4단계를 더합니다. res_multistep 샘플러를 사용합니다. 캐릭터 시트는 MiniMaxH3ReferenceToVideo로 입력되고, MiniMaxH3AddGuide가 시작 프레임과 충격 프레임을 고정(약 프레임 72–77)합니다. 프롬프트는 상세한 캐릭터 설명, 연속성 제약 조건, 초 단위 액션 안무, 그리고 음향 효과를 포함하여 여섯 개의 섹션으로 구조화됩니다.
4. 여러 클립 연결 (Connecting Multiple Clips)
저는 NikoDemon80의 H3 Motion Context를 실험하며 5초 이상의 장면을 확장합니다. 이 도구는 이전 클립의 마지막 22프레임을 컨텍스트로 다음 생성을 처리하고, 모든 것을 합칠 때 중복되는 프레임은 제거해 줍니다.
목표는 일관된 캐릭터와 연속적인 움직임을 가진 더 긴 액션 시퀀스를 만드는 것입니다. 5. 몇 가지 중요한 세부 사항 커스텀 학습된 캐릭터 LoRA(Low-Rank Adaptation)는 사용하지 않았습니다. 저는 의상 일관성, 적의 수, 그리고 캐릭터 세부 사항에 대해 키프레임(keyframes)을 수동으로 확인합니다. 편집 과정에서 인위적인 속도 증가(speed-up)나 슬로우 모션 효과는 사용하지 않았습니다. H3가 오디오까지 생성합니다. 그리고 네, Claude 역시 이 과정에 참여하여 워크플로우와 자동화를 조정하는 데 도움을 줍니다. 여전히 매우 실험적인 단계입니다. 일관성 있는 고속 애니메이션 전투를 구현하는 것은 놀라울 정도로 어렵지만, 결과는 점점 좋아지고 있습니다. H3로 실험하는 모든 분들에게 도움이 되기를 바랍니다! 🔥 제출자: /u/Inevitable-Bus-8654 [링크] [댓글]
