AI로 캐릭터가 등장하는 짧은 영상을 만들 때 가장 어려운 점: 컷마다 의상, 안경, 헤어스타일이 변함

AI를 사용해 캐릭터가 등장하는 짧은 영상 클립을 편집할 때, 가장 좌절스러운 부분은 오프닝 샷은 완벽하게 일치하는데도 불구하고 1~2초 후에 옷, 안경, 헤어스타일이 조용히 바뀌는 것입니다.

motion-video-skill은 Claude Code Skill로, 스토리부터 최종 완성본까지 30초에서 90초 분량의 모션 이펙트(motion effects) 짧은 영상을 6단계로 나누고, Claude가 단계별로 진행하도록 안내합니다.

각 단계를 완료할 때마다 전체 검사 스크립트를 실행해야 합니다. 만약 통과하지 못하면 막혀서 다음 단계로 넘어갈 수 없습니다.

예를 들어, 각 세그먼트의 0초, 1초, 1.5초, 2초, 3초 시점의 비주얼을 하나의 이미지로 배열합니다. 사람이 직접 검토하고 기록해야만 통과로 인정되는데, 이는 특히 영상 중간에 발생하는 캐릭터 얼굴 스왑(character face swaps) 문제를 해결하도록 특별히 설계되었습니다.

GitHub:
http://github.com/unclejobs-ai/motion-video-skill
…
작성자는 또한 겪었던 29가지 함정으로부터 예방 매뉴얼을 컴파일했는데, 여기에는 음악 비트에 기반하여 샷 길이 계산하기나 샷 설정 전에 음성 해설(voiceover) 지속 시간 측정하는 등의 세부 내용이 포함되어 있습니다.

스틸 이미지와 영상 생성에는 ChatGPT 또는 Grok Imagine을 사용하고, 음악은 Suno를, 음성 해설에는 ElevenLabs를 사용하며, 마지막으로 Remotion으로 모든 것을 하나로 합칩니다.

모든 단계에 체크포인트가 있습니다. 저는 이것이 단일 프롬프트만으로 영상을 출력하는 것보다 훨씬 더 신뢰할 수 있다고 생각합니다.