AI 비디오 프롬프트를 작성하며 하루를 보내다, 올바른 입력값이 빠졌음을 깨닫다

저는 모델에게 이미지 하나와 매우 상세한 프롬프트를 주면서 AI 비디오 제작을 시작했습니다. 저는 카메라 움직임, 캐릭터 행동, 타이밍, 그리고 제가 원하는 모든 작은 디테일들을 설명했습니다. 더 구체적이면 결과가 제 아이디어에 가까워질 것이라고 생각했지만, 대부분의 시도는 좌절스러웠습니다. 때로는 생성 자체가 완전히 실패하기도 했습니다. 다른 때는 비디오가 프롬프트의 몇몇 단어는 따랐지만 제가 상상했던 것과는 완전히 다른 것을 만들어냈습니다. 하루 종일 프롬프트를 다시 작성한 후에, 저는 문제가 항상 프롬프트 자체에 있는 것이 아니라는 것을 깨달았습니다. 저는 충분한 시각적 정보 없이 AI에게 너무 많은 것을 상상하도록 요구하고 있었습니다. 긴 설명이 누락된 참조를 대체할 수는 없습니다. 저는 워크플로우를 변경하여 생성 전에 더 많은 자료를 준비하기 시작했습니다. 일관성을 유지하고 싶은 추가 장면 이미지, 캐릭터 레퍼런스, 디테일들을 만들고, 이것들을 모든 것을 처리하도록 기대하는 하나의 이미지와 텍스트 프롬프트 대신 PixVerse에 넣습니다. 또 다른 큰 변화는 단 한 번의 생성으로 완벽한 비디오를 만들겠다는 생각을 멈춘 것입니다. 이제 저는 간단한 스크립트를 더 작은 샷들로 나누고, 여러 개의 5초 클립을 생성하여, 실제로 아이디어와 일치하는 것들을 선택하고 편집 과정에서 결합합니다. 재미있는 점은 제가 처음에 AI 비디오가 주로 프롬프트 작성 문제라고 생각했다는 것입니다. 이것을 더 사용해 보니, 영화 제작자를 위한 장면을 구축하는 것에 훨씬 가깝게 느껴집니다. 모델은 문장으로부터 전체 세계를 창조하도록 요구하는 것보다 충분한 시각적 구성 요소들을 제공받을 때 더 잘 작동합니다.