단 한 장의 사진으로 동영상을 만들 때는 단순히 '이 사진을 움직여줘'라고 지시하는 것만으로는 카메라가 느리게 줌인/아웃하는 클립이 되기 쉽습니다. 사진 안에 이미 보이는 것은 적지 않고, 사진에 없는 것, 즉 '앞으로 일어날 움직임'과 '들리는 소리'만을 작성하면 결과물이 안정적입니다. 직접 수십 개를 시도하며 정리한 규칙을 공유합니다.
1. 사진에 있는 내용은 쓰지 않기
사진에는 이미 피사체, 의상, 배경, 빛이 담겨 있습니다. 프롬프트(Prompt)에서 이를 다시 설명하면, 모델이 사진과 텍스트의 차이를 메우려고 하면서 얼굴이나 옷차림이 바뀌는 경우가 생길 수 있습니다.
NG: A woman with long black hair in a red dress stands in a garden at sunset and smiles. (검은 긴 머리의 여성이 일몰의 정원에 빨간 드레스를 입고 서서 미소 짓는다.)
OK: She turns her head toward the camera and smiles. Petals drift past. (그녀가 카메라 쪽으로 고개를 돌리며 미소 짓는다. 꽃잎들이 날린다.)
2. 움직임은 '작고, 하나'로 제한하기
사진에서 만드는 영상일수록 원본 사진과 멀어질수록 오류가 발생하기 쉽습니다.
- 눈 깜빡임, 고개 돌리기, 머리카락이 바람에 흔들림, 김이 나는 것: 붕괴 위험이 적음 (안정적)
- 일어나서 걷기 시작함, 카메라가 건물의 반대편으로 돌아감: 붕괴 위험이 높음
큰 움직임이 필요하다면, 사진을 두 장 준비하여 각각 다른 클립으로 만드는 것이 더 빠릅니다.
3. 카메라는 고정하거나, 느리게 당겨지는 것만 사용하기
Camera: static. (카메라: 정지)
Camera: slow push-in. (카메라: 느린 근접 촬영)
패닝(Pan)이나 회전(Orbit)을 넣으면, 사진에 없는 부분을 모델이 그려내게 되어 배경이 흐릿하게 왜곡될 수 있습니다.
4. 소리는 사진의 '외부'를 추가하기
음성도 함께 생성하는 모델이라면, 음성 줄에서 사진 외부의 세계를 추가할 수 있습니다. 오래된 가족사진이라면,
She turns her head toward the camera and smiles.
Camera: slow push-in.
Sound: a quiet room, a clock ticking, children laughing in the next room. (조용한 방, 시계 초침 소리, 옆방에서 웃는 아이들 소리.)
처럼 화면 밖에서 들리는 소리를 2~3가지 추가하면, 사진이 마치 '그 장소'로 돌아간 것처럼 들립니다.
인물에게 말하게 하려면 대사는 따옴표로 묶고 짧게 작성합니다.
He looks up and says "You made it." (그가 고개를 들어
