생성형 AI를 사용한 영상 제작에서는 프롬프트의 내용뿐만 아니라, 입력 소재에 적합한 생성 모드를 선택하는 것이 중요합니다.

본 기사에서는 브라우저형 AI 영상 생성 플랫폼인 FLUX 3 Video를 예로 들어, Text to Video, Image to Video, Reference, Keyframe, Multi-shot의 구분 사용법과 재사용하기 쉬운 프롬프트 작성법을 정리합니다.

이 기사는 공개된 기능 정보를 바탕으로 한 입력 설계에 관한 해설입니다. 생성 결과는 프롬프트, 설정, 입력 이미지 등에 따라 변화합니다.

AI 영상 생성에서는 만들고 싶은 영상과 수중에 있는 소재에 따라 생성 모드를 선택합니다. FLUX 3에서는 다음 5가지 종류의 입력 방법을 이용할 수 있습니다.

문장만으로 새로운 영상을 만든다면 Text to Video, 원본 이미지의 외형을 남기고 싶다면 Image to Video가 기본입니다.

동일한 인물이나 상품을 여러 영상에 등장시키는 경우에는 Reference, 루프 영상이나 기존 영상으로 이어지는 컷에는 Keyframe이 적합합니다.

Text to Video에서는 다음 요소들을 나누어 기술하면 모델에 영상의 의도를 전달하기 쉬워집니다.

• 주체 (Subject)
• 동작 (Action)
• 장소 (Location)
• 카메라 (Camera)
• 빛과 시간대 (Light and Time of day)
• 소리 (Sound)
• 유지하고 싶은 조건 (Conditions to maintain)

예를 들어, 다음과 같은 구조입니다.

Subject: A bicycle courier wearing a yellow rain jacket.
Action: She rides through a narrow night market and turns left.
Environment: Wet pavement, food stalls, neon reflections and light rain.
...

"영화처럼", "고품질"과 같은 추상적인 형용사뿐만 아니라, 초점 거리, 카메라의 방향, 이동 속도, 조명, 시간대 등을 구체적으로 쓰는 것이 포인트입니다.

FLUX 3 Video에서 프롬프트를 검증할 때는 한 번에 모두를 변경하지 말고, 카메라, 동작, 조명 등의 조건을 하나씩 바꾸면 결과를 비교하기 쉬워집니다.

입력 이미지에는 이미 인물, 구도, 색상, 배경 등의 정보가 포함되어 있습니다. 따라서 그것들을 프롬프트로 길게 다시 설명하기보다, 추가하고 싶은 움직임과 유지하고 싶은 요소를 명확히 합니다.

The subject slowly turns toward the camera.
Hair moves gently in the wind.
The camera remains fixed.
...

Image to Video에서는 다음 항목을 우선하면 정리하기 쉬워집니다.

• 피사체가 어떻게 움직이는가
• 카메라를 움직일 것인가 고정할 것인가
• 배경에 어느 정도의 움직임을 가할 것인가
• 원본 이미지에서 유지하고 싶은 요소
• 필요한 환경음이나 효과음

처음부터 많은 동작을 지정하면 실패 원인을 분석하기 어려워집니다. 우선 한두 가지 동작부터 시도하고, 필요한 요소를 단계적으로 추가합니다.

Reference 모드에서는 변해서는 안 되는 요소와 샷(Shot)마다 변경하는 요소를 분리합니다.

References:
- Character identity
- Red jacket
...

인물의 얼굴, 의상, 상품 디자인, 장소 등을 Reference로 고정하고, 동작, 카메라, 조명만 샷 측에서 변경하면 여러 클립을 관리하기 쉬워집니다.

Keyframe에서는 영상의 시작과 끝에 표시하고 싶은 이미지를 지정하고, 그 사이의 움직임을 프롬프트로 설명합니다.

이용 예시는 다음과 같습니다.

• 동일한 이미지를 시작과 종료로 지정하여 루프를 만듦
• 상품의 닫힌 상태에서 열린 상태로 이행함
• 기존 영상의 직전 또는 직후로 이어지는 컷을 만듦
• 아침부터 저녁까지의 시간 변화를 표현함

시작 이미지와 종료 이미지의 구도가 크게 다르면 부자연스러운 변형이 발생하기 쉽습니다. 카메라 위치, 피사체의 크기, 배경의 배치를 가능한 한 맞추는 것이 실용적입니다.

여러 컷을 생성할 때는 샷마다 번호를 매깁니다.

Shot 1: 안개에 둘러싸인 등대의 와이드 샷 (Wide shot).
Shot 2: 등대 기계 장치를 감는 손의 클로즈업 (Close-up).
Shot 3: 등대실에서 바다를 내려다보는 뷰 (View).
...

각 샷(Shot)에는 카메라 사이즈와 피사체의 동작을 하나씩 지정합니다. 나아가 모든 샷에서 유지할 인물, 장소, 날씨, 색온도(Color temperature) 등을 마지막에 정리하면 영상 전체의 조건이 명확해집니다.

FLUX 3의 멀티샷(Multi-shot)을 사용할 경우에도, 처음에는 2~3컷 정도의 짧은 구성부터 검증하면 샷 간의 일관성(Consistency)을 확인하기 쉬워집니다.

영상과 소리를 동시에 생성할 때는 들리는 소리뿐만 아니라, 불필요한 소리도 지정합니다.

Audio:
- 금속 지붕에 부딪히는 가벼운 빗소리
- 젖은 콘크리트 위의 발소리
...

환경음, 효과음, 대화, 음악을 별도로 기술하면 원하는 소리의 구성을 명확히 할 수 있습니다. 영상 내에서 여러 사건이 발생하는 경우에는 소리가 나는 타이밍도 동작과 함께 작성합니다.

망치가 금속을 네 번 내리칩니다.
각 충격은 짧은 금속성 챙그랑 소리를 냅니다.
네 번째 타격 후, 금속이 큰 쉬익 소리를 내며 물속에 놓입니다.

용도에 따른 화면 비율(Aspect ratio)의 기준은 다음과 같습니다.

16:9
: YouTube, 웹사이트, 프레젠테이션

9:16
: TikTok, YouTube Shorts, Instagram Reels

1:1
: SNS 게시물, 상품 소개

동영상의 길이, 해상도(Resolution), 음성 유무는 생성 비용에도 영향을 미칩니다. FLUX 3 Video에서는 실행 전에 필요한 크레딧을 확인할 수 있으므로, 처음에는 짧은 영상으로 프롬프트를 검증하고 구성이 확정된 후에 최종 설정으로 생성하는 방법이 효율적입니다.

생성 후에는 단순히 "영상이 예쁜가"뿐만 아니라, 다음 항목들을 확인합니다.

• 인물이나 상품의 형태가 도중에 변하지 않는가
• 지시한 동작이 올바른 순서로 실행되는가
• 불필요한 카메라 이동이 발생하는가
• 배경이나 조명이 도중에 갑자기 변하는가
• 효과음과 화면 내의 움직임이 동기화(Sync)되어 있는가
• 여러 샷 사이에서 인물, 의상, 색상이 유지되는가
• 글자나 로고를 사용했을 때 형태가 무너지지 않는가

수정할 때는 프롬프트 전체를 다시 쓰는 것이 아니라, 한 번의 생성당 하나의 조건만 변경합니다. 변경 전후의 프롬프트와 설정을 저장해 두면, 좋은 결과로 이어진 조건을 재사용할 수 있습니다.

AI 영상 생성에서 안정적인 결과를 얻으려면 목적에 맞는 생성 모드를 선택하고, 주체, 동작, 카메라, 조명, 소리를 나누어 기술하는 것이 중요합니다.

FLUX 3에서는 텍스트, 이미지, 참고 자료, 시작·종료 프레임 등 가지고 있는 소재에 맞춰 생성 방법을 선택할 수 있습니다. 먼저 짧은 프롬프트로 구도와 움직임을 확인하고, 조건을 하나씩 추가하면 검증하기가 수월해집니다.

자세한 생성 모드나 현재 설정에 대해서는 https://flux3-video.net/ 웹사이트에서 확인할 수 있습니다.

업로드하는 이미지, 로고, 음성, 인물 소재에 대해서는 이용권, 저작권, 상표권, 초상권을 사전에 확인하십시오. 생성물을 상업적으로 이용할 경우, 공개 시점의 이용 약관도 확인해야 합니다.

flux3-video.net은 독립적인 플랫폼이며, Black Forest Labs와의 제휴, 승인 또는 스폰서 관계가 없습니다. "FLUX" 및 관련 상표는 각 권리자에게 귀속됩니다.