브래드 피트가 말하는 정적 영상 생성에 대한 메시지
요약
본 기사는 정적인 배경과 움직임이 적은 영상에 특화된 새로운 비디오 생성 워크플로우를 소개합니다. 이 방식은 각 클립을 독립적으로 생성하고, 연결 부위에서만 페이드아웃 및 노이즈 처리를 통해 일관성을 유지하는 것이 특징입니다. 따라서 카메라가 움직이는 역동적인 장면보다는 정지된 샷(Static shots)에 최적화되어 있습니다.
핵심 포인트
- 정적 배경의 긴 영상 생성에 특화된 워크플로우를 제시합니다.
- 각 클립을 독립적으로 생성하여 품질 저하 문제를 해결했습니다.
- 연결 부위에서만 페이드아웃 및 노이즈 처리를 통해 일관성을 확보합니다.
- 카메라 움직임이 있는 역동적인 장면에는 적용하기 어렵습니다.
워크플로우
https://github.com/roycho87/refreshing_extender
이것은 작동하는 Ref2v 전용 워크플로우입니다. 최종 결과물이라기보다는 여러분이 분해하여 자신만의 워크플로우를 만들 수 있는 개념으로 생각하시면 됩니다.
이 기술은 이 스타일의 영상에만 적합합니다.
여기에 대본을 첨부합니다.
브래드:* 안녕하세요, 저는 브래드 피트입니다. 여러분은 오션스 일레븐(Ocean's Eleven)이나 쿨 월드(Cool World) 같은 영화에서 저를 기억하실 수도 있을 겁니다. 거기서 제가 가상의 여성과 사랑에 빠지는 남자를 연기했죠. 물론 실제로도 그럴 수 있습니다...
이것은 배경이 아름답고 카메라가 움직이지 않는 아주 긴 영상입니다.
긴 영상들은 보통 시간이 지남에 따라 품질이 떨어지는데, 왜냐하면 각 클립이 이전 클립의 실수를 복사하기 때문입니다.
제 방식은 다릅니다. 아무것도 이어지지 않습니다. 매 클립은 프롬프트, 세 장의 레퍼런스 사진, 그리고 오디오를 가지고 처음부터 시작합니다.
클립들이 만나는 유일한 지점은 연결 부위뿐입니다. 저는 이전 클립 39프레임을 새 클립으로 페이드아웃하고 노이즈를 추가한 다음 정리합니다. 작은 다리 같은 거죠!
이 영상의 시작 부분을 지금과 비교해 보세요. 모든 클립이 완전히 새로웠기 때문에, 블러(blur)가 의지할 것이 없습니다.
단점은 이 기술이 아무것도 움직이지 않을 때만 작동한다는 것입니다. 카메라가 동일하고, 방이 동일하며, 장소가 같아서 별도의 클립들이 이미 일치합니다.
만약 카메라가 움직였다면, 연결 부위는 맞지 않았을 겁니다. 정적인 샷(Static shots)에서만 가능합니다!
하지만 아마도 ControlNet이나 Context Motion, 또는 Depth Map 같은 것이 한 생성물에서 다음 생성물로 저하된 Latent를 전달하지 않으면서 프레임을 일관되게 유지할 수 있을지도 모릅니다.
실제 브래드:* 뭐 하는 거예요?
브래드:* 아, 안 돼...
실제 브래드:* 잠깐만요, 왜 저렇게 옷을 입고 있어요?
브래드:* 오 신이시여, 정말 잘생기셨네요.
실제 브래드:* 그 카메라 뭐예요... 멈춰! 이거 꺼요!
브래드:* 네, 손님! 죄송합니다!
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기