Regenerate 2K와 MiniMax H3를 사용한 테스트: 14회 실행, 동일 시드. 디테일은 증가하지만 실제 인물에게는 결함이 생기거나
요약
본 기사는 Regenerate 2K와 MiniMax H3를 활용한 고해상도 비디오 리파이닝 워크플로우를 테스트하고 분석합니다. Refiner LoRA가 디테일을 크게 증가시키지만, 실제 인물의 경우 얼굴의 정체성 변화나 결함(예: 함몰된 부분)을 유발할 수 있다는 점을 발견했습니다. 따라서 현재로서는 일반 파이프라인으로 직접 2K를 렌더링하는 것이 가장 깨끗하고 얼굴 유지에 유리하다고 분석합니다.
핵심 포인트
- 디테일 증가는 스케줄(schedule)보다 Refiner LoRA에서 주로 발생함.
- 실제 인물의 경우, 일반 파이프라인으로 2K를 직접 렌더링하는 것이 얼굴 유지에 유리함.
- Refiner 사용 시, 얼굴의 정체성 변화나 구조적 결함이 나타날 수 있음.
- 풍경이나 빈 장면에는 디테일 추가가 유용할 수 있으나 인물에게는 주의 필요.
Regenerate 2K(더 정제된 LoRA에 고해상도 패스에서 더 강력한 re-noise가 추가됨)는 거친 초안을 깨끗한 2K 렌더로 변환하는 것을 약속합니다. 저는 실제로 무엇을 하는지 알아보기 위해 자체 GPU에서 한 번에 하나의 변경 사항으로 실행했습니다. 설정은 RTX 5090 32 GB, ComfyUI, MiniMax H3, 그리고 제가 가진 긴 비디오 노드를 사용했습니다. 제 뮤직비디오의 두 장면: 12초짜리 와이드 샷(1080p)과 5초짜리 클로즈업(124 프레임, 1080p 및 2K). 모든 실행에 동일한 시드를 사용했습니다. 선명도(Sharpness)는 Laplacian variance(3프레임 평균값)입니다. 후광(Halos)은 눈에 보이는 밝거나 어두운 테두리(rim)를 가진 가장자리 픽셀의 비율입니다.
라운드 1: 1080p 와이드 샷 (선명도 / 가장자리 후광)
- 일반 파이프라인 (0.8 시작): 7.5 / 13.6 %
- 공식 0.909 + refiner: 20.7 / 24.9 %, 하지만 전체 장면이 다시 그려집니다(구름 이동, 사람이 움직임).
- 커뮤니티 0.7 + refiner: 12.5 / 19.7 %
- refiner가 없는 0.7: 7.3 / 13.0 %
결론적으로 모든 추가 디테일은 refiner LoRA에서 나옵니다. 0.7 스케줄 자체는 아무것도 추가하지 않습니다.
라운드 2: 2K 클로즈업
- 2K 일반 파이프라인: 5:44, 깨끗하고 귀걸이가 정확하며 그녀의 모습과 같습니다.
- 0.7 + refiner 1.0: 5:44, 가장 많은 디테일(+60 % 얼굴 선명도), 하지만 턱 아래에 함몰된 부분이 있고, 귀에는 주름이 생겼으며, 귀걸이 모양이 바뀌었습니다.
- 0.7 + refiner 0.5: 더 가벼운 함몰된 부분, 여전히 존재함.
- 0.7, refiner 없음: 희미한 함몰된 부분, 추가 디테일 없음
제 분석: 0.7 시작값은 초안에서 작은 그림자를 유지하며, refiner가 이를 실제 구조물처럼 그려 넣습니다. 일반적인 0.8 시작값은 이들을 흐릿하게 만듭니다.
라운드 3: 공식 레시피 (768p 초안, 공식 3D upscaler)
- 0.909 + refiner: 5:08, 깨끗한 피부지만 얼굴이 더 얇고, 머리카락은 더 빨갛고, 참조 사진에 없는 파란색 보석 귀걸이를 가졌습니다.
- 0.7 (커뮤니티 제안): 5:00, 동일하게 새로운 얼굴, 모든 실행 중 가장 부드럽습니다.
신원 변화는 작은 초안에서 옵니다: 768p에서는 Regenerate가 시작되기 전에 이미 얼굴이 결정됩니다.
결론 (저의 사용 사례 기준)
- 실제 인물의 긴 비디오: 현재로서는 사용하지 않을 것입니다. 일반 파이프라인으로 직접 2K를 렌더링하는 것이 더 깨끗하고 얼굴을 유지합니다.
- 풍경 및 빈 장면: 다시 그려진 구름이나 바위가 중요하지 않으므로 시도해 볼 가치가 있습니다.
디테일은 스케줄(schedule)이 아니라 리파이너 LoRA에서 나옵니다. 그리고 작은 드래프트는 다른 얼굴을 의미합니다. 이것은 현재 버전일 뿐입니다. 더 좋은 리파이너가 나오면, 같은 테스트를 다시 실행할 것입니다. 실제 사람에게서 깨끗하고 동일한 정체성의 얼굴을 얻은 사람이 있나요? 어떤 설정을 사용했는지 궁금합니다. 첫 번째 댓글(바로 아래 게시물)에 나란히 비교되는 클립들로 구성된 전체 워크스루(8분, 영어 더빙 + 자막):
/u/ReferenceFluffy6159가 제출했습니다 [링크] [댓글]AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기