LongTakeNoCuts를 활용한 3분 분량의 비디오 제작 사례 연구

여러분 안녕하세요, 제 LongTakeNoCuts 노드와 워크어라운드를 기반으로 만든 또 다른 비디오입니다. https://github.com/xyzDist/H3-LongTakeNoCuts 영상: [

] 제 YT 채널: [https://www.youtube.com/@noiseflowAI]

• 네, 그녀는 한국어로 노래하고 있지만 일본에서 촬영되었습니다. 왜인지는 저도 모르겠습니다. 😂 세부 사항: 1개의 캐릭터 레퍼런스 이미지 + ref2va 워크플로우 하이브리드 모델 b20-49 주방 어텐션, 로라(lora) 없음, 스텝 10 입력 오디오, 약간의 재미있는 가사를 사용해 SUNO에서 노래를 생성했습니다. * 10초 클립으로 총 약 3분 길이, 0.7mp 해상도, 각 클립 생성 시간은 약 11분(기본 10 스텝 생성 + 정제 5 스텝 리샘플링)입니다. 저는 CapCut을 사용하여 포스트 프로덕션에서 클립들을 이어 붙였습니다. Davinci Resolve의 컬러 그레이드보다 훨씬 간단하고 쉽습니다. 다만, 대비를 너무 낮추는 경향이 있을 수 있습니다. 하지만 이번에는 약간의 수정(tweak)을 추가했습니다. 캐릭터 마스킹(character masking)을 사용해서 캐릭터 부분만 정제하도록 했기 때문에, 움직이는 샷에서는 배경은 정제하지 않아도 괜찮습니다. 만약 캐릭터를 정제하지 않으면 완전히 저하되지는 않겠지만, 표류하면서 보기 싫게 변할 수 있습니다. 몇 가지 문제점과 발견 사항: H3는 시드 노이즈(seed noise)가 이전 잠재 공간(latent)과 잘 블렌딩되지 않으면 게을러집니다. 제 경험상 10번 중 약 3번의 샷에서 연속적인 카메라 움직임 대신 급격한 컷(hard cut)을 하게 됩니다. 저는 단순히 시드를 다이스(dice)해서 고정해야 합니다. 가끔 모션 컨텍스트(motion-context) 때문에 밝기 깜빡임이 발생합니다. H3 ref2va 얼굴 부분이 왜 이렇게 대비가 강한지 알아내는 데 많은 시간을 썼습니다. 어두운 부분은 디테일 없이 순수한 검은색입니다. 만약 터보 로라(turbo lora)와 높은 스텝을 사용하면 훨씬 더 심할 것입니다..... 'fizgig H3 tweak' 노드가 있는데, 이를 사용하면 얼굴과 비디오가 더 부드러워질 수 있습니다. https://www.reddit.com/r/StableDiffusion/comments/1wpw247/comfyuifizgigh3tweaks/ 저는 기본 생성(base gen, 정제 샘플 아님)에만 사용했습니다. 세부 사항 및 대비 = -0.1 모드 = 프레임별 장면 변화 = 0.1 배경의 간판이나 일본어 등은 의미가 없고 여기저기 다른 오류들이 있습니다.

카메라가 팬 아웃(pan out)했다가 다시 팬 백(pan back)하는 배경 변경 이슈는 비디오에서 이미지를 추출하여 레퍼런스 이미지로 추가함으로써 해결했습니다. 예상보다 훨씬 잘 작동했고, 놀라울 정도로 간단했습니다. 업스케일 잠재 공간(upscale latent)도 할 수 있는데, 나중에 시도해 보겠습니다. 결론적으로, 품질 저하 없이 H3 장시간 비디오를 생성할 수 있으며, 문제는 해결되었습니다. 흥미로운 영화적/액션 장시간 원 샷을 무엇이든 만들 수 있습니다. 제출자: /u/xyzdist [링크] [댓글]