NormalCrafter를 사용한 비디오의 표면 법선 맵 추정
요약
ComfyUI 노드를 활용하여 NormalCrafter 모델로 비디오의 표면 법선 맵을 추정하는 워크플로우를 구현했습니다. 이 기능은 3D 재구성, 리라이팅, 리텍스처링 등 다양한 영상 편집 작업에 유용합니다. 또한, 잔여 깜빡임을 줄이는 시간 안정화기 후처리 노드를 추가하여 완성도를 높였습니다.
핵심 포인트
- NormalCrafter를 이용해 비디오 법선 맵을 추정하는 워크플로우 구현
- 3D 재구성, 리라이팅 등 영상 편집에 활용 가능
- 시간 안정화기 노드로 깜빡임 감소 및 움직임 유지
- ComfyUI 기반으로 빠른 처리 속도와 접근성 확보
저는 ComfyUI 노드를 몇 개 설계하여 NormalCrafter 모델을 사용하여 비디오를 표면 법선 맵(surface normals-map)으로 변환하는 기능을 구현했습니다. 이는 3D 재구성, 리라이팅(relighting), 리텍스처링(retexturing), 비디오 편집 및 H3 Minimax와 Seedance에서의 비디오 참조에 매우 유용합니다. 저는 또한 Normal 시간 안정화기(temporal stabilizer)를 포함했는데, 이 보완적인 후처리 노드는 광학 흐름(optical flow)을 소스 비디오에서 사용하여 실제 움직임과 기하학적 변화를 유지하면서 잔여 깜빡임을 줄여줍니다. 처리 속도가 빠르며 토스터에서도 실행 가능합니다 (청크 단위로 디코딩 포함). 노드 및 워크플로우: github ComfyUI-VizClick-NormalCrafter 모델 가중치: Huggingface NormalCrafter 논문: NormalCrafter: Learning Temporally Consistent Normals from Video Diffusion Priors /u/listopalafoto 제출 [링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기