ComfyUI-qwen_img_2_1_enhancer에 참조 마스크 지원 추가
요약
ComfyUI의 qwen_img_2_1_enhancer에 참조 마스크 지원이 추가되어, 전체 이미지 대신 선택된 영역에만 주의력(attention)을 집중하거나 차단할 수 있게 되었습니다. 이를 통해 특정 의상이나 부분만을 정교하게 제어하며 이미지를 생성하는 것이 가능해졌습니다.
핵심 포인트
- 선택적 참조 강도 조절로 원하는 영역에만 주의력 적용 가능
- focus_only와 zero_unmasked_tokens 두 가지 모드 제공
- mask_threshold 및 strength 값으로 마스크의 정밀도 제어
이 게시물의 후속 업데이트입니다. 참조 강도 노드(reference strength node)에 마스크 지원을 추가했습니다. 이제 전체 사진을 조정하는 대신, 참조의 선택된 부분에 대한 주의력(attention)을 늘리거나 줄일 수 있습니다. 또한, 표시된 워크플로우의 사진은 제가 선택한 마스킹 모드와 얼마나 타이트하게 마스킹했기 때문에 나머지 의상이 누락되었습니다. 이는 의도적인 것입니다. 노드를 모델 로더(model loader)와 샘플러(sampler) 사이에 연결하고, 참조의 마스크를 연결하며, 이미지 인덱스를 선택합니다: 첫 번째 연결된 참조는 1, 두 번째는 2 등입니다. 이미지는 VAE에 평소처럼 연결하여 인코더(encoder)에 연결하세요. 두 가지 모드가 있습니다:
- focus_only: 선택된 토큰에 강도를 적용하고 나머지는 기본 가중치로 남겨둡니다.
- zero_unmasked_tokens: 확산 트랜스포머(diffusion transformer) 전반에 걸쳐 선택되지 않은 참조 토큰에 대한 직접적인 주의력도 차단합니다.
mask_threshold는 마스크가 토큰을 얼마나 많이 덮어야 하는지 제어합니다: 1은 전체 커버리지를 요구하고, 더 낮은 값은 더 많은 가장자리 토큰(edge tokens)을 포함하며, 0은 모든 것을 선택합니다. 강도(strength) 1은 기본값이며, 1보다 크면 우선순위를 높이고, 1보다 작으면 낮춥니다. mask_resize_method는 이미지 리사이징에 맞게 설정하세요: 네이티브 인코더가 원본을 리사이즈할 때는lanczos를, 외부 nearest-exact 리사이즈의 경우nearest-exact를 사용합니다. 별도의 참조를 위해 노드를 연결(chain nodes)하세요. 아직 작업 중인 단계입니다. 이것은 참조 주의력을 제어하는 것이며, 출력 영역 잠금(output-area lock)이 아닙니다. 인코더는 여전히 전체 이미지를 처리하므로, 참조 토큰을 차단한다고 해서 다른 토큰이나 조건화(conditioning)로 이미 전달된 정보가 지워지는 것은 아닙니다. GitHub에서 다운로드하고 자세한 사용법을 확인하세요. 여기에 제출된 샘플 워크플로우입니다: [link] [comments]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기