SAM 3를 이용한 반전 색상 마스크 기반 캐릭터 스왑 및 MiniMax H3 활용
요약
SAM 3와 반전 색상 마스크를 활용하여 캐릭터 스왑 워크플로우를 구현했습니다. 이 방법은 비디오 참조와 특정 캐릭터의 이미지를 결합하여, 기존 모델이 얼굴 정보를 잃는 문제를 개선하는 데 초점을 맞추고 있습니다.
핵심 포인트
- SAM 3와 반전 색상 마스크를 이용한 캐릭터 스왑 기법을 소개합니다.
- 비디오 참조 및 캐릭터 이미지를 결합하여 워크플로우를 구성했습니다.
- 기존 방식의 얼굴 정보 손실 문제를 해결하는 데 중점을 두었습니다.
저는 이 아이디어(https://www.reddit.com/r/comfyui/comments/1wvff4i/super_simple_minimax_character_swap_workflow/)를 따라 SAM 3를 사용하여 마스크를 생성했습니다: https://i.imgur.com/bUYkWk0.jpeg 그리고 ref2video 모델을 사용하면서, 이 마스킹된 비디오를 입력 참조로, 제 강아지의 참조 이미지(https://i.imgur.com/FNX4wsu.png)를 사용했습니다. 프롬프트는 대략 다음과 같습니다: https://i.imgur.com/JUTwJIm.png 여기에서도 몇 가지 가이드를 얻었습니다: https://patricksheedy.com/posts/minimax-h3-character-swap-part-2/ 다른 가이드도 흥미롭지만, 얼굴 정보를 모두 잃게 만드는 검은색 마스크를 생성합니다. 네거티브 색상이 훨씬 좋습니다. 제가 사용한 워크플로우는 다음과 같습니다: https://drive.google.com/file/d/1DK0n2fguT8O4JlgDTth1-JPy-R3bbY3N/view?usp=drive_link 이에는 Character Lora 노드가 있지만, 이번 흐름에서는 비활성화했습니다. /u/LordDarthShader가 제출함 [링크] [댓글]
AI 자동 생성 콘텐츠
본 콘텐츠는 r/StableDiffusion의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기