
단일 이미지에서 깊이, 법선 벡터, 매팅 및 분할을 추출하는 새로운 방법 (Frozen text-to-image DiT 사용)
요약
본 논문은 단일 이미지로부터 깊이, 법선 벡터, 매팅, 분할 등 여러 정보를 동시에 추출하는 새로운 방법을 제안합니다. 이 방법은 고정된(frozen) 텍스트-이미지 DiT를 활용하며, 각 작업에 필요한 학습 가능한 파라미터가 매우 적다는 것이 특징입니다.
핵심 포인트
- 단일 이미지에서 다중 정보(깊이, 법선 등) 추출 가능
- 고정된 텍스트-이미지 DiT 사용으로 효율성 증대
- 각 작업당 최소한의 파라미터만 학습 필요
ReChannel
단일 이미지를 사용하여 깊이(depth), 법선 벡터(normals), 매팅(matting), 그리고 분할(segmentation)을 추출하는 새로운 방법을 제시합니다. 이는 고정된(frozen) 텍스트-이미지 DiT를 사용하며, 각 작업당 단 33K개의 학습 가능한 파라미터만 필요로 합니다.
논문:
https://paperswithcode.co/paper/2607.065
53
...
코드 및 사전 학습 모델:
https://huggingface.co/xmz111/ReChannel
AI 자동 생성 콘텐츠
본 콘텐츠는 X @huggingpapers (검증됨)의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기