다중 뷰 일관성 이미지 생성을 위한 자기 일관성 기하학 주입

요약

기존 확산 모델의 다중 뷰 생성은 기하학 예측 오류에 취약하다는 한계가 있었습니다. 본 논문은 자기 일관성 기하학 게이트(SCG)와 신뢰도 인식 기하학 주입(RGI)을 포함하는 RGMV를 제안합니다. 이를 통해 여러 확률적 샘플의 공간적 일치도를 측정하여, 다중 뷰 생성 과정에서 기하학적 품질과 안정성을 크게 향상시킵니다.

핵심 포인트

• SCG는 서로 다른 샘플 간의 공간적 일치도를 측정하여 신뢰도 맵을 도출합니다.
• RGI 모듈은 이 신뢰도 맵을 이용해 기하학 조건부 잔차 주입 강도를 조절합니다.
• RGMV는 안정적인 영역에서는 강력한 안내를 유지하고, 불안정한 단서는 약화시킵니다.
• 다중 뷰 생성의 전반적인 기하학적 품질 향상을 입증했습니다.