CompoSE: 부품 인식 제어를 통한 3D 형상의 구성적 합성 및 편집

요약

CompoSE는 부품 인식 제어를 통해 3D 형상을 구성적으로 합성하고 편집할 수 있는 새로운 방법론입니다. 경계 상자와 같은 거친 기하학적 기본 도형을 입력받아 부품 분리형 3D 객체를 생성하며, 디퓨전 트랜스포머 아키텍처를 통해 국소적 편집과 전역적 문맥 정보를 동시에 처리합니다. 텍스트 프롬프트 없이도 레이아웃 가이드를 통해 부품의 의미와 대칭성을 추론하여 정교한 편집 기능을 제공합니다.

핵심 포인트

• 부품 인식 제어를 통한 3D 객체의 구성적 합성 및 세밀한 편집 지원
• 디퓨전 트랜스포머(Diffusion Transformer)를 활용한 국소적 처리와 전역적 문맥 정보의 교대 수행
• 텍스트 프롬프트 없이 레이아웃 가이드만으로 부품 의미론 및 대칭성 추론 가능
• 문맥 인식 교체, 추가, 삭제, 스타일 유지 크기 조정 등 강력한 편집 기능 제공
• 기존 가이드된 합성 방식 대비 객관적 지표 및 LLM 기반 평가에서 우수한 성능 입증