궤적 제어형 인간 동작 생성을 위한 다중 조건 조정

요약

본 논문은 텍스트 설명과 공간적 궤적이라는 두 가지 조건을 모두 활용하여 현실적인 인간 동작을 생성하는 '궤적 제어형 인간 동작 생성' 문제를 다룹니다. 기존 방법들이 겪던 조건 충돌 및 표현 불일치 문제를 해결하기 위해, 연구진은 분할 정복(divide-and-conquer) 전략 기반의 CMC 프레임워크를 제안했습니다. CMC는 궤적 유도 하에 단순화된 동작을 생성하는 단계와, 이를 바탕으로 전신 동작을 완성하는 두 개의 직렬 단계로 구성되어 높은 제어 정확도와 동작 품질을 달성합니다.

핵심 포인트

• CMC(Conditioned Motion Control) 프레임워크는 텍스트 및 공간적 궤적 조건을 효과적으로 조정하여 인간 동작을 생성한다.
• 제안된 CMC는 분할 정복(divide-and-conquer) 패러다임을 따르며, 궤적 제어와 동작 완성의 두 직렬 단계로 구성된다.
• 첫 번째 단계에서는 확산 모델이 주어진 궤적 기반의 단순화된 관절 표현을 생성하여 안정적인 궤적 추종을 보장한다.
• 두 번째 단계는 텍스트 조건부 확산 인페인팅을 통해 전신 동작을 완성하며, 과적합 방지를 위해 Selective Inpainting Mechanism (SIM)을 도입했다.