HyperBones: Hypernetwork Conditioning을 이용한 실시간 뼈 기반 신경 의상 시뮬레이션

의상 시뮬레이션 (Garment simulation) 분야의 최근 발전은 고품질의 결과를 실시간 성능에 가깝게 구현해 왔습니다. 물리 기반 시뮬레이터 (Physics-based simulators)는 정확한 움직임을 생성할 수 있지만, 대화형 애플리케이션 (Interactive applications)에 사용하기에는 여전히 계산 비용이 너무 높습니다. 반면, 선형 블렌드 스키닝 (Linear blend skinning)은 효율적이지만, 헐렁한 의상의 복잡한 역학 (Dynamics)을 포착하지 못해 종종 비현실적인 움직임과 시각적 아티팩트 (Visual artifacts)를 초래합니다. 신경망 방식 (Neural methods)은 유망한 대안을 제시하지만, 엄격한 런타임 제약 조건 하에서 헐렁한 옷을 그럴듯하게 애니메이션화하는 데에는 여전히 어려움을 겪고 있습니다. 본 논문에서는 동적 의상 시뮬레이션 (Dynamic garment simulation)을 위한 빠르고 물리적으로 타당한 접근 방식을 제안합니다. 우리의 방법은 독립적인 거친 수준 (Coarse-level) 및 미세 수준 (Fine-level) 구성 요소로 이루어진 축소된 공간의 신경 역학 시뮬레이터 (Neural dynamics simulator)를 학습시킵니다. 거친 수준에서 의상은 경량 신경망 (Neural network)과 통합된 가상 뼈 (Virtual bones) 세트에 의해 구동됩니다. 그 후, 학습된 합성곱 신경 맵 (Convolutional neural map)을 사용하여 미세한 주름 디테일을 복원합니다. 개별 정체성 특화 계산 (Identity-specific computation)을 실시간 신경 통합 (Real-time neural integration)으로부터 분리함으로써, 우리의 아키텍처는 다양한 체형과 움직임을 지원하면서도 높은 성능을 유지합니다. 나아가 우리는 외부 시뮬레이터에 의존하지 않고도 정확한 결과를 가능하게 하는 효과적인 물리 감독 (Physics-supervision) 체계를 도입합니다. 실험 결과, 우리의 방법은 물리적으로 타당한 의상 역학을 생성하고, 다양한 움직임과 체형에 대해 일반화되며, 고정된 의상 세트를 지원함을 보여줍니다. 우리의 시뮬레이터는 일반적인 GPU에서 300+ FPS로 실행되어 실시간 애플리케이션에 적합합니다.