Stable Signer V3: 4D 변형 프리미티브 스플래팅이 요구하는 모든 것

원문 발행 2026. 10. 18. 09:28원문 언어 영어AI 한국어 번역arXiv cs.GR (Graphics) 원문 보기

요약

Stable Signer V3는 4D 변형 프리미티브 스플래팅 기반의 고해상도 수어 아바타 시스템입니다. 이 시스템은 기존 아바타가 가졌던 표정 제한, 신체 변형 부정확성, 외관 디테일 손실 문제를 해결했습니다. 공유 얼굴 및 테스트 시간 신체/터널링 모듈을 통해 사용자별 정밀한 표현과 고해상도 재구축이 가능합니다.

핵심 포인트

4D 변형 프리미티브 스플래팅 기반의 수어 아바타 시스템 제시
표정 제한, 신체 변형 부정확성 등 기존 한계점 해결
테스트 시간 모듈을 통해 사용자별 고해상도 디테일 복구 및 최적화
얼굴 기하학 오류 71.4% 감소, 신체 경계 오류 35.1% 감소 달성

우리는 4D 변형 프리미티브 스플래팅(Deformable Primitive Splatting)을 기반으로 구축된 인터랙티브 고해상도 수어 아바타 시스템인 Stable Signer V3를 소개합니다. 이 시스템은 기존 아바타의 세 가지 한계점, 즉 제한적인 표정 표현, 부정확한 신체 변형(identity-specific body deformation), 그리고 미세한 외관 디테일 손실 문제를 해결합니다. 공유 얼굴 프리미티브 스플래팅(Shared Face Primitive Splatting)은 풍부한 표현 제어를 위해 전이 가능한 슈퍼쿼드릭 프리미티브(superquadric primitives)를 추가하며, 테스트 시간 신체 프리미티브 스플래팅(Test-Time Body Primitive Splatting)은 보다 충실한 움직임을 위해 신원 특정형 가상 근육 레이어(identity-specific virtual muscle layer)를 학습합니다. 또한, 테스트 시간 터널링 초해상도(Test-Time Tunneling Super-Resolution)는 TunnelingNet을 사용하여 신원 특정형 고해상도 디테일을 복구합니다. 이 두 가지 테스트 시간 모듈은 각 수어 사용자(signer)의 신원에 대해 한 번 최적화되며, 추론 과정은 저장된 신원 매개변수만으로 완전히 실행됩니다. 이를 통해 얼굴 기하학 오류를 71.4% 감소시키고, 10가지 신원을 거쳐 신체 경계 오류를 35.1% 줄였으며, 홀드아웃 평가에서 고해상도 RGB 재구축 오류를 24.2% 낮추면서도 인터랙티브 스트리밍을 유지합니다.

AI 자동 생성 콘텐츠

원문 바로가기

Stable Signer V3: 4D 변형 프리미티브 스플래팅이 요구하는 모든 것

요약

핵심 포인트

댓글