VioLA: 인간 데이터로부터 범용 휴머노이드 제어 정책 학습

요약

VioLA는 휴머노이드에게 범용적인 동작 정책을 학습시키기 위해 개발된 모델입니다. 이 모델은 관절 명령 대신 몸과 손의 잠재값(latents)을 예측하여, 인간 시연 데이터를 직접 활용할 수 있게 합니다. 이를 통해 작업별 파인튜닝 없이도 실제 로봇에서 높은 성공률로 보행 및 조작 작업을 수행하는 것이 가능합니다.

핵심 포인트

• 관절 명령 대신 몸/손의 잠재값(latents)을 예측하여 범용성을 확보했습니다.
• 인간 녹화 데이터를 정책 액션 공간으로 직접 활용할 수 있습니다.
• 작업별 파인튜닝 없이도 제로샷(zero-shot)으로 높은 성공률을 달성합니다.
• 보행 및 조작 작업 모두에서 뛰어난 성능을 입증했습니다.