실험실과 매장 간의 격차 해소: 리테일 휴머노이드를 위한 데이터 효율적 사후 학습 및 경험 기반 학습 VLA 프레임워크
요약
리테일 환경에서 휴머노이드 로봇의 성능 격차를 줄이기 위한 DEED 프레임워크를 제안합니다. 데이터 효율적 사후 학습과 경험 기반 정교화 기술을 통해 실험실 환경을 넘어 실제 매장 운영이 가능한 VLA 시스템을 구축하는 방법을 다룹니다.
핵심 포인트
- DEED 프레임워크를 통한 VLA 휴머노이드의 실환경 적응력 향상
- 데이터 큐레이션 및 제어 주파수 정렬을 통한 효율적 사후 학습
- 경험 기반 정교화(RECAP 변형)를 통한 실제 환경 연구 수행
- 단일 GPU 미세 조정만으로도 유능한 실제 환경 시스템 구축 가능
벤치마크 성능과 신뢰할 수 있는 실제 환경 운영 사이의 격차를 줄이는 것은 실행 오류, 분포 변화(distribution shifts), 환경적 가변성을 처리해야 하는 시각-언어-행동 (Vision-Language-Action, VLA) 휴머노이드 로봇의 핵심 과제로 남아 있습니다. 본 논문은 Unitree G1-Edu 휴머노이드 로봇과 GR00T N1.6 파운데이션 모델 (foundation model)을 사용하여 슈퍼마켓 칩 재입고 작업에서 평가된 시스템 수준의 접근 방식인 DEED (Data-Efficient Post-Training and Experience-Driven Learning)를 제시합니다. DEED는 세 가지 핵심 구성 요소로 이루어져 있습니다: (1) 제어 주파수 정렬 (control-frequency alignment), 데이터 큐레이션 (data curation), 작업 관련 시각적 강조 (task-relevant visual highlighting), 그리고 VLA 의존성 감소를 포함하는 데이터 효율적 사후 학습 (post-training) 파이프라인; (2) 텍스트 기반 이점 접두사 (text-based advantage prefix)와 시각-언어 가치 함수 (vision-language value function)를 통해 RECAP에서 변형된 경험 기반 정교화 (experience-driven refinement)에 대한 실제 환경 연구; (3) 분포 내 (in-distribution) 및 분포 외 (out-of-distribution) 동작을 연구하기 위한 잠재 공간 (latent-space) 분석 도구입니다. 우리의 결과는 실험실과 매장 간의 격차를 해소하는 것이 아키텍처의 문제라기보다는 주로 시스템 통합의 과제임을 시사합니다. 즉, 세심한 데이터 설계와 타겟팅된 사후 학습을 통해 단 하나의 GPU만을 사용하여 단순한 미세 조정 (fine-tuning) 하에서 실패하는 정책을 유능한 실제 환경 시스템으로 변모시킬 수 있습니다.
AI 자동 생성 콘텐츠
본 콘텐츠는 arXiv cs.AI의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.
원문 바로가기