Mistral AI가 물리적 AI(physical AI) 영역을 위한 첫 번째 모델인 Robostral Navigate를 출시했습니다. 이러한 움직임은 파운데이션 모델(foundation models)에 명확한 방향성을 제시합니다: 순수하게 디지털 영역을 벗어나 복잡하고 실제적인 환경에서 작동하는 로봇으로 나아가는 것입니다. 핵심 시사점은 자율 주행을 위한 하드웨어 요구 사항이 단순해지고 있다는 것이며, 이 모델은 단일 RGB 카메라와 언어 프롬프트(language prompts)에만 의존합니다.

Robostral Navigate란 무엇인가?

Robostral Navigate는 로봇 내비게이션을 위해 특별히 설계된 80억 개 매개변수(8-billion-parameter) 모델입니다. 이 모델은 로봇이 자연어 지침(natural-language instructions)을 사용하여 생소한 실내 공간을 이동할 수 있도록 합니다. 중요한 기술적 세부 사항은 복잡하고 값비싼 LiDAR나 깊이 카메라(depth cameras) 같은 센서가 필요하지 않고, 단일 표준 RGB 카메라에만 의존한다는 점입니다.

이 모델은 하드웨어에 구애받지 않습니다(hardware-agnostic). 즉, 바퀴형(wheeled), 다리형(legged), 비행 시스템을 포함한 다양한 유형의 로봇에 배포될 수 있습니다. 보고서에 따르면, 이 모델은 미지의 Room-to-Room Continuous Environment (R2R-CE) 벤치마크에서 76.6%의 성공률을 달성하며 다른 단일 카메라 방식보다 우수한 성능을 보였습니다. 전체 모델은 수천 개의 가상 장면(virtual scenes)에 걸쳐 약 40만 개의 내비게이션 궤적(navigation trajectories)을 사용하여 시뮬레이션 환경에서 훈련되었습니다.

빌더들에게 이것이 중요한 이유

가장 직접적인 함의는 더욱 비용 효율적인 로봇 공학 솔루션의 가능성입니다. 다중 센서 배열에 대한 의존성을 제거함으로써, 자율 로봇을 구축하고 배포하는 진입 장벽이 낮아집니다. 창고 물류부터 배송 드론까지 물리적 세계와 상호 작용하는 시스템을 개발하는 엔지니어들에게 이는 새로운 가능성을 열어줍니다.

훈련 방법론 또한 주목할 만합니다. Mistral은 LLM(대규모 언어 모델)을 다룬 경험을 활용하여, 초기 지도 학습(supervised training) 단계 이후 온라인 강화학습(online reinforcement learning)을 사용하여 모델의 성능을 향상시켰습니다. 이 기술은 모델이 시행착오를 통해 배우고 실패로부터 회복할 수 있게 해주며, 이는 예측 불가능한 환경에서 안정적인 작동에 매우 중요합니다.

작동 방식

이 시스템은 간단한 언어 프롬프트를 받아 단일 비디오 피드를 사용하여 이동(navigate)합니다. API와 구체적인 구현 세부 사항은 아직 공개되지 않았지만, 상호 작용은 간단할 것이라고 상상해 볼 수 있습니다. 빌더가 명령을 제공하고 모델이 저수준 경로 탐색(low-level pathfinding)을 처리하도록 할 수 있습니다.

# 로봇 전대를 출동시키기 위한 가상의 CLI 명령어

robot-fleet --robot-id 007 deploy \
...

Mistral은 내비게이션을 통합적이고 범용적인 체화 에이전트(embodied agent)를 향한 기초 단계로 설정했습니다. 이는 모델이 단순한 이동뿐만 아니라 조작 및 기타 더 복잡한 물리적 작업을 수행할 수 있는 미래를 시사합니다.

다음 계획

Mistral은 Robostral Navigate의 상업적 출시일이나 가격을 아직 발표하지 않았습니다. 회사는 로보틱스 팀을 적극적으로 확장하고 있으며, 이는 물리적 AI 공간에 대한 진지한 장기적 의지를 보여줍니다.

이번 출시는 Mistral을 Nvidia나 Google DeepMind와 같이 로보틱스에 막대한 투자를 하는 다른 주요 기업들과 직접 경쟁하게 만듭니다. AI 분야의 빌더들에게 이것은 최전선이 텍스트 및 이미지 생성을 넘어, 물리적 세계에서 지각하고 행동할 수 있는 체화 에이전트로 이동하고 있다는 명확한 신호입니다.

출처

출처

• https://mistral.ai/
• https://www.siliconrepublic.com/machines/mistral-ai-robotics-physical-ai-robostral-navigate
• https://www.infoworld.com/article/3716075/mistral-joins-rush-to-develop-ai-for-robots.html