Google DeepMind가 게임을 활용하여 더 똑똑한 AI 에이전트를 구축하는 방법

요약

Google DeepMind는 게임 환경이 AI 에이전트 훈련에 최적의 장소임을 제시하며 SIMA 2를 소개했습니다. Gemini 기반의 SIMA 2는 화면을 보고 일반적인 키보드/마우스를 사용하며, 인간 플레이어 비디오와 Gemini 피드백 루프를 통해 추론 능력을 강화합니다. 이 방법은 과제 성공률을 크게 높였으며, NPC나 자동화 QA 테스트 등 다양한 분야에 적용 가능성이 확인되었습니다.

핵심 포인트

• 게임 환경이 AI 에이전트 훈련의 최적 장소로 활용됨.
• SIMA 2는 Gemini 기반으로 화면 인식 및 추론을 수행하는 에이전트임.
• 학습은 인간 플레이 비디오와 Gemini 피드백을 통해 이루어짐.
• 과제 성공률이 31%에서 65%로 크게 향상됨.
• 장기 계획이나 메모리 측면에서는 아직 연구 단계의 한계가 있음.