코딩 에이전트를 활용한 ARC-AGI-3 실행 가능한 월드 모델 평가

요약

본 기술 기사는 코딩 에이전트 시스템을 사용하여 ARC-AGI-3 게임에 대한 실현 가능한 월드 모델 평가 결과를 보고합니다. 이 시스템은 이전 관찰을 검증하고, MDL 기반 단순성 편향의 대안으로 추상화하여 계획을 세우는 방식으로 작동합니다. 25개의 공개 게임 테스트 결과, 에이전트는 7개 게임을 완전히 해결했으며, 평균적으로 상대적 인간 행동 효율성(RHAE)은 32.58%를 기록하며 유망한 초기 성능을 보여주었습니다.

핵심 포인트

• 코딩 에이전트 시스템을 활용하여 ARC-AGI-3 게임에 대한 월드 모델 평가를 수행했습니다.
• 시스템은 스크립트 컨트롤러, 표준화된 인터페이스 등을 사용하여 게임 특이적 로직 없이 일반적인 접근 방식을 유지합니다.
• 25개 공개 게임 테스트에서 에이전트는 7개의 게임을 완전히 해결하는 성과를 보였습니다.
• 평균 상대적 인간 행동 효율성(RHAE)은 32.58%로, ARC-AGI-3의 일반적인 기준선으로 활용될 수 있음을 시사합니다.