코딩 에이전트가 완전한 게임을 제작할 수 있을까?

요약

Tencent와 CUHK 연구진이 Godot 엔진 기반의 게임 제작 태스크를 평가하는 벤치마크인 GameCraft-Bench를 발표했습니다. 최첨단 코딩 에이전트들도 41.46%의 낮은 성능을 보여, 완전한 게임 생성 기술의 한계를 확인했습니다.

핵심 포인트

• 140개의 Godot 태스크를 포함하는 GameCraft-Bench 벤치마크 공개
• 최첨단 에이전트들의 게임 제작 성능이 41.46%에 불과함
• 엔드 투 엔드 게임 생성 기술의 발전 필요성 증명