에이전트 실행 비용 (Agent Execution Tax): 브라우저 에이전트 벤치마크를 위한 새로운 조달 지표인가?

요약

WebVoyager 벤치마크를 통해 브라우저 에이전트의 '실행 비용(Agent Execution Tax)' 개념을 분석했습니다. 단순히 토큰당 가격이 아닌, 재시도와 낭비된 추론을 포함한 작업당 실제 비용이 모델 성능 평가의 핵심 지표임을 강조합니다.

핵심 포인트

• 토큰 가격보다 작업 성공당 비용이 더 중요한 지표임
• 오픈 웨이트 모델이 높은 신뢰성으로 Gemini와 대등한 성능 기록
• 재시도(retries) 발생 시 실제 운영 비용이 급격히 상승함
• GLM-5는 높은 정확도와 구조화된 데이터 처리 능력을 보여줌