X요약2026. 11. 14. 18:37

인공 분석 코딩 에이전트 지수 v2.1 발표: FrontierCode 및 Terminal-Bench 업그레이드, Claude Fable 대표 이미지

인공 분석 코딩 에이전트 지수 v2.1 발표: FrontierCode 및 Terminal-Bench 업그레이드, Claude Fable

원문 발행 2026. 11. 14. 09:04원문 언어 영어AI 한국어 번역X 토픽: OpenAI/GPT/Codex 원문 보기

요약

코딩 에이전트 지수(Coding Agent Index) v2.1이 발표되었으며, FrontierCode 2.0과 Terminal-Bench 4.1로 업그레이드되었습니다. 이 새로운 지수에서 Claude Fable 5.2와 Claude Opus 5.5가 공동으로 최고 점수를 기록했습니다. 다만, 버전 업그레이드로 인해 모델들의 평균 점수가 전반적으로 하락하는 경향을 보였습니다.

핵심 포인트

Index v2.1은 FrontierCode-AA 2.0 및 Terminal-Bench 4.1로 대폭 업그레이드됨.
Claude Fable 5.2와 Claude Opus 5.5가 공동으로 최고 점수를 기록하며 선두를 차지함.
새로운 지수 버전 도입으로 인해 모델들의 평균 점수가 전반적으로 하락하는 경향을 보임.
작업당 비용 차이가 최대 30배까지 발생하여 효율성 측면의 검토가 필요함.

AI 자동 생성 콘텐츠

본 콘텐츠는 X 토픽: OpenAI/GPT/Codex의 원문을 AI가 자동으로 요약·번역·분석한 것입니다. 원 저작권은 원저작자에게 있으며, 정확한 내용은 반드시 원문을 확인해 주세요.

원문 바로가기

0

댓글

0

코딩 에이전트 지수(Coding Agent Index)는 에이전트 하네스(agent harnesses) 내에서 모델을 측정합니다. Index의 v2.1은 FrontierCode를 1.1에서 2.0으로, Terminal-Bench를 4.0에서 4.1로 업그레이드했습니다.

업그레이드된 항목:

➤ FrontierCode-AA 2.0 (FrontierCode v1.1 대체): Cognition의 FrontierCode 2.0을 구현한 것으로, 레포지토리 유지보수자가 에이전트의 변경 사항을 병합할지 여부를 기준으로 평가하는 132개의 실제 코딩 작업으로 구성되어 있습니다.

➤ Terminal-Bench 4.1 (Terminal-Bench 4.0 대체): 동일한 66개 작업을 사용하며, 신뢰성 향상 및 보상 해킹(reward hacking) 저항성을 개선한 업데이트된 검증기(verifiers)로 점수화되었습니다.

지수에 유지되는 항목: SWE-Atlas-QnA-AA

주요 결과:

➤ Claude Fable 5.2와 Claude Opus 5.5가 58점으로 공동 선두를 차지했습니다. Claude Fable 5.2는 Claude Code에서 xhigh와 high 모두 58점을 기록했습니다. Claude Opus 5.5 (최대 점수)는 Claude Code에서 58점을, 그리고 Cognition의 multi-model harness인 Devin Fusion CLI에서는 GPT-6 Luna High와 결합하여 58점을 기록했습니다. Claude Fable 5.2 (최대 점수)는 시도 중 더 많은 부분이 작업 시간 제한에 걸리면서 56점을 기록했습니다. 그 뒤를 이어 Claude Sonnet 5.5 (최대 점수, 56점)가 Claude Code에서, 그리고 Gemini 4 Carbon (high, 55점)이 Antigravity CLI에서 뒤따릅니다.

➤ v2.1로 인해 Index 점수가 낮아졌으며, 이는 FrontierCode-AA 2.0 업그레이드에 기인합니다: 모델들은 평균적으로 5점씩 낮은 점수를 기록했습니다. Codex with GPT-6.1 Terra (최대 점수)만이 버전 간 하락하지 않은 유일한 구성으로, 이전 점수 대비 1점 이내를 유지했습니다.

➤ 작업당 비용은 48점 이상을 받은 구성에 따라 약 30배까지 차이가 납니다: Codex with GPT-6.1 Sol (최대 점수, 52점)의 경우 $1.51에서부터 Claude Code with Claude Fable 5.2 (최대 점수, 56점)의 $44.22에 이르기까지입니다.