GOOGLE이 기존 모델과 똑같이 똑똑하면서도 2배 더 빠르고 18% 더 저렴한 모델을 출시했습니다.

동일한 점수. 이전 모델과 동일한 50점을 기록했습니다.

Reddit에서는 이를 실패라고 부르고 있습니다. 잘못된 판단입니다.

작업 시간은 2.7분에서 1.3분으로 단축되었습니다. 작업당 비용은 18% 감소했습니다.

지능은 동일하지만, 대기 시간은 절반으로 줄었고, 비용은 더 적게 듭니다.

여기서 주목해야 할 부분이 있습니다.

에이전트형 지식 노동 벤치마크 (agentic knowledge-work benchmark)에서 점수가 95포인트 상승했습니다. 이 수치는 종합 점수 (composite score)에는 영향을 주지 않습니다.

이 지표는 추론 (reasoning) 능력을 측정합니다. 모델이 무너지지 않고 긴 단계의 과정을 완료할 수 있는지 여부를 측정하는 것이 아닙니다.

모두가 여전히 모델이 얼마나 똑똑하게 들리는지로 순위를 매기고 있습니다.

이제 중요한 것은 모델이 무너지기 전까지 얼마나 많은 단계를 완료할 수 있느냐입니다.
[IMG:1]