Google이 새롭게 출시한 Gemini 4 Hydrogen은 Claude Sonnet 5.5 및 GPT-6.1 Sol보다 약간 낮은 지능을 가지지만, Sonnet 비용의 3분의 1 수준이며 GPT-6.1 Sol 대비 약 2.5배 효율성을 자랑합니다.
@GoogleDeepMind는 6주 만에 세 번째 새로운 모델을 출시했습니다. Gemini 4 Hydrogen은 xhigh 추론 레벨을 도입했으며, Artificial Analysis Intelligence Index에서 54점을 기록했고 시각적 추론 및 환각 현상(non-hallucination) 방지 측면에서 강점을 보입니다. 이 점수는 Claude Sonnet 5.5 (최대치)와 GPT-6.1 Sol (최대치)보다 1점 낮으며, Sonnet 비용의 약 32% 수준이지만 GPT-6.1 Sol 대비 약 2.5배에 달하는 효율성을 가집니다. 높은 추론 능력을 바탕으로 Gemini 4 Hydrogen은 Task당 비용(Cost per Task) 기준으로 Gemini 4 Argon과 유사한 지능을 구현합니다 (약 19%).
주요 시사점:
➤ 새로운 xhigh 추론 레벨은 Intelligence Index에서 54점을 기록했습니다. xhigh는 Gemini 모델 중 high보다 높은 첫 번째 추론 레벨이며, Hydrogen을 Claude Sonnet 5.5 (최대치) 및 GPT-6.1 Sol (최대치)보다 1점 낮게 위치시키고, Gemini 4 Argon (high)보다는 4점 높습니다. 기본값(high) 추론 기준으로 Gemini 4 Hydrogen은 51점을 기록하여, GPT-6.1 Sol (xhigh, 52점) 및 Claude Opus 5.5 (high, 52점)에 근접합니다.
➤ 강력한 시각적 추론, 프레젠테이션 능력 및 환각 현상 방지: 장문 문서에 대한 시각적 추론 벤치마크인 GDP.pdf에서, Hydrogen은 중간 수준의 추론(medium reasoning)에서 33%의 전 항목 통과율을 기록하며 이 벤치마크에서 공동 1위를 차지했습니다. AA-Omniscience에서는 Hydrogen이 환각 현상률(hallucination rate)을 8%로 기록하여 가장 낮은 수치를 보였으며, 이는 Claude Sonnet 5.5 (최대치)의 43% 및 GPT-6.1 Sol (최대치)의 52%와 비교됩니다. AA-Briefcase라는 에이전트 지식 작업 평가(agentic knowledge work evaluation)에서, 심사위원들은 Hydrogen의 프레젠테이션 능력이 Carbon을 포함한 다른 Gemini 모델보다 우수하다고 평가했습니다.
➤ 에이전트 기반 터미널 작업(agentic terminal work) 성능: Hydrogen은 터미널 내의 에이전트 코딩 및 과학 연구 워크플로우를 다루는 Terminal-Bench 4.0에서 54%, Terminal-Bench-Science 0.1에서 50%를 기록했습니다. Claude Sonnet 5.5 (max)는 각각 64%와 53%를, GPT-6.1 Sol (max)은 56%와 58%를 기록했습니다. xhigh 추론 능력은 과학 작업에 도움을 주어 Terminal-Bench-Science 점수를 high에서의 41%에서 50%로 끌어올렸지만, Terminal-Bench 4.0에는 차이를 만들지 못했습니다(둘 다 54%). 과학 점수는 지구과학의 46%부터 물리과학의 53%까지 영역 전반에 걸쳐 고르게 나타납니다.
➤ 지능 대비 낮은 비용 및 xhigh에서의 높은 토큰 사용량: Hydrogen은 입력/출력 토큰 백만당 $1.50/$7.50으로 책정되었습니다. xhigh 레벨에서는 거의 동등한 지능에 대해 Claude Sonnet 5.5 (max)보다 작업당 약 32% 저렴하지만, GPT-6.1 Sol (max)보다는 약 2.5배 비쌉니다. xhigh는 Intelligence 점수를 3점 향상시키는 대신 output tokens를 high 대비 거의 두 배로 늘리며, Cost per Task는 xhigh에서 $3.16에서 high에서는 $1.87로 떨어집니다. Medium($0.80)과 low($0.29) 레벨은 다시 비용이 저렴하지만, Intelligence Index 점수는 각각 41점과 27점을 기록했습니다.
➤ 작업당 시간 대 지능 파레토 프론티어(Pareto frontier): Gemini 4 Hydrogen은 초당 약 200 output tokens의 출력 속도를 가집니다. high, medium, low 추론 노력 수준에서 Gemini 4 Hydrogen은 Time per Task vs. Intelligence 파레토 프론티어 상에 위치하며, 이는 더 지능적이면서도 작업당 시간이 짧은 모델이 없다는 것을 의미합니다.
주요 모델 세부 정보:
➤ Context Window: 1M tokens
➤ Multimodality: 텍스트, 이미지, 비디오 및 음성 입력 지원, 텍스트 출력
➤ 추론 노력(Reasoning efforts): Gemini 4 Hydrogen은 네 가지 추론 레벨(low, medium, high, xhigh)을 제공하며, xhigh는 이번 릴리스에서 새로 추가되었습니다.
➤ 가격 책정(Pricing): 입력/출력 토큰 백만당 $1.50/$7.50. 캐시된 입력 토큰은 95% 할인($0.075)을 받습니다.
@GoogleDeepMind 팀의 출시를 축하합니다!
