Google DeepMind의 Gemini 4 Carbon이 Vals Index v2.2에서 2위를 차지하며 데뷔했습니다. 또한 Finance

원문 발행 2026. 10. 29. 02:03원문 언어 영어AI 한국어 번역X 토픽: Benchmark 원문 보기

요약

Google DeepMind의 Gemini 4 Carbon이 Vals Index v2.2에서 2위로 데뷔하며, Finance 및 Legal Research Benchmark에서는 최고 성능을 기록했습니다. 이 모델은 Argon 대비 더 많은 출처 인용과 긴 답변을 제공하는 등 높은 정확도를 보여주지만, 그 대가로 작업 속도가 느려지는 트레이드오프를 가집니다.

핵심 포인트

Vals Index v2.2에서 2위로 데뷔하며 강력한 성능을 입증했습니다.
Finance 및 Legal Research 분야에서 Argon보다 우수한 결과를 보였습니다.
Legal Research 시 더 많은 tool calls와 약 45% 더 많은 출처를 인용합니다.
높은 정확도를 추구하는 만큼, 작업당 소요 시간이 길어지는 경향이 있습니다.

Google DeepMind의 Gemini 4 Carbon이 Vals Index v2.2에서 2위로 데뷔했습니다.

또한 Finance Index와 저희 Legal Research Benchmark 모두에서 1위를 기록했습니다.

Carbon은 EMB에서 2위, Tax Agent에서는 3위를 차지하며 이 두 영역 모두에서 Argon을 능가했습니다.

Legal Research 분야에서는 Argon보다 더 많은 tool calls를 수행하고, 약 45% 더 많은 출처(sources)를 인용하며, 더 긴 답변을 작성합니다.

Carbon의 철저함은 속도를 희생하는 결과를 가져옵니다. Finance Agent와 Tax Agent 작업은 Argon보다 두 배 이상 오래 걸리며, Legal Research는 작업당 50분이 넘게 소요됩니다. 그럼에도 불구하고 EMB와 Terminal-Bench 4에서는 더 빠르고 정확하며, Vals Index에서도 여전히

Carbon은 Argon보다 64% 더 많은 출력 토큰(output tokens)을 생성하지만, 그 증가는 Finance Agent, Tax, Legal Research에 집중되어 있습니다. EMB, Terminal-Bench 4, Harvey에서는 비슷한 수준이거나 적게 사용합니다.

추가적인 출력이 있음에도 불구하고, Carbon은 출력량이 절반 이하입니다.

이 모델은 1M의 context window와 1M의 최대 출력 토큰을 가지며 멀티모달(multimodal)입니다. 저희는 Google의 기본 제공자 설정(temperature=1, top-p 및 top-k=기본값, 높은 추론 노력)으로 테스트를 진행했습니다.

@GoogleDeepMind에 축하드립니다. 전체 결과는 [URL]에서 확인하세요.

AI 자동 생성 콘텐츠

원문 바로가기

Google DeepMind의 Gemini 4 Carbon이 Vals Index v2.2에서 2위를 차지하며 데뷔했습니다. 또한 Finance

요약

핵심 포인트

댓글