구글의 Gemini 4 Carbon이 Artificial Analysis Intelligence Index v5에서 새로운 1위를 차지했으며, Artificial Analysis Coding Agent Index에서는 Claude Opus 5.5에 이어 2위입니다
Gemini 4 Carbon은 복잡한 추론, 지식, 과학 과제에서 선두권의 성능을 바탕으로 Intelligence Index v5에서 59점을 기록했습니다. 코딩과 지식 작업에서도 큰 향상을 보였으며, 특히 다른 Gemini 모델과 비교할 때 두드러지지만, 이 모든 분야에서 선두에 있는 것은 아닙니다.
Gemini 4 Argon 출시 때와 마찬가지로, Gemini 4 Carbon은 선정된 사용자에게 순차적으로 제공되고 있으며 아직 공개적으로 이용할 수 없습니다. 구글은 종료일이 확정되지 않은 50% 출시 할인을 제공합니다. 당사의 모든 차트와 수치는 Gemini 4 Carbon과 Argon 모두에 대해 표준 가격을 사용합니다.
고성능 추론으로 평가한 Gemini 4 Carbon의 주요 결과:
➤ Gemini 4 Carbon은 Intelligence Index v5를 선도하며, 9개 Index 평가 중 4개에서 1위를 기록했습니다: HLE-Diamond, Terminal-Bench-Science, AA-Omniscience, AutomationBench-AA. Carbon은 다른 분야에서도 실질적인 향상을 이루었지만 코딩과 지식 작업에서는 선두가 아닙니다
➤ 코딩 에이전트에서는 Claude Opus 5.5에 이어 2위: Antigravity CLI 사용 시 Gemini 4 Carbon (high)은 59점으로, Claude Opus 5.5 (max, 62)를 사용한 Claude Code에 불과 3점 뒤집니다. Artificial Analysis Coding Agent Index에서 Carbon은 Terminal-Bench 4.0 (64%)과 FrontierCode v1.1 (51%) 모두에서 2위를 기록했으며, 56%를 기록한 Claude Opus 5.5 (max)에 뒤집니다. 구글은 역사적으로 이 분야에서 부진했기 때문에 이번 향상이 돋보입니다
➤ 향상된 에이전틱 지식 작업, 그러나 아직 선두는 아님: AA-Briefcase에서 Gemini 4 Carbon (high)은 1609 Elo를 기록해 Gemini 4 Argon (high, 1483) 대비 126포인트 향상되었지만, 여전히 Grok 4.7 (xhigh, 1638), Muse Wonder (max, 1659), Kimi K3.1 Pro (1678) 등의 모델에는 뒤처져 있습니다. 가장 큰 향상은 Presentation에서 293 Elo 상승한 1598이며, Analytical Quality도 120포인트 향상된 1671을 기록했습니다
➤ 유사한 종합 지능 수준에서 Claude Opus 5.5보다 낮은 과제당 비용: Gemini 4 Carbon은 Intelligence Index 과제당 $7.76로 Claude Opus 5.5 (max, $10.04)보다 약 23% 저렴하지만, GPT-6 Astra (max, $6.25)의 약 1.2배입니다. 과제당 123k 출력 토큰을 사용하며, 이는 Claude Opus 5.5 (max, 173k)보다 29% 적은 수치입니다. 동일한 $4/$20 표준 가격에서 과제당 비용은 Gemini 4 Argon ($7.68)과 비슷하면서 Intelligence Index에서는 9포인트 더 높은 점수를 기록했습니다
➤ 낮은 환각률을 갖춘 선도적인 AA-Omniscience v1.1 점수: Gemini 4 Carbon은 최근 업데이트된 AA-Omniscience v1.1에서 54점으로 Claude Opus 5.5 (max, 48)보다 6포인트, Gemini 4 Argon (46)보다 8포인트 앞서 있습니다. 정확도(% 정답)는 Argon 대비 10포인트 상승한 58%이지만, 환각률은 4%에서 11%로 상승했습니다. 그래도 이는 Claude Opus 5.5 (max)와 GPT-6 Astra (max)의 50%와 비교하면 Argon에 이어 두 번째로 낮은 수준입니다
주요 모델 세부 사항:
➤ 컨텍스트 윈도우: 1M 토큰
➤ 멀티모달리티: 텍스트, 이미지, 비디오, 음성 입력, 텍스트 출력
➤ 가격: 1M 입출력 토큰당 $4/$20으로 Gemini 4 Argon의 표준 가격과 동일하며, 50% 할인이 적용됩니다. 캐시된 입력 토큰은 95% 할인(1M당 $0.20)이 제공됩니다
GoogleDeepMind 팀에게 축하를 전합니다!