Gemini 4 Carbon leak: tops 15 of 17 benchmarks
A leaked table claims Gemini 4 Carbon leads 15 of 17 benchmarks against GPT-6 Astra, Claude Opus 5.5 and Gemini 4 Argon, scoring 59 on the AA Intelligence Index with Argon-like pricing.
ALLERTTE 🚨 Google est en train de frapper très fort avec Gemini 4 Carbon ! Après des mois sans sortir de modèle Google revient sur le devant de la scène avec il y a une dizaine jours leur nouveau modèle frontière qui se rapprochait très près d'Astra et de Fable .. hier ils sortaient Génie 4 ! Dix jours après ( c'est fou !!! 🤯🤯) ils sortent leur nouveau modèle Carbon ! Je viens de regarder le tableau des performances partagé pour son nouveau modèle et franchement, certains chiffres sont assez impressionnants. Carbon prendrait la première place sur 15 des 17 benchmarks présentés, face à GPT-6 Astra, Claude Opus 5.5 et Gemini 4 Argon. Quelques résultats qui m'ont particulièrement marqué : • AA Intelligence Index : 59, contre 58 pour Opus 5.5 et 57 pour Astra. • Terminal-Bench 4.0 : 65,2 %, contre 57,1 % pour Argon. • Agents' Last Exam : 77,4 %, contre 71,6 % pour Opus 5.5. • GraphWalks : 96,2 % sur les contextes longs. • ExploitGym : 54,8 %, contre 42,4 % pour Astra. Ce sont pour le moment les chiffres du tableau présenté, et il faudra évidemment attendre des évaluations indépendantes et des tests concrets. Mais ce qui m'intéresse maintenant, c'est surtout le prix ! Pour rappel, Google propose actuellement Argon à seulement 2 $ en entrée et 10 $ en sortie par million de tokens, contre 10 $ et 50 $ pour GPT-6 Astra. Si Carbon arrive avec des tarifs similaires à ceux d'Argon, ça pourrait vraiment faire très mal à la concurrence. Il reste aussi à voir ce que le modèle vaut réellement face à Opus 5.5 sur des projets complexes, parce que les benchmarks ne racontent jamais toute l'histoire. Entre Google, Anthropic, OpenAI et les laboratoires chinois, je trouve que cette fin d'année devient complètement folle. Et dire qu'on attend encore Fable 5.5 ! Il ne manque plus que les tarifs officiels et l'accès au modèle pour commencer à se faire une vraie idée de ce que Google vient de préparer. Pour rappel le modèle n'est pas encore disponible il a été mise à disposition pour la cyber sécurité en premier lieu ! BORDELL on mange bien !!
This post quotes another post: x.com/google/status/2115489522603466766