Kimi K3.1 Pro entre à la 4e place de l'Artificial Analysis Intelligence Index avec un score de 55, réalisant de grands progrès en performances agentiques ; il sera le modèle open-weights de référence une fois ses poids publiés
Le nouveau modèle de raisonnement de @Kimi_Moonshot gagne 11 points par rapport à Kimi K3 (max, 44). Il n'est devancé que par Claude Opus 5.5 (max with fallback, 58), Claude Sonnet 5.5 (max with fallback, 56) et Muse Wonder Full (max, 56) sur l'Intelligence Index.
Une fois les poids de K3.1 Pro publiés, il sera le modèle open weights au score le plus élevé et l'écart entre les meilleurs modèles open weights et propriétaires sur l'Intelligence Index se réduira de 12 points à 3.
Résultats clés :
➤ Grands progrès en performances agentiques : Kimi K3.1 Pro se classe 3e sur GDPval-AA avec 1,846 Elo, en hausse de 312 Elo par rapport à Kimi K3, derrière seulement Claude Opus 5.5 (1,866 Elo) et Muse Wonder Full (1,857 Elo). Kimi K3.1 Pro obtient également le score le plus élevé de tous les modèles sur Terminal-Bench 4.0. K3.1 Pro obtient 67%, contre 13% pour Kimi K3 et devant Claude Sonnet 5.5 (64%). AutomationBench-AA, qui teste les workflows SaaS agentiques, passe de 58% à 73%.
➤ Les progrès sur les autres évaluations sont plus modérés : Humanity's Last Exam passe de 47% à 52%, CritPt de 23% à 25%, et SciCode de 59% à 61%. L'AA-Omniscience Index passe de 20 à 30, le taux d'hallucination baissant de 53% à 44% et la précision augmentant de 48% à 51%.
➤ Coût par tâche à peu près égal à celui de Kimi K3 à 1,98 $ par tâche : K3.1 Pro utilise 55K tokens de sortie par tâche de l'Intelligence Index, soit 14% de plus que Kimi K3 à 48K, tandis que ses prix de tokens first-party sont 33% plus bas.
Détails supplémentaires sur le modèle :
➤ Fenêtre de contexte : 1M tokens.
➤ Taille : 2.8T au total, 104B paramètres actifs
➤ Modalités d'entrée : texte et image
➤ Poids et licence : poids actuellement non publiés, Moonshot devrait publier les poids peu après le lancement
➤ Tarification : 2 $/10 $/0,20 $ par 1M tokens d'entrée/sortie/cache hit, soit 33% moins cher que Kimi K3 sur les trois tarifs.
Félicitations à l'équipe de @Kimi_Moonshot pour cette sortie !