Artificial Analysis ArticlesMis à jour le

Présentation des modèles trusted-access dans l’Index Cyber d’analyse artificielle

Présentation des modèles trusted-access dans l’Index Cyber d’analyse artificielle GPT-6 Sol (Daybreak Blue) est maintenant en tête du Cyber Index L’Alliance du Indice Cyber d’Analyse Artificielle ra

Source de l’image · Artificial Analysis Articles

Présentation des modèles trusted-access dans l’Index Cyber d’analyse artificielle

GPT-6 Sol (Daybreak Blue) est maintenant en tête du Cyber Index

L’Alliance du Indice Cyber d’Analyse Artificielle rassemble des partenaires industriels afin d’évaluer le fonctionnement des modèles d’IA dans les tâches de défense cyber des entreprises. L’Indice a été lancé avec uniquement des modèles accessibles au public, offrant aux utilisateurs une meilleure indication des capacités disponibles publiquement en matière de défense cyber agentique. Maintenant, nous élargissons le classement pour inclure des modèles disposant de moins de contraintes cyber, offrant ainsi une vue plus complète des capacités cyber des modèles innovants. Le premier d’entre eux est GPT-6 Sol (Daybreak Blue, max), qui n’est accessible que via le programme Daybreak d’OpenAI.

GPT-6 Sol (Daybreak Blue, max) mène maintenant l’Index et se trouve sur la frontière Pareto entre coût et capacité. Il ne rencontre aucun blocage de sécurité au sein de l’ensemble de l’Index, et son score global a augmenté de 32 points par rapport au GPT-6 Sol (max) disponible publiquement.

À un coût par tâche de 1,77 $, il est plus économique que les autres modèles leaders, y compris le Grok 4,7 (xhigh), qui coûte 11,67 $ par tâche

Par rapport au GPT-6 Sol disponible au public, le modèle Daybreak Blue offre les plus grands gains sur CyberGym-E2E, qui est la référence utilisée pour observer les plus grandes refus de sécurité.

Nous continuerons à développer l’Index Cyber de l’analyse artificielle pour couvrir à la fois les modèles disponibles publiquement et ceux ayant accès fiable.

Pour les résultats d’évaluation complets, veuillez consulter ici : https://artificialanalysis.ai/evaluations/artificial-analysis-cyber-index

Source originale

Artificial Analysis Articles

À propos du contenu

La publication originale et les droits appartiennent à la source.

Traduction automatique · Consultez l’original