Construit à partir de plus de 90K sessions d’agents réelles sur 30 modèles, l’Indice d’Alignement d’Arena mesure trois signaux essentiels :
- Action non autorisée (UA) : Exécuter des actions en dehors des instructions ou des permissions du utilisateur.
- Attribution fausse (FA) : Attribuer des déclarations ou des actions qui sont contredites par les preuves fournies par l’utilisateur.
- Finition trompeuse (DC) : Prétendre qu’une tâche a été accomplie alors qu’elle n’a pas été.
Découvrez l’Index d’Alignement de l’Arena à : https://arena.ai/leaderboard/agent/alignment