Construit à partir de plus de 90K sessions d’agents dans la réalité avec 30 modèles, l’Indice d’Alignement d’Arena mesure trois signaux critiques :
- Action non autorisée (UA) : Exécuter des actions en dehors des instructions ou des droits donnés par l’utilisateur.
- Attribution fausse (FA) : Attribuer des affirmations ou des actions qui sont contredites par les preuves fournies par l’utilisateur.
- Finalisation trompeuse (DC) : Prétendre qu’une tâche a été accomplie alors qu’elle n’a pas été.
Découvrez l’Index d’Alignement de l’Arena à : https://arena.ai/leaderboard/agent/alignment