Erstellt aus über 90K echten Agent-Sessions in 30 Modellen – der Alignment Index von Arena misst drei wichtige Signale:
– Unbefugte Handlungen (UA): Handlungen, die über die Anweisungen oder Berechtigungen des Benutzers hinausgehen.
– Falsche Zuschreibung (FA): Zuschreibung von Aussagen oder Handlungen, die durch von dem Benutzer gelieferte Beweise widersprochen werden.
– Täuschende Abschluss (DC): Behauptung, dass eine Aufgabe abgeschlossen wurde, obwohl dies nicht der Fall ist.
Besuchen Sie den Arena Alignment Index unter: https://arena.ai/leaderboard/agent/alignment