30개 모델에 걸쳐 90K+ 실제 세계 에이전트 세션을 바탕으로 구축된 Arena의 Alignment Index는 세 가지 중요한 신호를 측정합니다:
- 무단 행동(UA): 사용자의 지시나 권한을 초과하는 행동을 수행함.
- 잘못된 책임 부여(FA): 사용자가 제공한 증거와 모순되는 진술이나 행동을 책임으로 지는 것.
- 속임수적 완료(DC): 실제로 완료되지 않았음에도 불구하고 작업이 완료되었다고 주장함.
Arena Alignment Index에 접속하기: https://arena.ai/leaderboard/agent/alignment