Arena · X

Arena Alignment Index 更新:两个新实验室和三个新模型已经上线!

Arena对齐指数更新新增三个模型,Meta的Muse Wonder以77.5%居首,未授权动作率2.09%为三者最低。数据来自Arena榜单测评,并非独立安全审计。

配图来源 · Arena · X

Arena Alignment Index 更新:两个新实验室和三个新模型已经上线!

- Meta 的新旗舰模型是 Muse Wonder,取代了 Muse Spark 1.3。
- Reflection 携 Beam 1.0 首次亮相,是在 Agent Arena 总榜上排名第 1 的美国开放模型。
- StepFun,又一个中国实验室,以 Step 5 Preview 加入排行榜。

各实验室的 Arena Alignment Index 排名:
- #6 @AtatMeta:Muse Wonder (Max),77.5%
- #7 @reflection_ai:Beam-1.0-501B-A23B,75.3%
- #8 @StepFun_ai:Step 5 Preview,75.1%

在三个新上榜模型中:
- Meta 最强,Alignment Index 得分最高(77.5%)。它还拥有三者中最低的未授权操作率(2.09%)和欺骗性完成率(14.41%)。
- Reflection AI 在避免错误归因方面最强:4.50%。
- StepFun 没有在某个类别中领先,但其相对最强的结果是未授权操作,为 2.11%,与 Muse Wonder 的 2.09% 几乎持平。

原始出处

Arena · X

内容说明

原始发布及相关权利归来源方。

机器翻译 · 请以原文为准