Artificial Analysis · X

Liquid AI发布了d1-ultra,在Artificial Analysis Decision Index v1.0上占据第1的位置,其支持因素包括幻觉的减少…

Liquid AI发布d1-ultra,以65分居Decision Index v1.0首位,非幻觉率从2%升至85%,但准确率降至32%。定价每1M输入令牌$0.042,仅按输入计费。

配图来源 · Artificial Analysis · X

Liquid AI发布了d1-ultra,在Artificial Analysis Decision Index v1.0上占据第1的位置,其支持因素包括幻觉的减少

d1-ultra是@liquidai推出的新决策模型,紧随其本月早些时候发布的d1。其价格为每1M输入token 0.042美元,而d1为每1M输入token 0.02美元。与d1一样,d1-ultra仅按输入token计费。

要点:

➤ d1-ultra以65分在Artificial Analysis Decision Index v1.0上领先:d1-ultra得分为65,领先于最近发布的Jev 1.14(57分)以及GLiDE和Microsoft-Decision-1(均为54分)

➤ d1-ultra的65分得益于其在AA-Omniscience-Decision上低得多的幻觉率:d1-ultra在AA-Omniscience-Decision上的非幻觉率为85%,相比d1的2%大幅提升。非幻觉率是指在未被正确回答的问题中模型选择"我不知道"的比例,用于衡量决策模型判断自身知识、知道何时不作答的能力。虽然d1-ultra的幻觉率下降,其准确率(正确回答的问题百分比)也随之下降。其准确率为32%,比d1(41%)下降了9个点

➤ d1-ultra在所有决策模型中拥有第三低的每任务耗时:d1-ultra的每任务耗时为92 ms,是所测决策模型中第三低的,落后于每任务78 ms的Jev 1.14和每任务63 ms的Celeris-1 Decision

➤ d1-ultra的定价与其他决策模型相当,为每1M任务32美元:以每1M任务32美元计,d1-ultra与Celeris-1 Decision(每1M任务32美元)和Microsoft-Decision-1(每1M任务31美元)定价相当,是d1和Mercury Decide(每1M任务15美元)价格的两倍多,但不到GPT-6 Luna (Decisions)(每1M任务79美元)价格的一半

原始出处

Artificial Analysis · X

内容说明

原始发布及相关权利归来源方。

机器翻译 · 请以原文为准