Liquid AI发布了d1-ultra,在Artificial Analysis Decision Index v1.0上占据第1的位置,其支持因素包括幻觉的减少
d1-ultra是@liquidai推出的新决策模型,紧随其本月早些时候发布的d1。其价格为每1M输入token 0.042美元,而d1为每1M输入token 0.02美元。与d1一样,d1-ultra仅按输入token计费。
要点:
➤ d1-ultra以65分在Artificial Analysis Decision Index v1.0上领先:d1-ultra得分为65,领先于最近发布的Jev 1.14(57分)以及GLiDE和Microsoft-Decision-1(均为54分)
➤ d1-ultra的65分得益于其在AA-Omniscience-Decision上低得多的幻觉率:d1-ultra在AA-Omniscience-Decision上的非幻觉率为85%,相比d1的2%大幅提升。非幻觉率是指在未被正确回答的问题中模型选择"我不知道"的比例,用于衡量决策模型判断自身知识、知道何时不作答的能力。虽然d1-ultra的幻觉率下降,其准确率(正确回答的问题百分比)也随之下降。其准确率为32%,比d1(41%)下降了9个点
➤ d1-ultra在所有决策模型中拥有第三低的每任务耗时:d1-ultra的每任务耗时为92 ms,是所测决策模型中第三低的,落后于每任务78 ms的Jev 1.14和每任务63 ms的Celeris-1 Decision
➤ d1-ultra的定价与其他决策模型相当,为每1M任务32美元:以每1M任务32美元计,d1-ultra与Celeris-1 Decision(每1M任务32美元)和Microsoft-Decision-1(每1M任务31美元)定价相当,是d1和Mercury Decide(每1M任务15美元)价格的两倍多,但不到GPT-6 Luna (Decisions)(每1M任务79美元)价格的一半

