Cartesia Managed Agents在人工分析语音代理竞技场上的Elo评分为1115,比Cartesia之前的语音代理产品Cartesia Line高98分,任务成功率也从77.5%提升到了91.7%
Managed Agents 是 @CartesiaAI 的完全托管平台,用于构建和部署语音代理。这是一个级联系统:Cartesia 自有的 Ink Speech to Text 和 Sonic Text to Speech 模型在开发者选择的 LLM 上运行。我们使用 GPT-5.5 作为 LLM,并采用 Skylar 和 Daniel 的语音进行对 Cartesia Managed Agents 的评估。
关键要点:
➤ Speech Agent Arena:Cartesia 管理的智能体得分为 1115 分(95% 置信区间:1086-1144,共 685 个样本),比 Cartesia Line 的 1017 分高 98 分(95% 置信区间:985-1049)
➤ 代理任务:对于需要工具调用的任务,Cartesia 管理代理的 Elo 分数为 1112
➤ 任务完成率:91.7%的符合条件的工具调用对话以正确的最终任务完成工具调用结束
恭喜 @CartesiaAI 团队!
请查看下方获取更多细节 ⬇️