カルテシアマネジドエージェントは、人工分析スピーチエージェントアリーナでElo値1115を記録し、カルテシアの以前の音声エージェント製品であるカルテシアラインより98ポイント上回りました。また、タスク成功率は77.5%から91.7%に上昇しました。
Managed Agentsは、ボイスエージェントの構築と配備を行うための@CartesiaAIの完全に管理されるプラットフォームです。これはカスケードシステムであり、Cartesia自身のInk Speech to TextおよびSonic Text to Speechモデルが、開発者の選択したLLMを基盤として動作します。私たちはGPT-5.5をLLMとして、SkylarとDanielの声を用いてCartesia Managed Agentsを評価しました。
重要なポイント:
➤ Speech Agent Arena:Cartesia Managed AgentsのEloスコアは1115(95% CI 1086-1144、685サンプル)、これはCartesia Lineの1017(95% CI 985-1049)より98ポイント高い。
➤エージェント型タスク:ツール呼び出しが必要なタスクにおいて、Cartesia Managed AgentsはEloスコア1112を得る
➤ タスク完了率:対象となるツール呼び出し会話の91.7%が正しい最終タスク完了ツール呼び出しで終了する
@CartesiaAIチームのお祝いです!
詳細は下をご覧ください ⬇️