IT之家 10月10日の報道によると、Cloudflareは昨日(10月9日)に、オープンウェイト決定モデルClef-omniを発表し、一度のAPI呼び出しでテキスト、画像、音声、ビデオなどを処理できるようにする。

位置情報に関しては、このモデルは以前のClefシリーズモデルの基盤の上に構築されており、多様な入力形式へのサポートが拡張され、モデルの重みはHugging Faceで公開されています。
多モーメント対応については、以前のClefはテキストや画像、動画から抽出された連続画面(動画を時間ごとに静止画に分割し、これらの画像を順番にモデルに入力する)をサポートしていたが、Clef-omniでは音声と完全な動画入力が追加され、wav、mp3、mp4、webm形式をサポートしている。
Cloudflareによると、開発者は別途音声転写や音声・映像の分割処理を構築する必要はなく、1つのモデルで多様な入力を処理できるという。
Cloudflareによると、Clef-omniはQwen3-Omni-30B-A3B-Instructを基に構築されており、主要な理解能力を保持しているという。このモデルは構造化された意思決定タスクに特化しており、通常のテキスト出力を生成することはない。会社が公表したテストでは、純粋なテキストのリクエストに対する応答時間は約130ミリ秒、画像については約150ミリ秒であり、音声付きの21秒間のビデオの評価には約1.5秒かかった。
| ベーステスト | クレフ・オムニ | クレフ | クレフ・フラッシュ | ジェヴ |
|---|---|---|---|---|
| BFCL:正確な一致率 | 98.2 | 98.47 | 98.76 | 95.75 |
| ToolRet:nDCG@10 | 66.6 | 69.19 | 66.43 | 65.28 |
| API-Bank:正確率 | 92.7 | 91.93 | 93.11 | 88.19 |
| 家電製品:正確な一致率 | 69.3 | 82.95 | 97.73 | 52.27 |
| When2Call:正確率 | 63.3 | 72.37 | 65.58 | 80.97 |
| BANKING77:宏平均 F1 | 94.8 | 94.20 | 90.93 | 79.74 |
| CLINC150+OOS:宏平均 F1 | 97.7 | 97.43 | 66.77 | 89.27 |
| BRIGHT:nDCG@10 | 42.0 | 45.91 | 39.26 | 47.52 |
| Amazon ESCI:マクロ平均 F1 | 57.8 | 57.48 | 57.39 | 55.21 |
| PhishNChips:正確率 | 73.2 | 79.60 | 75.05 | 62.55 |
Cloudflare は、Clef-flash の百万トークンあたりの価格を0.09ドル(IT之家注:現在の為替レートで約0.6元)から0.038ドル(現在の為替レートで約0.25元)に下げ、約58%の減少となりました。Clef-flashのホスティング版のコンテキストウィンドウ同期は64kから24kに縮小されました。
| モデル | 価格を入力する | 価格を出力する |
|---|---|---|
| クレフ・フラッシュ | 百万トークンあたり 0.038ドル(現在の為替レートで約 0.25元) | 百万トークンあたり 0.12ドル(現在の為替レートで約0.8人民元) |
| クレフ | 百万トークンあたり 0.24ドル(現在の為替レートで約1.6元) | 百万トークンあたり 0.72ドル(現在の為替レートで約4.8元) |
| クレフ・オムニ | 百万トークンあたり 0.15米ドル(現在の為替レートで約1人民元) | 百万トークンあたり 0.60ドル(現在の為替レートで約4元) |
