Artificial Analysis Articles更新日

AA-3Dの発表:インタラクティブな3D体験を構築するAIモデル向けベンチマーク

詳細なシーンはより多くの票を獲得し、より強力なモデルがそれを構築する 各タスクで最も詳細度の高い5分の1のシーンは、スクリーンショットのサイズが2倍(84 KBに対して168 KB)で、空の要素が3分の1(60%に対して22%)である。これらは投票の63%を獲得し、最も詳細度の低い5分の1は31%にとどまる。モデルのEloだけでも61%と33%を予測できるため、詳細なシーンは主に stronger

詳細なシーンはより多くの票を獲得し、より強力なモデルがそれを構築する

各タスクで最も詳細度の高い5分の1のシーンは、スクリーンショットのサイズが2倍(84 KBに対して168 KB)で、空の要素が3分の1(60%に対して22%)である。これらは投票の63%を獲得し、最も詳細度の低い5分の1は31%にとどまる。モデルのEloだけでも61%と33%を予測できるため、詳細なシーンは主に stronger モデルが生成している。これらのデータからは、詳細性がそれらのモデルの強さの一因であるかどうかは分からない。同一モデル内では、その効果は小さい: モデルの他のシーンより標準偏差1つ分だけ詳細なシーンは、約1.5ポイント多く票を獲得する(詳細度の測定方法に応じて1.3から1.8)。86のシーン測定項目のうち、補正を通過したのは11項目である: 詳細度の測定値、レンダリング解像度とアンチエイリアシング、フレームあたりのGPU時間、およびページ要素数である。どの項目も投票を4ポイント以上動かすことはなかった。

AA-3D シーンの詳細度別獲得票数

モデルのEloが予測する割合に対する実際の獲得票の割合 · データは2026年10月12日時点各タスク内で詳細度順にランク付けされたシーン

詳細度は4つのスクリーンショット測定値を組み合わせたもので、定義はWhat Detail Measuresを参照。同一モデル・同一タスク内では、標準偏差1つ分多い詳細度で1.5ポイント増加する(p = 0.001、q = 0.011)。1,008シーン(投票ページで動作しない23シーンを除外)。

原文の出典

Artificial Analysis Articles

内容について

原文の公開と権利は出典元に帰属します。

機械翻訳 · 原文をご参照ください