v1.1 の新機能:
➤ Music Arenas に、まったく新しいプロンプトセットを導入します。1,000 件のプロンプト(ベンチマークごとに 500 件)で構成され、クラシックやジャズ & ブルースから EDM、メタル、レゲエまで、17 ジャンルにわたって厳選・バランス調整されています。
➤ 各プロンプトは、曲の構造、ムード、楽器編成、ボーカルスタイルをテストするもので、今日のプロンプトの使い方や最先端音楽モデルの新たな能力を反映した、より長く複雑なプロンプトになっています。
➤ パネル投票のみ:レーティングは、募集した評価者パネルによるブラインド投票のみから算出されます。公開 Arena の投票はレーティングに反映されません。
更新されたリーダーボードは、37,000 件を超えるブラインドの人間の選好投票とともに公開されます:AA-Music-Vocal v1.1 では 16,000 件超、AA-Music-Instrumental v1.1 では 21,000 件超で、ランク入りしたすべてのモデルに 2,000 件を超える投票が含まれます。AA-Music-Vocal v1.1 では歌詞を提供しないため、このベンチマークは各モデルのエンドツーエンドの作詞作曲能力を測定します。