Nous lançons AA-Music-Vocal v1.1 et AA-Music-Instrumental v1.1, les nouveaux benchmarks derrière l'Artificial Analysis Music Arena, construits sur 1,000 nouveaux prompts couvrant 17 genres et notés par notre panel d'évaluateurs recrutés.
Au cours des 3 derniers mois, les sorties de modèles phares comme Suno v6, Lyria 3.5, Mureka V9.5, Eleven Music v2.5 et MiniMax Music 3.0 ont établi de nouvelles références de qualité dans la génération musicale par IA. Les modèles écrivent désormais des chansons complètes à partir d'un simple prompt texte, produisant des paroles complexes, des voix convaincantes, des arrangements sophistiqués et une instrumentation authentique pour le genre. À mesure que la qualité augmente, les différences entre les modèles deviennent plus subtiles, exigeant des évaluations meilleures et plus nuancées pour nos classements AA-Music.
Premières observations issues des Artificial Analysis Music Leaderboards mis à jour :
➤ Suno v6 se classe #1 sur les deux benchmarks, 26 Elo devant Suno v6-mini sur Vocal et 31 Elo devant sur Instrumental. Suno occupe les deux premières places des deux classements.
➤ Mureka V9.5 se classe #3 sur Vocal, 51 Elo au-dessus de Mureka V9, le plus grand gain entre deux versions d'une même famille de modèles sur le classement Vocal.
➤ Mureka V9, Mureka V9.5, Lyria 3 Pro et Lyria 3.5 sont statistiquement à égalité de la #3 à la #6 place sur Instrumental, à moins de 5 Elo les uns des autres.
➤ MiniMax Music 3.0 est le modèle musical à poids ouverts le mieux classé, à la #11 place sur Vocal et la #13 place sur Instrumental. Stable Audio 3 Medium est à moins de 3 Elo de lui sur Instrumental.
Voir ci-dessous les nouveautés de la v1.1 et des exemples de morceaux des modèles leaders🧵