Wir starten AA-Music-Vocal v1.1 und AA-Music-Instrumental v1.1 – die neuen Benchmarks hinter der Artificial Analysis Music Arena. Diese Benchmarks basieren auf 1.000 neuen Prompts aus 17 Genres und wurden von unserem ausgewählten Bewertungspanel erstellt.
In den letzten 3 Monaten haben die Flaggsystem-Modelle wie Suno v6, Lyria 3.5, Mureka V9.5, Eleven Music v2.5 und MiniMax Music 3.0 neue Standards für die Qualität der AI-Musikgenerierung gesetzt. Die Modelle können nun vollständige Lieder aus einem einzigen Textvorschlag erstellen, wobei komplexe Texte, überzeugende Vocals, komplexe Arrangements und authentische Instrumentierung für das jeweilige Genre entstehen. Da die Qualität zunimmt, werden die Unterschiede zwischen den Modellen subtiler – es ist daher notwendig, bessere und feinere Bewertungen für unsere AA-Music-Platzierungen zu erhalten.
Anfängliche Erkenntnisse aus den aktualisierten Artifizielles Analyse-Musik-Leaderboards:
➤ Suno v6 erreicht auf beiden Benchmarks den 1. Platz, 26 Elo vor Suno v6-mini in Vocal und 31 Elo vor Suno v6-mini in Instrumental. Suno belegt die ersten beiden Plätze auf beiden Leaderboards.
➤ Mureka V9.5 belegt auf Vocal den 3. Platz, mit 51 Elo-Punkten über Mureka V9 – das ist der größte Unterschied zwischen zwei Versionen derselben Modellfamilie auf der Vocal-Tabelle.
➤ Mureka V9, Mureka V9.5, Lyria 3 Pro und Lyria 3.5 sind statistisch gleichauf auf den Plätzen 3 bis 6 in Instrumental und jeweils 5 Elo auseinander.
➤ MiniMax Music 3.0 ist das führende Open-Weights-Musikmodell und belegt den 11. Platz in der Vokal-Kategorie sowie den 13. Platz in der Instrumental-Kategorie. Stable Audio 3 Medium liegt auf der Instrumental-Spur nur 3 Elo hinter ihm.
Sehen Sie unten, was neu in v1.1 ist und Beispieltracks von führenden Modellen🧵