Artificial Analysis · X

v1.1 有什么新内容

Artificial Analysis发布Music Arenas v1.1,新增1,000条提示(每个基准500条),覆盖17种曲风,测试歌曲结构、情绪、配器或演唱风格。评分仅来自招募评审团的盲投,公开竞技场投票不计入,排行榜基于超过37,000票盲测人类偏好。在AA-Music-Vocal v1.1中不提供歌词,因此衡量的是模型端到端创作歌曲的能力。

v1.1 有什么新内容:

➤ 我们为音乐竞技场引入了一套全新的提示词集,包含 1,000 条提示词(每个基准 500 条),精心策划并均衡分布于 17 种音乐类型,从古典乐和爵士与蓝调到 EDM、金属和雷鬼。

➤ 每条提示词测试歌曲结构、情绪、配器或演唱风格,采用更长、更复杂的提示词,以反映当今的提示词使用行为和前沿音乐模型的新兴能力。

➤ 仅限评审团投票:评分完全来自我们招募的评审团的盲投票。公开竞技场的投票不计入评分。

我们更新的排行榜将在超过 37,000 张盲测人类偏好投票的基础上发布:AA-Music-Vocal v1.1 上超过 16,000 张,AA-Music-Instrumental v1.1 上超过 21,000 张,每个上榜模型都获得超过 2,000 张投票。在 AA-Music-Vocal v1.1 上我们不提供歌词,因此该基准衡量每个模型的端到端歌曲创作能力。

原始出处

Artificial Analysis · X

内容说明

原始发布及相关权利归来源方。

机器翻译 · 请以原文为准