AI音乐的评价体系迎来一次方法论升级。评测机构Artificial Analysis近日发布改版后的人声与器乐两份音乐榜单,用更长的提示词、纯人工盲评与更大票量重塑计分体系,发布即带来超过3.7万票。改版后的格局耐人寻味:榜首依旧熟悉,但梯队之间的差距小到了必须用统计口径才能区分的程度。
改版的核心是挤掉旧体系的水分。新基准共准备1000条全新提示词,人声与器乐各500条,横跨从古典到金属的17个流派,提示词长度与复杂度都较旧版明显提升,专门考察模型对长描述与多层要求的服从度。计分规则也有两处关键变化:一是全部票数只来自招募评审团的盲投,此前公共竞技场的开放式投票不再计入,减少了刷票与审美偏差的干扰;二是人声榜要求模型自行创作歌词,把作词能力一并纳入考核。
方法论升级背后是旧指标的失灵。此前的自动指标难以捕捉音乐连贯性与情感表达这类主观维度,而混入公共投票后,粉丝拉票与模型名称暗示都会污染结果。纯盲评加评审团的方式在图像与文本领域已被验证,这次移植到音乐领域,等于给行业立了一把更硬的尺子:从此评价一首AI生成的歌,先遮住名字,再谈好坏。
对普通听众,这套新榜也提供了实用的使用姿势:把它当作歌单发现的入口,而不是唯一真理。榜单反映的是评审团在盲听场景下的平均偏好,具体到个人, vocal 的咬字、编曲的密度、混音的风格偏好都可能让你更喜欢榜单上排名靠后的模型。建议的做法是挑出榜单前几名,用自己最常听的两三个流派各生成几首对比,十分钟就能建立自己的主观榜单。
数字上,Suno v6以1142的Elo分位居人声榜第一,自家的轻量版以1116分紧随其后,两者26分的差距按标准换算约为54%对46%的胜率,领先存在但谈不上碾压。器乐榜的情况更胶着,Suno v6以1140分领跑之后,Mureka两代模型与谷歌Lyria的两款产品挤在1076到1081的窄小区间里,官方直接将其标注为统计意义上的并列,也就是说第三到第六名的排序在误差范围内可以互换。
另有两个容易被忽略的细节:器乐榜上Eleven Music的新版本分数反而低于旧版,版本迭代并不必然带来听感提升;而边际误差约为14到15分,意味着5分以内的差距接近抛硬币。对使用者来说,榜单前几名在纯听感维度已接近同档,选择依据需要从分数转向别的维度。
值得注意的是榜单对厂商行为的反向塑造。当评分规则明确要求自写歌词与长提示词服从,各家的训练重点会随之调整,过去被忽视的歌词创作质量、复杂指令遵循会获得更多资源倾斜。评测方法在事实上充当着行业的指挥棒,这也是为什么每次基准改版都会引来厂商的密切关注,榜单上的名次起落背后,是真金白银的研发投入再分配。
本榜最大的国产亮点来自昆仑万维旗下的Mureka。其V9.5版本较前代暴涨约51个Elo分,冲到人声榜第三位,仅次于Suno的两款模型,且与第二名轻量版仅差13分,处在同一统计置信区间的边缘。器乐榜上Mureka V9.5同样站进并列梯队,与谷歌旗舰产品互有胜负。
把视角放宽到开源阵营,MiniMax Music 3.0以第11名成为开源权重模型中最好的成绩,稳定音频系列的开源版本在器乐榜仅比它低2分。开源与闭源的差距从断崖收窄到贴身,意味着对数据隐私敏感或需要私有化部署的团队,自托管方案已经具备了实际可用的质量底线。国产模型在榜单上的集体上探,也说明音乐生成这个细分赛道的竞争门槛,正在被追赶者快速拉平。
国产模型在音乐生成上的持续上探,背后是中文语境的独特壁垒。中文歌词的咬字归韵、方言与语感的处理,通用英文榜单无法反映,却是国内用户最敏感的体验差异。能在中文场景做到自然流畅的模型,天然拥有本土市场的基本盘,再以此为跳板提升多语言能力,是一条被验证过的追赶路径。Mureka此次在以英文为主的评审体系里挤进前三,含金量正在于此。
对真正要用AI音乐干活的人,榜单之外的因素权重更高。商用权利方面,各家条款差异极大:有的平台免费档曲目仅限个人使用,付费档才有商业授权且设月度下载上限;有的要求作品带署名;有的直接把政治宣传与宗教组织列入禁用场景。开源模型的社区许可也有营收门槛,超过规定营收规模的企业需要另行申请书面授权,商用前把条款读清楚,比纠结两分的Elo差距重要得多。
价格同样是决策变量。公开渠道显示,各家按曲计费的单价已经拉开明显梯度,从几美分到十几美分不等,订阅制与按量制的适配场景也不同:高频出曲的工作室适合订阅,偶发需求的创作者按量更划算。综合来看,这份新榜单给出的最大启示是:AI音乐的听感军备赛已进入平台期,下一阶段的分化将在商用条款透明度、编辑能力、 stems 导出与价格策略上展开,谁先把生产级的完整链条跑通,谁就能把榜单优势兑现成市场份额。
还有一个趋势值得留意:音乐生成正在从单曲工具走向工作流平台。灵感的捕捉、小样的迭代、分轨的导出、与专业软件的衔接,创作链条上每一环的体验都在被重新打磨。榜单衡量的是单次生成的质量,而产品竞争的终局在于整条链路的顺滑程度,这也是新进入者仍有机会的方向。