“AI歌手”走红背后:谁在训练它?歌迷为何爱听?

19.05.2023  15:44

  熟悉AI音乐制作的玩家,多少听说过AIVA。这个由卢森堡AIVA Technologies公司创立并第一个获得国际认证的虚拟作曲家,在2016年诞生之后便炙手可热。一些音乐制作人发现了这位虚拟作曲家身上的优点:AIVA学习了不少音乐作品,从中又根据歌曲的音乐特征建立了网络模型,最后依靠模型来辅助音乐人生产出他们想要的曲子。

  AI音乐生成器也开始出现在更多普通用户的电脑桌面上。在经过AI变声、文字转歌曲等系列操作后,新的音乐作品被一键导出。于是,催idol(偶像)“营业”未果的歌迷们有了新的盼头——“AI歌手”登场了。歌迷根据自己的需求,让他们翻唱了不少经典金曲。而如今,“AI歌手”出歌速度更快,流量也不错。

网友上传的“AI孙燕姿”翻唱作品。网站截图

  制作者:声音素材越干净,推理出的音色越好听

  UP主英泰利(化名)在B站发布了36条视频。其中最火的一条是“AI孙燕姿”翻唱周杰伦的一首歌,播放点击量接近125万。有网友在该视频下评论,“2023年最火的华语歌手是AI孙燕姿。

  在没更新AI孙燕姿之前,她流量最大的一条视频是用Live Link Face(虚拟制片的实时面部动画软件)制作的游戏角色面部捕捉效果,有13.6万的播放量。

  目前,英泰利发布的视频以“AI孙燕姿”翻唱的歌曲为主。她在每条已经发布的视频下方会备注免责声明。上面写着:本作品仅作为娱乐目的发布,可能造成的后果与使用的音声转换项目的作者、贡献者无关,本视频使用AI合成技术,视频中演唱人声并非孙燕姿本人,如有侵权告知删除。

  “制作AI音乐,就是想听一听自己喜欢歌手演唱其他经典歌曲的感觉,二者碰撞会有不一样的效果。”英泰利在接受新京报记者采访时表示,“但现在AI换声还只能做到音色更换,歌曲的演唱其实没什么感情。

  她告诉记者,每一首用AI制作出来的歌,所花的时间都不一样,要看制作者的需要和用心程度。AI作曲降低了普罗大众创作音乐的门槛,但实际上,要完整打造出一首AI曲子,也不太简单。

  一位在B站教网友“训练AI歌手”的UP主莫晓(化名)说,核心技术源于So-VITS-SVC和RVC这些开源项目。

  据他介绍,下载好开源的声音类AI软件素材包,制作者先要对歌手的相关声音数据进行处理,再通过得到后的音频数据做成训练声学的模型,一般来说,训练时间越长效果越好。模型则是用来进行推理并完成替换,一些文字转语音后,还要用音频编辑软件进行后期合成。

  AI变声是制作“AI歌手”翻唱音乐整个流程的重要一环。莫晓提到,声音数据的素材很重要,歌手的声音、咬字、气息等素材越干净,推理出来的音色会越好听。

  今年三月份,创作歌手陈珊妮发布了自己的新歌《教我如何做你的爱人》。在此前接受新京报记者专访时,她表示,在这首歌中,每一个音每一个呼吸,包括所有和声都是全AI演唱。“演唱者”是她本人训练的AI模型,此外,单曲封面也由AI生成。在她看来,AI有没有情感在于听者认为它(AI制作的歌曲)有没有情感。

  莫晓认为,“作为一种辅助性的技术手段,用AI变声器这些软件训练声音,主要问题在于它无法感受和理解普通人的情感。这种方式只会通过大量训练歌曲来发现规律,模仿之后形成韵律,与本人真实的演唱肯定存在差别。

  歌迷:喜欢的歌被偶像的声音演绎,“体验感不错

  英泰利觉得,听AI音乐可能是出于对新事物的好奇,也可能是歌手的“粉丝”想要听歌手唱不同风格的歌曲。

  一周前,武汉的陈先生知道了“AI孙燕姿”。在上班挤地铁的路上,他用手机刷短视频,无意间刷到了孙燕姿翻唱别人歌的视频。他没仔细看,但作为孙燕姿的歌迷,听了几句之后,他就感觉有点怪。后来再看视频里的介绍,他才知道这个不是孙燕姿本人,是AI做的。

  “有区别,但总体感觉还可以。”陈先生说,“我看有人在视频里讲,因为孙燕姿的发音和咬字比较干脆,用AI技术训练出来的效果比较好,所以会被用作“AI歌手”,经常拿出来翻唱别人的歌。”

  陈先生并不介意这些被翻唱是由AI而非孙燕姿本人所唱。遇到自己喜欢的歌,能被自己偶像的声音演绎出来,还能免费观看和收听,他觉得“体验感不错”。

  他告诉记者,没太想过制作这些音乐的人是否会侵犯相关著作权、肖像权等。他认为,这些短视频平台一般都会有内容审核制度,能公开放出来的,还能“存活”这么久的,大概没什么问题。除非他们(AI音乐制作人)把制作出来的作品用于商用。

  不过,陈先生也有自己的担忧。“AI实在太强大了,我就很担心自己的偶像不出歌,然后网上都是AI版的她唱着别人的歌。所以,我在想,这会不会给创作歌手一些警醒,没有好的作品,可能会被AI版的自己所取代。

  除了火爆的“AI孙燕姿”外,在B站上,王心凌、王菲、Lana Del Rey(美国流行歌手)等人气较高的艺人,均有大量以其为原型的AI翻唱作品。不少听“AI歌手”翻唱的听众会欣然接受自己喜欢的艺人以AI形式来唱别人的歌。

  一位姚贝娜的“粉丝”在“AI孙燕姿”翻唱作品的视频下留言,“我是贝壳粉(姚贝娜粉丝的称呼),她去了天堂,我也挺希望有人能制作出AI姚贝娜,让歌迷再听听她翻唱的歌。

  音乐爱好者:AI音乐无法超越顶级艺术创作

  莫晓告诉记者,他们会根据评论留言制作新曲。绝大多数网友是想用自己偶像翻唱的歌来慰藉自己,即使不是偶像本人,但声音腔调差不多,也可以让歌迷得到满足。

  北京的音乐爱好者小周也是“AI歌手”的听众。他认为,AI在创造新鲜的音乐产品方面,给了大众惊喜。在早期,AI音乐创作仅局限于作曲,现在歌手的声音都能模拟和混合,制作成曲,感觉很有趣。

  “我们之所以说‘AI歌手’不像本人,一是说由人工智能打造的艺人,缺乏人的情感经历,不是真实的情绪表达。二是说我们自己没有完全了解人脑在进行艺术创作时的工作机制,AI技术目前也做不到。”在他看来,“AI歌手”以及由AI制作出的音乐,无法真正超越顶级艺术家和他们的作品。

  就读于武汉音乐学院录音艺术专业的张同学认为,通过AI变声制作模仿出来音乐,基本上可以实现听起来“很像”艺人声音的效果。但同时,技术合成的声音远没有富含现场情绪的声音有魅力。

  一位AI音乐的听众认为,艺术不是技术,在艺术领域,AI只能作为辅助,但不会是主角。在她看来,虽然人工智能具有很强的学习模仿能力,但它“学不来”作为人精神产物的音乐本质。

  “为什么我们要去听演唱会?歌唱是一种行为。一个活人能通过歌唱的行为,带来共情力和感染力,甚至还有表情、氛围,即兴表演这些不同的阐释。”她认为,艺术和社会生活是匹配的,先有体验才有艺术,所以音乐不是简单的音乐,重要是把人们内心的东西表达出来。

  新京报记者 张建林

  编辑 白爽 校对 李立军