GAITC 2021智媒专题论坛｜快手王仲远：以AI技术推进音乐大众化发展

6月6日，由中国人工智能学会（以下简称CAAI）主办，新浪旧事结合中国传媒大学共同承办的2021全球人工智能技术大会（GAITC 2021）“发展与应战”智媒专题论坛在杭州举行。快手技术副总裁、MMU&Y-tech担任人王仲远出席论坛并发表《音乐与技术的碰撞交融——艺术如何随时代变迁》主题演讲，分享快手在AI音乐方面的动态与停顿，充分展现快手抢先的人工智能技术，以及AI音乐为短视频带来的弱小助力。

AI技术+音乐深度交融，快手持续提升短视频观看体验

作为国民短视频APP，快手拥有海量内容、超大流量和高用户粘性。数据显示，平均每月快手用户上传的短视频数量超11亿，全体日活达3.7亿+，用户平均每日在快手平台观看短视频和直播内容的时长近100分钟。

在丰富的快手社区生态中，音乐成为激励用户创作的要素之一。在快手，76%的快手作品有配乐，90%的快手用户希冀大部分短视频有配乐。

为何用户在创作短视频时，对于音乐有如此强的依赖性？王仲远表示：“对于短视频的制造体验而言，音乐的正向影响至关重要。比如唯美风短视频假如去掉背景音乐只剩原始声响，就会减弱其氛围感，给用户留下与之前截然不同的印象。”

对此，王仲远进一步分析了音乐的独特魅力。在他看来，音乐可以与人的思想心情联络在一同，可以让人感到欢喜，感到悲伤，感到等待等。当中国人听到春节序曲时，往往会产生一种春回大地、万物复苏的感受，央视春晚掌管人的收场词也不自觉在脑海中浮现。

作为一种具有魔力的艺术表现方式，音乐也随着技术的发展而产生新的方式。在工业化时代，制造工艺的改进使得乐器可以发出的声响愈加丰富、层次化。在电子化时代，电子技术的发展创造出自然界机械无法发出的声响，音乐的表现力愈加多元化。

如今，步入人工智能时代，AI技术则协助音乐完成片面的个性化和智能化，为音乐和短视频带来了新的发展空间。据王仲远引见，前段工夫火爆全网的《蚂蚁呀嘿》正是将音乐和视觉AI技术停止了创意交融，用户只需求一张照片就可以自动生成诙谐好玩的动态唱歌视频，再加上魔性的BGM，很快成为短视频用户争相创作的模板。

AI技术推进音乐大众化，快手自建模型还原专业级演唱

在技术的加持下，音乐制造进入大众化时代。如何协助更多用户创作出个性化的音乐？快手自主研讨了AI音乐创作模型和AI歌手。

从音乐制造流程下去看，大多倾向于流水线化、工程化和模块化，首先是把握创作动机，然后停止作词、作曲，之后停止编曲，最后录音和混音。而经过快手搭建的AI模型，其中的每一步都可以借助AI完成。

王仲远表示：“在AI时代，动机变得非常简单。把随机关键词输入快手AI音乐模型中，模型就能把词转换成动机的一种表示，乃至于各种初始化的音乐。”

确定好动机之后就可以应用快手AI模块生成歌词。在AI歌词方面，快手针对数百万已有歌曲对模型停止重新训练，以确保AI可以很好地了解词义，让用户只需输入一个主题、一个情感、一个风格，就能在数秒内生成数十首歌词。

在AI旋律的创作上，快手也采用相似方法，搭建了数十万首曲谱和百万首歌曲音频训练模型再经过迷你数据库让模型自监督学习歌曲的内在关联，从而训练AI旋律生成的才能。

据了解，快手约请了平台内的音乐人运用AI模型来创作新歌曲，已创作的盛行音乐有《甜甜的滋味》《夜》《勇往直前》等。

录制一首高质量的成品歌曲，对歌手的演唱程度要求极高。为了处理部分用户面临的唱歌跑调、音色不好听等成绩，快手则推出了AI歌手辅助创作功能，并不断提升其模型的精准度。

据引见，2020年5月，AI歌手的演唱还是KTV程度；到2020年12月，普通人曾经很难发现AI歌手演唱中的瑕疵；如今，模型会根据曲谱自动调整音高、节拍和歌词，AI歌手可以逼真地还原出专业级歌手的演唱程度。

演讲最后，王仲远表示：“将来，快手还将探求更多新技术，丰富生成侧的玩法。借助语音辨认技术，快手希望AI歌手将来可以模拟个人音色，AI音乐则可以把说的话直接转成歌曲，满足用户更个性化的音乐创作需求，持续助力短视频范畴创作。”快手外部文档请勿外传

来源： 消费日报网