2023年虚拟人产业活动回顾 | 讯飞音乐郭嘉：AI融合音乐创新探索，助力优质内容“出圈”

　　3月31日，由全球新经济产业第三方数据挖掘和分析机构iiMedia Research（艾媒咨询）主办的2023年（第二届）中国虚拟人产业大会暨AIGC创新发展论坛上，科大讯飞消费者事业群数字娱乐事业部总经理、讯飞音乐主理人郭嘉受邀出席大会，发表《人工智能赋能音乐产业创新发展》主题演讲。主要从讯飞音乐的AI大数据驱动营销推广、AI赋能交易链路、AI助力打造虚拟偶像Luya、AI与公益等方面进行了相关阐述。

　　本文为科大讯飞消费者事业群数字娱乐事业部总经理、讯飞音乐主理人郭嘉在“2023年（第二届）中国虚拟人产业大会暨AIGC创新发展论坛”上的演讲实录，艾媒网整编发布。

　　感谢大家，感谢张毅总邀请参加此次中国虚拟人大会。我今天的分享议题与大会议题稍有不一样，底层肌理是人工智能为行业各领域和赛道发生变化带来的促进，今天的分享主题是人工智能赋能音乐产业的创新发展。

　　科大讯飞成立于1999年，自2018年开始，讯飞便在虚拟人领域和行业赛道进行了全面的布局。截止2023年，在讯飞虚拟人平台上，囊括了围绕C端虚拟偶像的产生，到B端、D端和G端产出的虚拟人进入各行业和赛道，讯飞虚拟人可以提供相应的服务，如虚拟客服、虚拟主播、虚拟直播、文创、文旅导游等。科大讯飞的讯飞音乐是基于AI+音乐赛道延展至今的新型音乐场台，我们围绕内容生产、多元宣发、艺人计划、AI技术研究，为整个音乐市场带来更多的触发点。

　　AI创新赋能音乐产业链路

　　那么对于我们来讲，什么叫做AI+音乐创新？就是从音乐体感角度来说，我们借助人工智能的技术，以及极值产品化的体验，不仅帮助我们的用户，提升他们在音乐质感上的音乐体验，同时真正赋能所有行业的从业者。

　　大家可以看一下，从整个音乐产业发展来讲，如何获取和抓取到更多音乐，是我们最开始的覆盖面。讯飞音乐自2021年8月24日正式发布以来，以AI技术为底，为词曲售卖者和购买机构提供了安全的交易平台，使其可以在安全、透明、公开的平台上进行词曲的购买。截止到目前为止，讯飞音乐已经拥有约12万余首音乐，覆盖了整个市场的70%左右。也就是说，你想买词曲或想卖词曲，登陆词曲家就可以完成相应交易。这种高效、便捷的方式为音乐产业的发展提供了强大的支持。

　　第二个维度是概率问题。如果大家涉猎过或了解音乐行业就知道，如何挑选出优秀的歌曲是一个极具挑战性的问题，尤其是在面对如此大量的新歌时，如何准确地预测哪些歌曲会成为爆款，更是对概率和预测能力的巨大考验。比如说现在我们TMEA，单日发歌新歌量是10万余首，而这10万余首，哪些可以当天、当月、当季度的爆款歌曲，如何精准抓住它，这是一个概率问题。讯飞音乐通过结合AI技术，对音质和词曲进行分析，帮助DM投递作者更好地判断这个词曲是否适应，或者是否与目前整个流行趋势相互匹配。

　　第三个维度是精准。目前讯飞音乐旗下签约歌手是300余组，那么基于这么多组音乐人，如何帮助他们自己找到更合适的音乐，这个是在匹配歌曲过程当中比较难的痛点。传统的音乐厂牌通常会采用市场调研的方式，根据歌手的风格和受众来选择歌曲。讯飞的话，基于我们整个AI、人工智能的辅助，可以帮助歌手找到与他们风格和特点更加契合的歌曲，从而提高歌曲的适配性和歌手的表现力。

　　第四个维度是多元。讯飞音乐目前合作制作是110余组，这么多制作人如何帮助发挥自己的多样性，适配到自己的歌手，这也是我们AI链路上很重要的环节。

　　第五个维度是歌曲发行。歌曲发行是音乐产业中至关重要的一环，然而在这个过程中也存在许多痛点。这些痛点可以理解为作品生产完成之后上传发行平台，如何保障作品安全，以及如何保障版权安全和发行阶段获得最大的流量和关注。讯飞音乐拥有自己的发行平台，不仅在国内有广泛的覆盖，同时也在海外进行拓展。

　　第六个维度是专业内容营销。基于现在整个流媒体平台消费趋势改变，如何能够让作品在更多平台上获取更多的流量，或者说如何更加精准投放到相对应的流量维度上，这也是我们讯飞音乐所研究的方向。

　　最后是一个内容变现，如何帮助音乐人实现多维度的内容变现，在稍候也会介绍到。

　　截至目前为止，讯飞音乐过亿次播放单曲达到120余首，在流媒体层面播放量达到近700亿次。这个是基于AI大数据驱动营销推广团队，他们通过底层三个维度的分析，帮助我们精准地把握歌曲的流行趋势。尽管讯飞音乐在主流平台上有很多优秀的单曲，但可能还有很多歌曲不为外界所知。例如《物理》《故事还长》《我曾遇到一束光》《落在生命里的光》等歌曲，都是讯飞音乐的优秀作品。我们一直在努力为听众带来更多高质量的音乐作品，希望能够得到大家的支持和喜爱。

　　AI融合音乐进行创新探索

　　这一页是关于我们的词曲家平台的简单介绍。词曲家是一个面向广大消费者和词曲创作者开放的平台，我们利用AI、区块链和大数据等技术，旨在提高创作者的创作效率和质量，同时优化交易的流程和效率。在词曲家平台上，AI技术起到了重要的支持作用。我们利用AI进行作词和作曲，帮助创作者提高创作效率和质量。同时，我们的区块链技术也确保了交易的安全和透明，让词曲作者能够获得更多的收益。

　　如段教授所说，在这个时代，我们正处于一个内容为王的状态。只有创造出真正适合C端用户、具有精品化内容的产品，我们才能真正实现商业化的变现，而不仅仅是扩大影响力。

　　回到今天的主题虚拟人。前面张总和段教授都讲到AI生态环境下，产生虚拟的产品和工具。今天为大家介绍一位讯飞音乐在2021年首发的虚拟歌妓LUYA。当时，LUYA并没有正式出道，但基于科大讯飞在LUYA的口型交付和3D建模等底层虚拟人交互系统上实现重大突破，于是我们在2021年成功地实现了LUYA的实体化。

　　LUYA是科大讯飞内部科技与音乐碰撞后顺势而为的产物。LUYA看上去就是两个丸子头，大眼睛，唱歌跳舞很好看的小姑娘，但是在她的背后，从她自己个人人设上，以及她身上所结合的讯飞音乐所特有的技术点，在稍候会给大家进行介绍。

　　科大讯飞对虚拟人技术来讲，我们有底层几个核心要素，其中包括语音的变声和声音合成技术，这使得我们能够创造出独特的声音和音色。第二个核心要素是自然语言的理解能力，这使得虚拟人能够理解和回应人类的语言，从而进行更自然的交互。第三个是AI和UI交互平台，这为虚拟人的行为和表现提供了基础。

　　对于LUYA来说，她身上所展现的能力是基于科大讯飞的AI技术所创造的。其中，X-vocal音色创造是LUYA的核心能力之一。通过这项技术，LUYA的声音在世界上是独一无二的，这使得她能够以自己的声音传达情感和表达歌词的内涵，这项技术的实现意味着LUYA可以真正意义上脱离人的因素，以自己的声音和形象与观众进行互动。

　　其次，LUYA还具备AI变声和歌曲合成的能力。这项技术使得虚拟人可以轻松地驾驭更多歌曲风格和语种。通过AI变声技术，LUYA可以根据歌曲的特点和风格进行音色的变换，从而完美地演绎不同的歌曲。同时，歌曲合成技术还可以将多个音轨进行合成，为虚拟人的演唱提供更加丰富和立体的音效。

　　第三个核心要素是Sart-TTS说话合成技术。这项技术使得LUYA在直播过程中，能够将文本转换为真实的语音，实现更为自然和流畅的说话。通过这项技术，LUYA可以根据不同的文本内容，以不同的语调、声音、语速和声线进行表达，从而传递更为丰富的情感和信息。

　　最后一个是AI驱动的动作和表情，大家通过观看视频可以直观感受。值得一提的是，讯飞音乐的Sart-TTS说话合成技术在2022年7月左右发布了最新的基础能力。目前，这项技术已经达到了与真人之间只有0.05分贝的差距，这个差距虽然微小，但却在声音的感知上产生了巨大的影响。这意味着LUYA在直播过程中，其声音已经非常接近真人的发音和语调，为观众带来了更加真实和沉浸的听觉体验。此外，LUYA还具备AI词曲生成以及AIGC的能力。通过这些技术，LUYA可以自动生成歌曲的词曲和伴奏，并且能够进行降本增效和提升效率。

　　围绕LUYA目前整个合作的计划来讲，可以分为几个大类：比如说虚实衍生品的交易。目前我们与讯飞自己的数字藏品平台“星宙”合作，已经推出了三期LUYA的数字藏品，最近推出的是春萌主题的数字藏品，正在官方平台进行授权。

　　其次，我们与厂商、运营商以及手机装扮方合作，围绕整体个性化装扮领域展开主题、壁纸、气泡、字体的展示。如果大家使用的是oppo、vivo或华为的手机，可以在主题界面搜索LUYA，就可以看到LUYA的几款皮肤。

　　此外，去年我们与优酷的一个非常著名的IP“少年歌行”合作。在“少年歌行”中，LUYA也演绎了其中的一首插曲。作为虚拟偶像和虚拟歌手，我们在流媒体发布的原创歌曲作品中，比如《铠甲》，在出道单日发布后便在唱跳单曲区取得了很好的成绩。在Q音的飙升榜、新歌榜和流媒体关注榜上，都获得了第一的好成绩。

　　没有一朵花，在种下的时候你就知道她盛开的样貌。在写下这句话，对于我们团队来讲，我们是饱含期待的。LUYA对讯飞音乐来讲，不仅是在科技和音乐碰撞上的一个产物，更多是为了体现未来在虚拟人方向上布局的一个决心。

　　今年9月份，也是LUYA出道一周年的纪念日，我们会在虚拟偶像厂牌进行一个发布，同时我们会公布在虚拟人空间的打造。同时在这样一个空间当中，我们实现一些实时的交互，还有虚实的交互场景。

　　音乐与AI同行，人工智能助力各行业智能化发展

　　最后我想说AI公益在路上。我们发现近几年随着人工智能行业的蓬勃发展，以及人工智能真正进入生活中，围绕方方面面所展示出来的能力，我们希望通过这样的能力帮助那些需要帮助的人。

　　这里举三个例子：第一个是关于非物质文化遗产的保护。科大讯飞在去年做了一个“遗见倾城”的非遗焕发计划。围绕四大地域，以及它们代表性非遗IP，进行围绕全网线上线下曝光11亿次，帮助很多非物质文化遗产得到了更多的关注和保护，同时也实现了部分商业化变现的能力，为这些非物质文化遗产的传承和发展提供了更多的支持和保障。

　　此外，这个计划还帮助新一代的年轻人更好地了解和认识非物质文化遗产的状态，让他们更加深入地了解中国的传统文化。本次计划精选打造了20+代表性非遗IP，获得超11亿全渠道曝光，超60万壁纸下载量。

　　第二个是方言保护计划。随着各地域的发展和城市化进程的加速，很多方言已经逐渐消失。我们通过相关的动作，采用AI技术，将方言的数据进行保存和留存，让子孙后代可以通过方言保护计划更好地认识中国的地大物博和语言之美。

　　第三个例子是关于梦想音符计划。科大讯飞未来将进入校园，帮助校园里的小朋友和学生拥有更多的平台和可能性。这个计划旨在通过音乐教育，激发孩子们的创造力和想象力，培养他们的音乐素养和艺术修养。

　　最后我想回到一个标语：音乐与爱AI同行。我们的爱不仅是我们对音乐本身的热诚之爱，更多是围绕人工智能在这个行业里面赋能和展示的能力，我们希望通过自己微小的努力，与各位同仁一起来尝试着，让我们这个行业更加繁荣，尝试改变这个市场，谢谢大家！