网易伏羲AI虚拟人技术赋能网易云音乐虚拟偶像“乐灵”正式出道

Posted 2021-06-26 资讯汇

 

 

6月8日，网易云音乐LOOK直播AI虚拟偶像“乐灵”正式出道，同步开启LOOK直播首个3D视频AI直播间。

 

“乐灵”是由网易云音乐旗下直播品牌LOOK直播和网易伏羲基于有灵AI虚拟人技术打造的虚拟偶像，同时具备语音互动、弹幕互动、歌曲演唱、舞蹈联动等功能，旨在为用户提供24小时“陪伴式”的音乐互动体验。

 

不同于其他以二次元形象示人的虚拟人，“乐灵”的形象更接近真实的主播，是一名从“云村”走出来的暖男。据LOOK直播官方介绍，“乐灵”今年十八岁，性格积极阳光，身着卫衣，头戴鹿角。他的口头禅是“希望推荐的这首歌你会喜欢”；“听歌的时候注意耳机音量哦”充满治愈力，可以24小时陪伴用户，同时满足用户在音乐直播中的互动需求和情感需求。

 

值得注意的是，虚拟偶像“乐灵”能为用户提供和真人直播一致的服务，兼具娱乐性和趣味性。首先，在用户进入直播间时，“乐灵”会跟用户打招呼；同时，“乐灵”可以在直播间与用户进行实时的弹幕互动，并生成连贯自然的动作和表情，让虚拟形象更加生动。此外，“乐灵”还可以根据用户点播的歌曲，与歌曲风格、节奏相符的舞蹈，大幅提升用户体验。

 

 

​ 

 

乐灵在直播间与用户互动

 

虚拟偶像“乐灵”丰富完善的互动机制的背后是网易伏羲领先的AI技术。据悉，“乐灵”已经基于海量数据完成了人类语言模型训练，基于NLP技术（自然语言处理技术），“乐灵”可以对弹幕进行自动分词、句法分析，并根据上下文信息生成符合人设的回答。

 

此外，通过虚拟人智能驱动技术，“乐灵”还可以根据输入语音的节奏、情感等声学特征，生成自然连贯的动作和表情，并结合虚拟人骨架信息，快速生成舞蹈动作。相比于动作捕捉、美术手工等传统方式，该技术能最大限度的降低虚拟人舞蹈动作的制作成本。

 

 

 

 

“乐灵”形象

 

本次出道的“乐灵”集制作、演唱、舞蹈于一身，是有灵AI虚拟人技术在应用领域的一次全面升级。据悉，网易伏羲是国内专业从事游戏和泛娱乐产业人工智能研究和应用的顶尖机构，研究方向包括强化学习、图像动画、自然语言、虚拟人、用户画像、大数据平台、云计算平台、云游戏等领域，此前已成功支持“曲师师”、“开心姐姐”等虚拟IP形象的制作。

 

近年来，AI虚拟人的应用场景正在不断扩大，具有较强的市场潜力。一方面，2020年疫情影响下，直播行业快速发展，主播的市场需求同步提升；另一方面，5G和AI技术的广泛应用，也让虚拟人的开发门槛不断降低，早期孵化的众多虚拟IP收获众多95后网民的喜爱，逐步走向主流市场。

 

未来，LOOK直播和网易伏羲双方将以虚拟偶像为核心，持续推动像“乐灵”这样的虚拟IP应用至娱乐直播、广告代言、游戏解说、教育等众多行业，把前沿的AI技术和产品开放给更多合作伙伴。