sdk|网易丁磊抢跑“元宇宙”!造虚拟人,推虚拟活动空间,亮“元宇宙”技术版图( 二 )


网易伏羲实验室成立于2017年9月,聚焦用人工智能在游戏中革新玩家体验,据称目前已有200+相关专利,日均调用1亿次。网易伏羲人工智能实验室联席负责人李仁杰谈道,经过几年沉淀,网易伏羲实验室开始进入第二阶段,希望将游戏领域沉淀的技术赋能教育、工业、娱乐等更多领域。
1、“有灵”虚拟人SDK:一张照片捏脸,AI驱动说话、做表情
以最近备受关注的虚拟人为例,现在很多的虚拟人是由背后的真人扮演,但之后实现“元宇宙”,通过AI技术,从生成到最后的交互,全链路都通过AI来驱动。
会上,李仁杰宣布,推出“有灵”虚拟人SDK,包括3D智能捏脸、3D动画合成、语音合成等多个模块,使用户能够制作虚拟数字人,降低使用门槛。
sdk|网易丁磊抢跑“元宇宙”!造虚拟人,推虚拟活动空间,亮“元宇宙”技术版图
文章插图
拿3D智能捏脸功能来说,当下捏脸成为一个有门槛的事情,既写实又有艺术特色并不容易,由此还催生了捏脸师这样的职业。网易推出的“有灵”虚拟人SDK能实现智能3D捏脸,用一张照片就能通过AI实现捏脸。
在3D动画合成方面,早期经常是有CG(计算机绘图)技术,将演员的形象拍摄下来然后迁移到虚拟形象上,第二种方案是摄像头就能捕捉动作进行迁移;网易采用第三种语音或文本驱动方式,只提供语音或者文字就能自己产生动作和表情。
在3D动画迁移方面,用户能通过手机等简单的设备实现表情和动作迁移,检测用户的动作、表情、语言从而实时驱动虚拟人。李仁杰称,只要用了这个SDK,就可以让自己的3D形象动起来。
在语音合成方面,用户只需要输入文字,就能合成高音质、自然度的语音,为虚拟人选择最合适的音色输出语言表达。
除了这些功能,网易伏羲实验室还在为“有灵”虚拟人SDK探索一些新功能,比如三维重建,仅需要三个角度照片实时生成一个人的虚拟形象;为虚拟人装上能思考的“AI”大脑,目前已经在一些游戏中应用,让游戏角色自己学习策略,等等。
2、沉浸式活动系统“瑶台”:拿云游戏技术做“元宇宙”会议平台
沉浸式活动系统——瑶台,目前主要面向活动、会展、会议等应用场景,使参会者可以定制自己专属形象,进行动作和表情迁移,获得沉浸式的虚拟活动体验。
这一平台初创于去年疫情期间,当时线上会议系统盛行,在提高效率的同时但难以实现沉浸感、仪式感,难以满足一些社交需求,瑶台应运而生。
李仁杰回顾,去年10月,网易在《逆水寒》游戏中汇聚300多个海内外学者召开了多天的第二国际分布式人工智能学术会议,得到了来自众多教授、学者比较好的反馈,提升了李仁杰和他的团队的信心,因此后来他们加大了对这一沉浸式活动系统的研发。
sdk|网易丁磊抢跑“元宇宙”!造虚拟人,推虚拟活动空间,亮“元宇宙”技术版图
文章插图
“瑶台”采用云游戏技术,无需下载客户端,一个链接在手机、电脑里就能参会。此外,数据分析系统、抽奖系统、多风格接待场地等配置都在陆续上线。
李仁杰补充道,“瑶台”目前主要面向活动等2B(企业级)场景,之后还会加入更多UGC内容,开放编辑器给2C(消费级)用户,比如,用户可以用瑶台在平台上按照家的样子搭建一个虚拟空间,开展家庭聚会;用户可以在平台上玩剧本杀游戏,还能自制场景和道具。
李仁杰称,之后瑶台可能成为一款既2B又2C的产品。
三、“元宇宙”可能快速到来,通信安全十分重要阮良认为,以通信和安全为代表技术的进步是“元宇宙”世界发展的基石。
网易智企为布局“元宇宙”的企业提供数字风控和内容风控解决方案,比如与风靡全国的ZEPETO平台合作,为其提供即时通讯和内容安全保障。ZEPETO是很多人玩过一款捏脸游戏,可以让用户举办虚拟粉丝聚会等活动,在全球达2.5亿注册用户,有望称亚洲最大“元宇宙”平台。