100万人沉浸式“云斗舞”!这个节目凭啥火了?( 三 )


文章图片
2017年5月 , Siren正式立项 , 其背后是来自四个国家的联合开发团队 。 腾讯NExTStudios为项目所有者 , 负责Unreal引擎的渲染增强和性能优化 。
联合开发期间 , 跨国沟通为项目带来了巨大的风险和挑战 , 无论是时差和文化多样性 , 还是反复的海量数据协作 。 经过近一年的研发 , Siren终于在次年3月现身GDC2018 。
但说到底 , 即便拥有这个项目 , 背后的底层技术还是掌握在别人手里 。
显然 , 腾讯想要的可不只是「复用」现成的模型就完了 。
100万人沉浸式“云斗舞”!这个节目凭啥火了?
文章图片
于是 , 腾讯开始尝试用内部的人员和技术能力去开发虚拟人 , 不再单纯地依赖国外的技术 。
高保真数字人Matt、WL.S成员童和光等自研虚拟人便在这样的背景下启动了 。
2021年腾讯和新华社合作 , 开始从零打造全球首位数字航天员小诤 。
仅3个月之后 , 实时高保真数字人小诤诞生了 。
?
100万人沉浸式“云斗舞”!这个节目凭啥火了?
文章图片
?
她有五千多个微表情 , 皮肤能随光线变化而变化 , 她身体能够自由转动 , 带领地球上的人们360°观赏难得一见的火星风光 。
100万人沉浸式“云斗舞”!这个节目凭啥火了?
文章图片
能够做到这一点 , 腾讯的两套自研的管线功不可没:
xMoCap动捕动画全流程生产
xFaceBuilder数字角色制作
在xMoCap管线中 , 集成了绑定、动捕、资产管理、动画工具及NExT动捕数据库 , 并提供涵盖动捕服务、数据处理、数据输出等一站式服务 。
原来2到3个人需一周时间才可完成的动捕数据处理 , 现在1个人在动捕完成次日就能轻松搞定 , 角色动画生产效率大大提升的同时 , 质量也得到了提高 。
而xFaceBuilder数字角色制作管线 , 则通过大量算法优化提升了角色人脸制作效率 , 能够逼真制作人脸、毛发、服装 , 打磨成了一套涵盖建模、绑定、动画的全流程制作过程 。
100万人沉浸式“云斗舞”!这个节目凭啥火了?
文章图片
加上星瞳背后的自研直播管线、吉莉的自研骨骼绑定管线……经过五年的探索 , 不管是离线还是实时 , 腾讯的虚拟人在实现「千人千面」的同时 , 工业化的生产也越来越成熟 。
虚虚实实 , 未来怎么走?
其实 , 此前《堡垒之夜》也在虚拟演唱会上做过不少尝试 。
周杰伦在元宇宙平台沙盒(Sandbox)里举办的演唱会也是嗨翻了不少歌迷 。
100万人沉浸式“云斗舞”!这个节目凭啥火了?
文章图片
不过这些是纯粹的虚拟体验 , 这次央视和腾讯基于TMELAND打造的虚拟音乐世界体验 , 更多是基于真实晚会和虚拟体验的互动 , 是对传统电视节目体验一次突破 。
而且这些虚拟技术目前的应用 , 也远不仅仅在虚拟世界 , 而是正在快速复用到实体行业中 。
感觉不是很直观?没关系 , 举个例子就好理解了 。
不知道你有没有这样的感知 , 现在AI的发展或多或少都受了当年AlphaGo的影响 。
毕竟 , DeepMind告诉我们 , 一个成熟的游戏环境是可以用来协助研发人工智能的 。
也就是说 , 摆在你面前的游戏并不只是一个单纯的游戏 , 而是一个能够提供更多场景、保证更快速度、以及更低成本的「AI训练营」 。
这么看来也就不难理解为什么一群清华、北大的学霸会在《王者荣耀》里研究人工智能了 。
100万人沉浸式“云斗舞”!这个节目凭啥火了?