走下「神坛」的元宇宙,正在将价值还给现实世界( 二 )


但在一个非脚本创作的真人秀中 , 需要实时采集、实时合成、实时输出嘉宾的面部表情 , 并高精度地还原到场景中 。 同时与普通民用设备相比 , 影视行业所需的设备对系统准确性、稳定性和容错性都有着更高要求 。
在真人秀完全直播的状态下 , 设备必须拥有庞大的采集能力、运算能力和高可靠性 , 才能满足节目长时间多机位动态录制与实时渲染合成的需求 。
为了解决实时面捕这一最关键的问题 , 节目组开创性地使用安卓手机来完成面捕工作 , 嘉宾脸上无需打点 , 仅通过一台手机的摄像头就能实现基于300个人脸特征点的捕捉和识别 。 而这个看似不可能的任务 , 便是由第一代骁龙8+移动平台作为底层技术支持 。
走下「神坛」的元宇宙,正在将价值还给现实世界
文章图片
“面捕技术是元宇宙里非常重要的关联技术之一 。 因为你在元宇宙中的一举一动 , 以及虚拟形象的活灵活现 , 核心都离不开面部捕捉 。 ”高通骁龙技术专家刘晓光谈到 。
一台搭载了骁龙8+移动平台的智能手机 , 不仅能高精度、低功耗地实时跟踪和识别人脸面部表情 , 并映射传输到元宇宙的虚拟形象中 , 还能避免设备长时间工作发热引起性能下降 , 导致数据不稳定甚至丢失的问题 , 降低了节目制作的门槛和成本 。
解决面捕的技术挑战 , 只是完成了嘉宾“进入”元宇宙的难点 。 但让观众身临其境地“看见”嘉宾所处的元宇宙世界 , 增强节目沉浸感 , 是影响观众体验的另一个关键 , 这一重任则落到了VR设备的身上 。
“VR最重要的就是视听沉浸感和交互 。 对现场观众来说 , VR是他们进入元宇宙的入口 , 是体验元宇宙的一个最理想的硬件平台 。 ”奇遇VR高级产品总监王斌解释 。 在视觉方面 , 由于显示和芯片的算力是结合在一起的 , 做4K效果的难度较大 , 会有严重的纱窗感、颗粒感 。 而搭载骁龙XR2平台的奇遇DreamVR设备能够将4K屏幕进行点亮驱动 , 并达到4K90帧 。
针对手机端用户 , 《元音大冒险》还开发了一个应用 , 用户戴上VR设备即可在线上大厅观看和实际演播现场同样的节目效果 。 为了进一步增强手机端用户的参与感 , 节目还在同步开发元音APP , 用户在APP里能够与虚拟人物实时互动 。
从面捕到VR , 基于骁龙支持的技术 , 《元音大冒险》通过将前沿技术与内容模式创新碰撞 , 只需一台手机、一台VR设备 , 就能轻松便携地为人们开启元宇宙的大门 , 在降低行业准入门槛的同时 , 也让更多消费者和企业参与到生态的共建中 , 加速元宇宙的商业化进程 。
元宇宙 , 已经不再是少数高端玩家们的游戏 。
走下「神坛」的元宇宙,正在将价值还给现实世界
文章图片
如何解锁元宇宙的更多可能性?
不难发现 , 不管是基于手机面捕技术的低成本、便携化 , 还是VR设备视听沉浸感和交互体验的提升 , 现阶段行业在解决的仍是元宇宙的“入口”问题 , 这只是人类迈向元宇宙未来的第一步 。
如果将元宇宙理解为第三代互联网 , 我们依旧处于元宇宙从0到1的构建阶段 。
想要离元宇宙更近一些 , 首先要发展包括5G、云计算、边缘计算在内的核心底层技术 , 此外芯片、显示屏幕、电池等硬件技术也急需升级和解决 。 这一系列基础设施建设将是一个复杂的系统性工程 。 元宇宙世界中各种素材的生成、交互以及设备的接入、数据传输等环节 , 也十分依赖人工智能的驱动 , 必须要端侧具备极大的算力支撑 。
走下「神坛」的元宇宙,正在将价值还给现实世界