交互|AI产品必读:扎克伯格的“元宇宙”必备八要素( 二 )

随着手机厂商的大力推广,相信下一步衍生的基于虚拟面部形象的应用会越来越丰富,除了现在的视频通话、社交、视频录制等场景之外,在meta的元宇宙的场景中更多是以一个完整的人身(面部+身体)虚拟重建,参与游戏或者是与其他伙伴协作办公、创作等等。
最近小红书上又有一款现象级的身体重建产品叫3D body visualizer,支持用户根据自己实际的身高、体重、运动频次等重建3d虚拟身体,本人亲测基本跟实际的体形十分吻合,下一步之需要通过动作捕捉camera对人体的关键点检测跟踪就可以驱动虚拟人身了。
body visualizer交互|AI产品必读:扎克伯格的“元宇宙”必备八要素
文章插图
未来可以期待的虚拟化身类似头号玩家的样子,每个人在数字孪生的空间中拥有另一个自己的形象,由现实中的自己驱动虚拟世界中的自己与世界和他人交互。
头号玩家——元宇宙成功时候的样子:
交互|AI产品必读:扎克伯格的“元宇宙”必备八要素
文章插图
三、家庭空间 home space家庭空间在扎克伯格的元宇宙中扮演重要角色,是元宇宙假设成立的“人、物、场”当中的场。
由于疫情逐渐常态化,社交隔离已经成为人们日常生活中的一部分,人们在家中娱乐、玩游戏、社交、远程办公、会议,而oculus产品本身已经承载上面的全部功能,oculus的主要使用场景就是家庭、家庭空间则是用户与oculus交互的核心场景。
如何在已知的场景中让产品更好地为用户提供服务。oculus在使用交互中最重要的一个步骤就是划定用户活动边界,因为当用户完全沉浸到元宇宙中时是完全看不到真实空间的,但是用户还是会在场景中进行活动,家中摆放的家具就可能会让实际活动中的用户发生意外。
此外在家中由于环境的差异会产生不同的声场,因此空间音频也会是影响用户判断物体方向的重要一部分。苹果就在其产品上竭力打造spatial audio的基于三维空间方位的声音交互,其目的可以猜测也是为了打造更加真实的元宇宙。
oculus支持用户自定义真实环境边界,并实时感知防止用户“越界”发生危险:
交互|AI产品必读:扎克伯格的“元宇宙”必备八要素
文章插图
苹果专利——空间音频:
交互|AI产品必读:扎克伯格的“元宇宙”必备八要素
文章插图
四、隔空传送 teleportingteleporting这个词最早存在于科幻小说中,描述的是把人或物从一个地方一瞬间移动到另一个地方,类似哈利波特的飞路粉和传送门或者是哈利波特的任意门。
早年间微软也提出过这个概念,比如说全息通信,包括Google前段时间的开发者大会也发布了project starline,即使相隔千里也有这个人就坐在你面前的即视感。
扎克伯格在会上承诺通过meta一定可以实现,并且就像连接网络一样容易。这里最最重要的就是临场感、沉浸式。
一切交互都是实时的,你与其他的角色、与虚拟的场景交互考虑到网络延时抖动、数据上传/下载、素材渲染、算法计算等等都必须是毫秒级别进行处理,只有高可靠、低延时、大并发、高带宽的计算能力才能支撑presence的场景。比如5G连接、千兆光纤连接、Wi-Fi6,再比如云-边-端协同的计算方式,因为在要求实时性很高、计算量很大的情况下,完全依赖云端算力是完全不可行的。
而teleporting主要依赖的VR头显不能过重,因此边端协同显得极为重要。端侧需要有传感器的输入、本地的跟交互相关的算法(姿态、位置、手势、眼动、触控、声音、触控等等)、端侧同样要进行场景的渲染,数据通信、数据缓存等等。
microsoft mesh-holography: