眼耳鼻舌身意，严肃地聊一聊元宇宙的“技术拼图”( 三 ) 元宇宙太太太火了

举个例子，你可以在远处控制虚拟对象，仿佛拥有了原力一般的超能力；未来还可以无需键盘，在桌子或膝盖上打字就能输入；当你穿着鞋子离开家，设备就会询问你是否需要播放音乐……

文章图片
人类在婴儿时如何感知世界，靠的正是一次次抓握，一次次爬行。身体知觉的模拟，能够让我们在虚拟空间里和世界再次对话、重新成长。
元宇宙之声
你戴着一副AR眼镜和一个柔软的腕带，决定去元宇宙里的虚拟会议室开个会，突然发现，设备里传来了嘈杂的音乐和其他人讨论的声音，让你很难集中注意力。
事实上，大脑不会对耳朵传来的所有声音照单全收，我们总是会对一些特殊词汇（比如自己的名字）特别敏感，在有必要时也能主动屏蔽外界噪声。如果要在虚拟世界里复制真实的声音体验，不仅需要声学设备本身的高性能，也要对声音如何与真实环境相互作用进行建模。
就拿Meta的研究方向来说，在3D打印眼镜上使用多个麦克风，捕捉周围的声音，然后通过眼动追踪设备，感知头部和眼睛运动的轨迹， AI系统可以找出你最感兴趣的声音中的哪一个，增强正确的声音。
这样在嘈杂的虚拟会议室或咖啡厅里对话，也不必特意提高声音才能被听到。
【眼耳鼻舌身意，严肃地聊一聊元宇宙的“技术拼图”】当用户的眼神转向旁白的电视或视频时，里面正在播放的内容又会变得更响亮，身边其他声音则变得更安静。

文章图片