苹果Meta都在冲的Pancake技术,中国VR团队YVR竟抢先交出产品答卷( 二 )


此外 , Pancake光学方案在清晰度上带来的“质变“更加惊艳 。 其光学解析能力相对于菲涅尔光学提升了50% , 同时克服了菲涅尔光学固有的视野边缘模糊与畸变现象 , 有效减少边缘眩光 , 带来了视野全域范围的清晰体验 。
值得一提的是 , YVR2光学镜组透过率达到了19% , 高透光性能下 , 清晰度达到了全新水平 。 据悉 , 目前业内平均水平约为13-16% 。
然而 , Pancake方案并没有听起来那么容易实现 。
例如 , 目前VR/AR产品中普遍存在渲染GPU算力不足的问题 。
此前 , 业界普遍使用基于眼动的注视点渲染技术(眼动追踪光学方案)来解决这一问题 。
然而传统的眼动追踪通常被用于菲涅尔光学方案VR产品中 , 无法应用到Pancake方案上 。
这是因为传统的方案往往需要额外的半透半反镜 , 放在眼睛和物体图像中间用于反射一部分光线给摄像头 , 以计算瞳孔距离和运动方向等 。 但随着Pancake光机设计空间被压缩 , 不再有位置留给传统的半透半反镜 。
因此 , 为了解决这一问题 , YVR在屏下眼动追踪系统也进行了探索 , 除了解决GPU渲染算力不足的问题 , 也方便未来实现自动瞳距调节、身份识别等功能 。
根据已经公开的专利 , 这一设计采用了屏下红外摄像头(1)和红外LED(5)两部分硬件 , 在不改变光机体积的情况下 , 实现红外眼动图像获取 , 结合屏幕背光时序避免干扰 , 获取更清晰的眼部图像 。
苹果Meta都在冲的Pancake技术,中国VR团队YVR竟抢先交出产品答卷
文章图片
如果采用这一技术 , Pancake方案VR眼镜的画质也能做到“看向哪儿 , 哪儿就更清晰”了 。
当然 , Pancake光学方案也还只是VR一体机的输出“骨架” , 也就是实现了“VR眼镜”的功能 。
实际很大一部分体验感 , 仍旧与VR一体机上的其他自研算法有关 。
自研VR算法是关键
对于VR一体机而言 , 要做的绝不仅仅是一个外接“显示器” 。
在YVR首席技术官费越博士看来 , VR是手机等二维计算平台进化而来的三维计算平台 , 两者之间一个重要的差异点就是 , VR拥有独特的空间感知和空间计算能力 , 而正是算法赋予了VR这样的能力 。
毕竟除了视觉效果以外 , VR设备还需要在尽可能降低延迟感的情况下 , 准确识别身体动作 , 确保尽可能精准地定位、进一步提升安全性等 。
这样一来 , VR需要的自研算法就被分成了两大类:视觉、动作识别和定位 。 这一阶段 , YVR自研的算法包括VST、渲染、追踪等 。
首先是视觉算法 , 根据不同的用途 , 又被分成VST和渲染技术两大类 。
其中VST , 也就是视频透视(VideoSee-Through)技术 , 有点像是AR眼镜的增强功能 , 在基于外界真实图像的画面基础上 , 叠加虚拟的画面效果 。
苹果Meta都在冲的Pancake技术,中国VR团队YVR竟抢先交出产品答卷
文章图片
它会通过VR眼镜外界的摄像头传感器返回真实世界的图像 , 相当于给VR眼镜配备了两只“眼睛” , 最常见的场景是使用VR时和外界的交互上 。
但VST技术自带的一些问题 , 如延迟和画面畸变等 , 则需要通过渲染技术来解决 。
目前YVR2已经自研了带有3D识别和画面矫正功能的VST技术 。
他们设计了一个能自动识别和精准定位安全边界、平面和障碍物的框架 , 分为稀疏平面模块、后端主模块和回环检测模块 , 会根据平面识别和输入的环境点云数据 , 来确定用户使用的安全边界 , 同时利用AI算法进行障碍物识别 。
这样一来 , 即使用户脱离安全边界 , VR设备也能及时察觉到周围环境中的障碍物并发出提醒 , 提升用户安全感 。