ar眼镜|Meta Reality Labs首席科学家:理想中全天候AR眼镜设计思路( 二 )


这种设计的能效更高 , 在30fps刷新率时仅耗电5mW , 约为常规传感器的25% 。 此外 , 该方案还支持扩展 , 刷新率可提升至480fps 。
Abrash表示:这不仅降低了功耗 , 还大幅增强传感器的动态范围 , 因此可以在同一帧中同时捕捉高对比度的光影 。



HDR功能对于未来的AR眼镜传感器非常重要 , 它可以让AR眼镜在室内、户外等各种亮度环境中稳定运行 。
不仅如此 , Meta希望在摄像头传感器上进行更复杂的计算 。 Abrash表示:未来 , 也可以在传感器上运行深度神经网络(DNN)的浅层部分 , 以实现眼球追踪和手势追踪等视觉分割/分类任务 。 当然 , 这还将需要更多的硬件创新 , 比如真正基于传感器的ML计算所需的超密集、低功耗内存技术 。



Abrash指出 , 未来 , MRAM技术将成为开发AR眼镜的关键因素 。 据悉 , MRAM是一种磁阻式随机存取内存 , 它的特点是拥有SRAM静态随机存储器的高速读取写入能力 , 以及DRAM动态随机存储器的高集成度 , 基本支持无限次重复写入 。 Meta的分布式AR计算架构将与端到端系统结合 , 以此来改善功耗、传感范围和硬件体积等方面 。
另一方面 , Meta认为AR的前景是根据传感数据来推断周围的环境 , 并不一定要一比一复制真实环境 , 因此用算法来推断很重要 。 还提出 , AR半导体技术需要三项关键创新;1)体积最小化、新材质;2)异构集成 , 先进的封装技术等;3)软硬件协同设计 , 实现内存为中心的计算、传感器内置计算 。



更重要的是 , AR光学显示领域也需要创新的半导体方案 , 全天候、时尚的AR眼镜需要优化亮度、对比度、分辨率、色深、色域、光效、像差、伪影、透光性、FOV、体积和重量等方面 , 而目前市面上的AR方案(2D反射显示、激光扫描、发射显示器等等)还不具备这样的水平 。
接下来 , Meta看好超小像素间距的microLED方案 , 它现在已经具备体积、亮度、分辨率等优势 , 未来还需要提升效率损失 , 以及高折射率半导体的光结构等方面 。 参考:facebook