苹果专利提出AR、VR的应用场景自由切换

查看引用/信息源请点击:映维网
苹果专利提出AR、VR的应用场景自由切换】从纯数字环境现实转换到半数字现实环境 , 再到纯物理环境
(映维网2021年11月17日)同时支持AR+VR的设备正在成为一种趋势 , 而早前有消息称苹果同样在研发一种同时支持所述两种功能的头戴式设备 。 在名为“Transitioningbetweenimageryandsoundsofavirtualenvironmentandarealenvironment”的专利申请中 , 苹果就描述了一种从纯数字环境现实转换到半数字现实环境 , 再到纯物理环境或反之亦然的技术和系统 。
苹果专利提出AR、VR的应用场景自由切换
文章图片
根据一个实施例 , 专利描述的方法包括:提供第一类型的第一环境的视图;提供与第一环境相关联的第一环境音频;检测现实转换事件;响应于检测现实转换事件:提供第一环境的组合视图和第二类型的第二环境 , 组合视图包括第一可见性值的第一环境的图像和第二可见性值的第二环境的图像;以及提供所述第一环境音频和与所述第二环境相关联的第二环境音频的组合 , 其中所述第一环境音频或所述第二环境音频中的至少一个包括多个音频对象 , 所述多个音频对象的音量水平与所述第一可见性值或所述第二可见性值中的至少一个相关联 。
在一个实施例中 , 第一类型的第一环境是虚拟环境 , 第二类型的第二环境是真实环境表示 。 在一个实施例中 , 第一类型的第一环境是真实环境的表示 , 第二类型的第二环境是虚拟环境 。 在一个实施例中 , 组合视图包括将第一环境的图像与第二环境的图像合成 。 在一个实施例中 , 视图合成使用与第一环境和第二环境相关联的alpha通道 。 在一个实施例中 , 组合视图包括将第一环境的用户透视图与第二环境的用户透视图对齐 。
在一个实施例中 , 第一环境音频包括多个音频对象 , 其中组合混音包括根据多个音频对象的各自音量水平将多个音频对象与第二环境音频交叉淡入 。 在一个实施例中 , 多个音频对象中的一个或多个第一音频对象的音量水平进一步与第一音频环境中的一个或多个第一音频对象的突出度相关联 。
在一个实施例中 , 所述方法同时包括 , 检测第二现实转换事件;响应于检测到第二转换事件:停止提供第一环境与第二环境的组合视图 , 以及第一环境音频与第二环境音频的组合混音;提供第二环境的视图 , 以及提供第二环境音频 。
在一个实施例中 , 所述方法包括 , 检测第二转换事件;响应于检测到第二转换事件:修改第一和第二可见性值;以及修改第一环境音频与第二环境音频的组合混音 。
在一个实施例中 , 所述方法包括检测第二转换事件;响应于检测到第二转换事件:停止提供第一环境与第二环境的组合视图 , 以及第一环境音频与第二环境音频的组合混音;提供第一环境的视图;以及提供第一环境音频 。
在下面的系列专利示意图中 , 系统可以根据需要在VR环境 , AR环境或纯物理环境中过渡转换 , 并且相应地调整真实声源或虚拟声源 , 以匹配目标转换情景 。
专利图2是一个包含物理对象的真实环境图例 , 其中所述真实环境是一个包含墙壁202-c , 电脑桌202-a和电脑202-b的房间200 。
专利图3则是位于房间200的VR头显用户所看到的完整虚拟视图 。 根据需要 , 系统可以逐渐过渡至成AR环境或纯物理环境 , 依次显示下面的顺序视图 , 并且相应地调整声音 , 以实现最为匹配的声画体验 。
苹果专利提出AR、VR的应用场景自由切换
文章图片