苹果MR新专利:支持眼球和手势追踪、3D感知的多传感器头显

时间:2019-09-06 来源:www.ppdig.com

7月19日,美国专利商标局在苹果公司发布了与MR头相关的新专利。该专利指出,头部显示器可以使用两种类型的传感器,一种用于捕获用户的面部表情,眼睛运动和手势。等等。另一种类型用于识别头部用户的周围环境(诸如支持透视,深度感知,光感等),并且将头部显示器生成的虚拟内容叠加在用户的周围环境中。

Apple在该专利中描述的实际上是高清MR磁头所需的大型传感器。与HoloLens和Magic Leap一样,它还支持眼球和手势跟踪,3D环境感应和其他功能。

具体地,Apple专利中用于识别周围环境的传感器可以使用高分辨率相机或可以识别深度和距离信息的传感器(诸如诸如ToF的3D传感器)。用于识别用户信息的传感器可以包括诸如跟踪用户位置,方向,运动等的功能。

另外,捕获诸如方向,颜色和颜色强度的环境光信息的传感器可用于渲染叠加在真实环境中的数字内容。同时,您还可以携带眼动追踪或手部跟踪传感器(可跟踪的手势,五指或手臂),以及通过捕捉用户的前额眉毛或唇下巴运动来跟踪表情变化的传感器(可用于创建逼真的虚拟化身)。

除传感器外,该专利还指出,头部显示器可用于各种光学解决方案,例如近眼光学器件,DLP,LCD或LCoS屏幕;也可提供直接视网膜投影系统。

同时,头部显示器还可以支持鼠标状光标控制设备,并且可以以有线或无线(蓝牙)方式连接到分离计算模块。

该专利还列出了可以应用MR头的场景,包括:提供模拟训练,游戏,无人机或机器的远程控制,观看视频,上网冲浪等。