Apple Vision Pro 眼动追踪系统相关专利曝光
0
回复 394
查看
[复制链接]
|
|
时间：2023-8-1 13:54:59
| 阅读：394 |
显示全部楼层
2017 年苹果收购了一家名为 SensoMotoric Instruments（SMI）的德国公司，该公司是眼动追踪技术的领导者。2016 年，SMI 已经开发出使用眼动追踪的眼镜。虽然这项技术在当时似乎有点科幻，但它现在是苹果即将推出的 Vision Pro 头显背后的关键技术之一。近日，美国专利商标局正式授予苹果一项与先进眼动追踪有关的专利，该专利发明人四分之三来自前 SMI 团队。
苹果的授权专利涵盖了各种实施方式，包括对相对于用户移动的电子设备执行远程眼动追踪的设备、系统和方法。
在一些实施方式中，远程眼动追踪通过使用单个主动照明光源和深度信息识别 3D 坐标系中沿注视方向的两个位置（例如，角膜中心和眼球旋转中心）来确定注视方向；在一些实施方式中，第一位置（例如，角膜中心）使用基于主动照明源和来自深度传感器的深度信息闪光来确定，第二位置（例如，眼球旋转中心）使用 RGB 传感器（例如，环境光）和深度信息确定；在一些实施方式中，使用相同主动照明源的单个传感器确定第一个位置（例如，角膜中心）和第二个位置（例如，眼球旋转中心），单个传感器确定深度信息和闪烁信息；在一些实施方式中，远程眼动追踪由移动电子设备提供。
在一些实施方式中，远程眼动追踪确定 3D 坐标系中的头部姿势，确定眼睛在 3D 坐标系中的位置（例如，眼球旋转中心），然后识别头部姿势和眼睛位置之间的空间关系；在一些实施方式中，空间关系是唯一确定的（例如，用户特定的转换）；在一些实施方式中，空间关系是在远程眼动跟踪的登记模式下确定的。随后，在远程眼动追踪模式的一些实施方式中，仅使用特征检测图像（例如，RGB 相机图像）和空间关系来执行远程眼动追踪。在远程眼动追踪的追踪模式的一些实施方式中，深度信息和主动照明被关闭（例如，降低功耗）。
远程眼动追踪的一种用途是识别设备上用户注视方向上的关注点（POR），例如，注视方向与设备显示器相交的位置。POR 可用于促进用户与设备的交互。例如，系统可能会检测到用户的视线已到达显示器的底部，并作为响应，自动向下滚动以向用户显示更多内容。
本专利公开的一些实施方式涉及在具有一个或多个处理器、一个或多个图像传感器和照明源的设备上，基于与眼睛的第一图像中不同波长的光相关联的像素差异来检测眼睛的第一属性。这些实施方式基于深度传感器的深度信息确定与 3D 坐标系中的第一个属性关联的第一个位置。各种实施方式基于照明源反射眼睛角膜的光产生的闪烁来检测眼睛的第二个属性。这些实施方式基于深度传感器的深度信息确定与 3D 坐标系中的第二个属性关联的第二个位置，并根据第一个位置和第二个位置确定 3D 坐标系中的凝视方向。
本专利公开的一些实施方式涉及在具有一个或多个处理器、一个或多个图像传感器和照明源的设备上，基于与眼睛第一图像中不同波长的光相关的像素差异检测眼睛的第一属性，并基于来自深度传感器的深度信息确定与 3D 坐标系中第一属性相关联的第一位置。各种实施方式基于在第二图像中检测到的头部（例如，面部特征）和来自深度传感器的深度信息来确定 3D 坐标系中的头部位置。这些实施方式基于头部位置和先前确定的头部和眼睛之间的空间关系确定与眼睛第二属性相关联的第二位置，并根据第一位置和第二位置确定 3D 坐标系中的凝视方向。
|
|
|
|
|
|
|
|
|
京公网安备 11010502053125号