昨天，美国专利商标局正式公布了苹果公司新授予的 56 项专利。在这份特别报告中，介绍了与 Vision Pro 相关的另一系列专利。该组中第一个也是最突出的标题是“基于光模式的视网膜眼动追踪对准”。一般来说，所授予的专利涉及通过 HMD 为用户提供基于视网膜成像的眼球追踪。具体地，本发明涉及检测电子设备的用户的基于视网膜成像的眼睛跟踪中的未对准的系统、方法和设备。
用于视网膜眼动追踪的基于光图案的对准
在苹果公司的专利背景中，他们指出，基于视网膜成像的注视跟踪系统通常具有照亮视网膜的照明源和用于生成包括从视网膜反射的光的图像的图像传感器。基于视网膜成像的凝视跟踪通常将来自凝视跟踪图像传感器的当前视网膜图像与在登记期间获得的视网膜图进行比较。然而，电子设备处的显示内容与视线跟踪图像传感器之间的未对准可能是由于热漂移、物理冲击等造成的。在执行基于视网膜成像的注视跟踪时，显示内容和用于跟踪的图像传感器之间的未对准可能会导致注视方向错误。
苹果公司授予的专利涵盖了通过克服用于视网膜眼睛跟踪的内容设备（例如显示器）和传感器（例如相机）之间的错位来提供基于视网膜成像的注视跟踪的设备、系统和方法。
在一些实施方式中，诸如点源之类的光源（例如，使用预定义图案）可以嵌入显示器中，或者安装在显示器上，或者使光穿过显示器。在一个示例中，来自显示器处的IR光源的IR光被成像到视网膜上（例如，使用目镜和眼睛光学部件）以产生由凝视跟踪图像传感器可见/可检测的图案。例如，检测到的红外光图案覆盖在视网膜图像上。内容显示器和视线跟踪图像传感器之间的相对定位的变化将导致投影的IR图案和同一视线跟踪图像传感器所看到的视网膜图像之间的相对变化。
在一些实施方式中，可以在工厂的设备生产期间通过利用凝视跟踪图像传感器校准照明图案来生成视网膜图像（例如，在工厂注册期间的初始对准中）。在一些实施方式中，检测和/或校正显示器和凝视跟踪图像传感器之间的后续未对准。因此，可以减少或消除来自未对准的基于视网膜成像的凝视跟踪误差。
在其他实施方式中，一种方法包括经由图案光源产生光图案，其中图案光源与产生显示内容的内容光源具有空间关系。在一些实施方式中，在传感器处接收传感器数据，其中传感器数据包括与使用视网膜成像检测到的光图案的至少一部分相对应的数据。在一些实施方式中，确定内容光源和传感器之间的对准特性，其中对准特性基于空间关系和传感器数据，并且眼睛特性基于传感器数据和对准特性来确定。
苹果的专利图。下面的图2是HMD的概述；如图。图3是示出用于对准HMD中的注视跟踪系统的示例性内容显示系统的框图。
苹果的专利图。上面的图4是示出了包括与视网膜特征相结合的光图案的一部分的示例图像的图；如图。图6是示出基于校正内容显示组件和跟踪组件之间的未对准的视网膜成像技术来跟踪用户凝视的示例性方法的流程图。
译自：patently apple
Chinese 
English