在今年的 WWDC23 上推出 Apple Vision Pro 期间，苹果推出了一项名为 Eyesight 的特定功能。苹果的营销材料指出，“Apple Vision Pro 可以帮助你与周围的人保持联系。EyeSight 会显示你的眼睛，让附近的人知道你何时正在使用应用程序或完全沉浸在体验中。当有人靠近时，Apple Vision Pro 会同时让你看到那个人并向他们展示你的眼睛。”
从技术上讲，苹果公司的 Mike Rockwell 是这样描述 Eyesight 的：“我们还认真思考了其他人在佩戴 Vision Pro 时如何与你互动。Eyesight 采用独特的曲面 OLED 面板和双凸透镜，将您眼睛的正确视角投射给每个看着您的人。结果是 3D 显示使设备看起来透明。”Rockwell 继续描述了 Vision Pro 的注册过程如何创建与 Vision Pro 用户极其相似的用户头像。
上周末在欧洲发现的一项微软新专利于 2023 年 11 月 16 日发布，标题为“控制计算机生成的面部体验”。
微软指出，他们的发明涉及显示计算机生成的面部表情。一个示例提供了一种用于显示计算机生成的面部表情的方法。该方法包括接收表情数据，以及至少基于该表情数据生成用户的眼睛区域的一个或多个面部表情。该方法还包括在头戴式设备的朝外显示器上显示眼睛区域的一个或多个面部表情。
微软的专利图。下面的图11A和11B示出了示例场景，其中头戴式设备上的面向外的显示器被激活并且打开显示器上的计算机生成的面部表情，尤其是在眼睛区域中。
微软的专利图。上面的图12示出了被配置为显示计算机生成的面部表情的示例头戴式设备的框图；如图。图13示出了显示计算机生成的面部表情的示例方法的流程图。
该专利中公开的示例涉及利用包括一个或多个面部跟踪传感器的面部跟踪传感器系统来控制计算机生成的面部表情的显示。
此外，随时间从每个面部跟踪传感器接收值，并且基于接收到的数据确定每个面部跟踪传感器的值范围，该值范围包括在一段时间期间（例如在滚动时间期间）接收到的最小和最大值窗户）。处理值范围和输入传感器值以将输入传感器值转换为混合形状映射，其中混合形状映射对应于值范围内的传感器值的位置。
然后，至少基于混合形状映射来确定表达数据，并将其提供给一个或多个设备以进行呈现。通过这种方式，可以一起使用一组面部跟踪传感器来感知用户表情的整体近似度，从而控制以虚拟形象的形式呈现的表情。化身可以呈现给除传感器设备的用户之外的其他人。这可能有助于 AR（增强现实）和/或 VR（虚拟现实）环境中的人际交流。
有关此内容的更多信息，请查看完整的欧洲专利#WO/2023/219685。微软的专利强烈表明他们可能正在开发 HoloLens 之外的 XR 耳机。如今的 HoloLens 允许外部人员看到 HoloLens 用户的眼睛。所以这个发明显然不适合HoloLens。
2022 年 8 月，Patently Apple 发布了一份 IP 报告，显示Facebook 发明了一种在耳机中查看用户眼睛的方法，如下面的专利图所示。
译自：PatentlyApple
Chinese 
English