昨天,美国专利商标局正式公布了苹果公司的一项专利申请,该专利申请涉及其名为 Vision Pro 的先进空间计算机,该计算机使用空中手指和手势来控制 VisionOS 3D XR 环境中的元素。我们的报告还链接到今天发布的另外两项 HMD 相关专利,涉及凝视控制等。
苹果透露有 5,000 项专利支持 Apple Vision Pro,有时对细节的关注简直令人难以置信。难怪苹果的各个研发团队花了 17 年或更长时间才实现了明天在美国苹果商店发售的下一代计算技术。
用于处理三维环境输入的设备、方法和图形用户界面
苹果的发明涉及为用户提供扩展现实(XR)体验的用户界面。 Apple 专利申请中描述的系统、方法和 GUI 以多种方式改进了用户界面与虚拟/增强现实环境的交互。
在一些实施例中,响应于检测到用户的凝视输入指向用户界面元素,计算机系统确定用户的手是否处于预定义的配置。如果是,则计算机系统将关于凝视输入的手势信息提供给用户界面元素,并且当凝视输入移动时提供给随后的用户界面元素,只要用户的手保持在预定义的配置中。如果不是,则计算机系统不向用户界面元素提供关于注视输入的姿势信息。
要求用户的手处于指示准备好交互的状态,以便提供有关凝视输入的手势信息,并基于凝视输入指向的位置向不同的目标提供手势信息,确保有关输入的手势信息提供给用户明确表明交互意图的软件。
在一些实施例中,计算机系统对于指示用户准备好交互的输入确定该输入是请求直接操纵还是间接操纵。如果直接操纵,则根据用户的手的位置来确定输入的目标。如果是间接操纵,则根据用户注视的方向来确定输入的目标。基于用户的手或其一部分的位置选择直接操纵输入的目标提供了直接操纵目标的直观方式,并且基于用户凝视的位置选择间接操纵输入的目标使得能够进行间接操纵模式来扩展用户可以交互的目标范围。
在一些实施例中,计算机系统将关于输入的手势信息提供给与输入的目标相关联的软件,如果附加手势信息可用,则具有关于输入的附加手势信息可用的指示,或者如果附加手势信息可用则不具有指示信息不可用。提供关于输入的一组有限的手势信息以及关于输入的附加手势信息是否应请求可用的指示通过减少默认提供的信息量来更有效地提供关于输入的信息,同时支持提供更全面的信息关于需要并明确请求附加信息的软件的输入。
苹果的专利图。下面的图 7C3 展示了物理环境#7000 中用户#7002 的俯视图。在一些实施例中,当用户的手#7020位于 HMD#7100a 的一个或多个传感器的视野内(例如,在用户的视野内)时,用户的手的表示会显示在用户中HMD 显示屏上显示的界面。
苹果公司的专利图。下面的7J1和7K1示出了用于消除三维环境中对象的直接操纵和间接操纵之间的歧义的示例技术。如图。图7J1涉及手势的注视位置,而图7J1涉及手势的 注视位置。 7K1涉及手部位置的手势信息。
苹果的专利图。上面的图7L示出了由用户执行的输入的移动量和包括在关于传送到与输入的目标相关联的相应软件(例如,软件应用程序或系统软件)的输入的信息中的输入移动量之间的示例关系。输入。
图70的手势信息7040上面的图7M表示通常至少部分地传送到与接收到的用户输入的目标相关联的软件(例如,应用程序或系统软件)的信息。在一些实施例中,手势信息(例如手势信息#7040)使用系统提供的框架(例如应用程序编程接口(API))传递到软件(例如,将其他类型的用户输入(例如空中手势)转换为触摸输入)。
该专利接着描述了“放大手势”、“旋转手势”、“旋转手势 3D”、“拖动手势”等等。
Translated from: patentlyapple