昨天,美国专利商标局正式公布了苹果公司的一项专利申请,该专利申请总体上与姿势感知相关,特别是涉及分层姿势感知的系统、设备和方法。姿势会影响向用户呈现 3D 内容的方式,并改变空间音频的音量。
苹果在其专利背景中指出,许多人在工作和非工作时间可能会在计算机或其他设备上花费大量时间。使用计算机或其他设备的时间可能会对所述人的姿势产生负面影响。
分层姿势意识的方法和装置
苹果专利申请中公开的各种实现包括用于分层姿势感知的设备、系统和方法。根据一些实施方式,该方法在包括非暂时性存储器和一个或多个处理器的计算系统处执行,其中该计算系统通信地耦合到诸如HMD或智能眼镜之类的显示设备以及一个或多个输入设备。
该方法包括:在呈现三维(3D)环境时,通过显示设备获得与计算系统相关联的用户的头部姿势信息;根据头部姿势信息确定用户的累积应变值;根据确定用户的累积应变值超过第一姿势感知阈值:基于与用户相关联的高度值和与3D环境相关联的深度值来确定虚拟内容的位置;通过显示设备在确定的位置处呈现虚拟内容,同时继续通过显示设备呈现3D环境。
在一些实施方式中,显示器对应于透明镜片,并且电子设备对应于用户佩戴的一副眼镜。因此,在一些实现中,眼镜通过将XR内容投影到显示器上来呈现用户界面,该XR内容又覆盖在用户的物理环境上。在一些实施方式中,用户佩戴诸如近眼系统的电子设备。在此类实施方式中,眼镜通过在一个或多个显示器上(在眼镜上)显示对应于XR环境的数据或者通过将对应于XR环境的数据投影到用户的视网膜上来呈现XR环境。
在一些实现中,控制器(下面图 2 中的#110)和/或眼镜使用户的 XR 表示基于运动信息(例如,身体姿势数据、眼睛跟踪数据、手/肢体)在 XR 环境中移动。来自物理环境中的眼镜(或 HMD)和/或可选远程输入设备的/手指/四肢跟踪数据等。
苹果的专利图。下面的图2是示例控制器的框图。
如专利图所示。如图4D所示,当前应变信息#480包括:与第一肌肉或肌肉群/区域相关的肌肉信息#482A;与第二块肌肉或肌肉群/区域相关的肌肉信息#482B;与第三块肌肉或肌肉群/区域相关的肌肉信息#482C;与第四肌肉或肌肉群/区域相关的肌肉信息#482D;与第五块肌肉或肌肉群/区域相关的肌肉信息#482E;和当前累积的应变信息#486。
为此,在各种实现中,肌肉应变引擎#463 包括头/身体/颈部力学引擎#462 和应变分析器#464,具有应变增加逻辑#465A和应变减少逻辑#465B。
肌肉应变引擎#463分别确定用户的肌肉或肌肉群/区域#484A-E的当前肌肉应变值(#485A、485B、485C、485D和485E)。此外,肌肉应变引擎根据用户#150的旋转和/或平移运动随时间更新(增加或减少)肌肉应变值485A-E,触发应变增加逻辑#465A和/或应变减少逻辑#485A-E。 465B。
在一些实现中,姿势意识引擎#468A被配置为确定/生成分层姿势意识反馈#469。
分层姿势感知系统与智能眼镜或头戴式显示器进行通信,以便当用户倾斜头部时,内容将相应地反映在设备屏幕上。其次,如果用户的姿势可能影响他们的健康,智能眼镜或头显系统可能会与用户进行通信。
关于后一点,苹果公司指出,“根据当前累积应变值超过第三姿势感知阈值的确定,电子设备会通过显示屏呈现一条警报通知,表明用户在呈现姿势时肌肉过度紧张。” 3D 环境。
在一些实施方式中,电子设备120在3D环境内的默认位置处或以默认方式呈现警报通知(例如,位于显示器中央的弹出通知、邻近显示器顶部边缘的横幅通知或类似。”
苹果提出的另一点是:“根据某些实现,空间音频效果的一个或多个属性(例如音量、相对于用户的距离等)基于当前累积应变的大小这样,在一个示例中,空间音频效果的音量随着累积的颈部应变的增加而增大,并且空间音频效果的音量随着累积的颈部应变的减小而减小。作为另一示例,空间音频效果的音量随着累积的颈部应变的减小而减小。随着累积颈部应变的增加,效果相对于用户而言会减小,并且随着累积颈部应变的减小,空间音频效果相对于用户的距离会增加。”
苹果的专利图。下面的图4A是数据处理架构的第一部分的框图;如图。图4B示出了示例数据结构。
苹果的专利图。下面的图4C是数据处理架构的第二部分的框图。
如果说有什么不同的话,那就是这项专利的深度令人难以置信。除非您是一名工程师、高端开发人员或像电影《黑客帝国》中那样的代码阅读器,否则您肯定会掉进兔子洞并迷失方向。