2021 年底,微软和三星签署了一项有关混合现实耳机和智能眼镜的多年项目。三星于 2019 年收购了智能眼镜公司DigiLens。下面是 DigiLens 视频。
虽然尚不清楚微软-三星 MR 智能眼镜项目具体涵盖哪些内容,但我们确实知道微软在该项目开始后不久就申请了与未来智能眼镜相关的专利。
2024 年 1 月 11 日,世界知识产权组织 (WIPO) 公布了两项有关智能眼镜的微软专利。第一项专利的标题是“根据眼睛位置操作眼动仪摄像头”。
在微软的专利背景中,他们指出,头戴式系统(HMS)(例如智能眼镜)需要重量轻,并且具有最小且不张扬的外形尺寸,以便适合广泛的日常使用。此类系统上的头戴式显示器(例如增强现实和虚拟现实显示器)通常利用眼动追踪来增强用户体验并使其更加高效。
可以使用各种类型的设备来测量眼睛,以便为眼睛跟踪提供信息。可以在眼睛跟踪系统中使用的设备类型的一些示例包括光电传感器眼描记设备、眼电描记设备、光流传感器、范围传感器和相机。
需要一种方法来利用多种类型的设备来提高眼动追踪的效率,同时保持 HMS 的外形尺寸适合广泛用户采用,他们的专利提供了解决方案。
微软专利的某些方面涉及利用摄像头和其他可以提供指示眼睛位置的测量值的设备,以提供有效的眼睛跟踪。在一些实施例中,头戴式系统包括头戴式相机和进行指示用户眼睛位置的测量的头戴式设备两者。可从图像追踪的眼睛位置的第一范围比可从测量追踪的眼睛位置的第二范围窄。
在一个实施例中,计算机基于测量结果以比头戴式相机捕获图像的速率至少高十倍的速率来计算眼睛位置。
微软的专利图。下面的图1示出了包括光电传感器眼图描记装置(PSOG)和相机的眼睛跟踪系统的实施例;如图。图2A示出了具有PSOG的智能眼镜,其利用多个光源和多个检测器;如图。图2B示出了跟踪双眼的智能眼镜上的眼睛跟踪系统的实施例。
微软的专利图。上面的图9B示出了使用多个头戴式摄像机进行眼睛跟踪的实施例。
微软的专利图。下面图11A示出了根据不同眼睑位置设置的不同感兴趣区域(ROI);如图。图11B示出了基于眼睛睁开的程度选择性地发出捕捉图像的命令。
微软的两项关于眼球追踪的专利都非常详细。工程师和高级开发人员可能会欣赏这些专利申请的深度。第一个名为“根据眼睛位置操作眼动仪摄像头”的专利可以在这里找到。第二项专利名为“基于眼睑位置的高效图像捕获”,可以在这里找到。
看起来,苹果在 WWDC23 上推出的 Apple Vision Pro为微软的 HoloLens 设备计划注入了一颗子弹。微软可能希望重新设计他们的头显,瞄准新兴的空间计算领域,并与三星、谷歌和高通合作,希望能够挑战苹果的 Vision Pro,因为 HoloLens 失败了。
同样,微软与三星合作开发未来的智能眼镜是另一个迹象,表明他们可能希望在苹果之前加入这场消费者智能眼镜的竞赛。前首席执行官史蒂夫·鲍尔默(Steve Ballmer)完全低估了iPhone对世界的影响,并在2007年嘲笑苹果的设备。微软收购诺基亚就是为了消灭苹果的iPhone,我们都知道这是一场历史性的灾难。
微软永远不希望苹果再次享受这种巨大的成功,如果他们能帮助的话,所以他们的目标很可能是在智能眼镜市场上击败苹果。话又说回来,微软首先推出了 HoloLens,这是一款 AR/MR 耳机,但从未作为消费设备获得关注。因此,微软在智能眼镜市场上击败苹果,确实不会让苹果公司的任何人彻夜难眠,这是肯定的。
Translated from: patentlyapple