出品丨93913媒体中心
撰文丨Wayne
编辑丨时尘星
随着元宇宙概念持续升温,作为元宇宙自然交互体系重要环节,眼球追踪技术正受到前所未有的重视。近两年来,高通、英伟达、Meta、索尼等巨头纷纷针对这一关键技术展开战略性布局。
另一方面,国家针对眼球追踪技术的新政策也已经开始实施。日前,工信部、教育部、文化和旅游部、国家广播电视总局、国家体育总局等五部委联合发布《虚拟现实与行业应用融合发展行动计划(2022—2026年)》,明确指出要围绕感知交互(眼球追踪、手势追踪等)、渲 染处理、近眼显示等关键技术的融合创新,实现虚拟现实在经济社会重要行业领域的规模化应用。
种种迹象表明,眼球追踪技术已处于大规模应用的前夕。而在这一节骨眼上,与XR产业链上诸多重要玩家都建立了合作的眼球追踪技术解决方案商七鑫易维(7invensun)于11月初宣布,已完成新一轮亿级人民币融资,稳居国内眼球追踪市场鳌头地位。近日,93913专门采访了七鑫易维副总裁路伟成,以进一步了解眼球追踪技术的价值和市场的进展。
多年来,七鑫易维持续投入研发,已拥有软硬件和光学领域的近五百项专利,其中三分之二以上是发明专利。在不断探索眼球追踪潜力的过程中,七鑫易维逐渐成长为国内唯一具备全栈自研及制造能力的眼球追踪解决方案商。
在2009年成立之初,七鑫易维的眼球追踪技术主要用于眼动沟通辅具,让人可以仅凭眼球动作控制设备与人交流,造福了不少渐冻症患者。根据新京报的报道,渐冻人王甲仅靠眼球转动,独自撰写出了2本书,背后依赖的正是七鑫易维提供的眼控沟通辅具aSee AIO。
不过,虽然眼球追踪在医用领域价值非凡,但市场容量有限,并不能充分体现这一技术的价值。与之相比,对自然交互技术有刚性需求的XR,让七鑫易维看到了眼球追踪的更多可能性。于是,当科技领域掀起XR创业热潮时,这家公司成为了行业早期探索者中最为坚定的一员。
2016年,正是Oculus、HTC、索尼和三星在VR领域大施拳脚的时候,产业链上下都在为VR设备的每一点进步而欢呼雀跃。彼时,七鑫易维便推出了可适配于VR头显的眼球追踪模组,率先将眼球追踪这一全新的交互方式带到了XR领域。
之后,七鑫易维开始了眼球追踪技术在更多商用领域的探索。如今,七鑫易维的产品及解决方案已覆盖XR眼动、眼动分析、眼控沟通辅具等主要应用领域,精准度、可用性等核心技术指标均达全球领先水平。
对于眼球追踪而言,由于每个用户的眼球特征各不相同,精准度和可用性是衡量技术水平的核心指标。为了提高这些指标,眼球追踪算法需要经过大量用户数据训练。而七鑫易维多年来已经积累了千万级的用户数据,其眼球追踪技术的可用率达到了98%。相比之下,这一数值的国际相关标准仅为94%。
不知不觉间,七鑫易维在眼球追踪的技术、产品等方面都构筑起了高高的壁垒。
不管是巨头公司积极拥抱眼球追踪技术,还是国家政策的倾斜,都证实了这一技术对于XR行业的价值。路伟成认为,相比起在沟通辅具等传统方向的应用,眼球追踪技术对于XR价值的体现更加多元化,核心是解决三个痛点——交互方式不自然,对硬件需求高以及提升体验困难。
“眼口手将是未来元宇宙里的三大自然交互手段,而眼睛是最重要的。”路伟成表示,未来元宇宙必将采用更为自然的交互手段,在可见的三大选项中,语音交互方案在捕获声音时难以避免其它声音的干扰,手势交互方案在捕获手势影像时也容易受到其它人或物的干扰,而眼球追踪方案是在头显内侧通过近距离的红外相机计算眼球转动数据,对外部环境基本没有要求,因而效果非常稳定,是更加理想的交互手段。
注视点渲染算得上是眼球追踪技术在VR领域的一个极具价值的应用方向。实现视网膜级别的显示效果是VR行业正不断追求的极限。根据AMD相关的研究,人眼的视场角的极限理论上能达到水平200度,竖直135度。按照人眼视网膜中间凹约60PPD(角分辨率)来计算,双眼可视范围内最高分辨率可达到1亿1600万像素,而最接近1亿1600万像素的分辨率是24K。这对于采用移动处理器的VR而言,或许在很长一段时间内都没有实现的可能。
“从28纳米到14纳米,再到现在的7纳米、5纳米,芯片的生产工艺越往下做越难。这意味着,只能通过优化软件来减轻对处理器的负担。”路伟成说,人眼看东西时是中间清晰周围模糊的,而注视点渲染技术正是能够模仿视网膜效果仅对用户注视区域进行局部渲染的技术。这种技术能在不降低观看体验的前提下,大大降低渲染对性能的要求,“在注视点渲染角度为20度的时候,节约的功耗约为50%,随着渲染角度进一步减少,节约的功耗比率还会更高。”
“注视点渲染技术不仅能降低消耗,甚至还能提升VR体验。”路伟成告诉93913,英伟达采取对注视点进行渲染效果的增强,让该区域的画质比平均画质渲染得更高,让用户看到的画面更为生动、逼真。
利用眼球追踪技术提升VR体验的方式还有很多。路伟成举例说,沉浸式环境里,用户的视野和操作都是全方位的,行为数据非常庞杂,不利于内容开发者判断用户偏好以优化体验。这个时候,眼球的运动数据是最能体现人关注点的行为数据,能够用于判断用户的偏好,并针对性优化内容,提升体验,对于电商消费和广告营销的价值更是毋庸置疑。
换言之,眼球追踪技术不仅拓展了XR的交互方式,为硬件性能不足给出了可靠的解决方案,还能助力内容体验提升,展现出对XR的巨大价值。
多年来,七鑫易维持续深耕眼球追踪技术,大大拓展了该技术在各个领域的应用,已经服务了XR、教育、科研、医疗、汽车、机器人、工业、航空航天等行业的数百家标杆客户。
七鑫易维的业务主要分三类。第一类是为高校和科研机构等提供软硬件一体的眼动数据分析解决方案;第二类是为XR企业提供眼球追踪的能力;第三类是销售医疗沟通辅具。
路伟成透露,近两年,XR领域的业务增速较快,预计到2023年将超过传统领域的眼动数据分析业务,成为七鑫易维营收的最主要来源。
除此之外,七鑫易维正在跟宝马等车企联合探索眼球追踪技术在驾驶员安全监控系统(DMS)里的应用,也跟主流的PC和手机厂商在探索结合眼球追踪技术的安全认证。眼球追踪技术的更多应用场景有待进一步发掘。
在XR领域,领先的硬件厂商早已纷纷找上门来,要在下一代硬件产品中增加七鑫易维的眼球追踪模组。这些产品将在2023年陆续上市。
六年前,七鑫易维发布的第一代XR眼动模组,是个额外附加在HTC Vive头显上的配件。如今的产品,已告别了当初配件的形式,更多地被集成到VR眼镜之中,消费者甚至感受不到它的存在。
“眼球追踪的奇点快到了。”路伟成表示,七鑫易维见证了眼球追踪技术的渗透率逐年上升,2023年这些带有眼球追踪功能的主流产品陆续推出,将成为市场的一个重要拐点,势必带动中小企业迅速跟进。他判断,到2024年,眼球追踪功能将覆盖百分八十的硬件新产品,并最终实现全面覆盖。
“让更多的人用到眼球追踪技术非常有意义,因此跟硬件厂商的合作将是我们近期的重点。”路伟成透露,七鑫易维已经布局了一些新的技术路线,以应对日新月异的市场,成果将于今年陆续发布。
原文始发于微信公众号(93913虚拟现实网):七鑫易维路伟成:奇点已到,眼球追踪将成XR标配