点击蓝字 关注我们
眼动追踪技术一直是 XR 头显的核心交互方式之一,但头显稍微移位,追踪性能就会下降。有没有一种方法,能让你校准一次、终身受用?
海外知名 XR 测评人、XR 网站 The Ghost Howls 主理人 Skarredghost 在上海 VR/AR 产业博览会上,结识了 Immersix 这家初创公司,后者正在用一种截然不同的思路做眼球追踪——不追踪瞳孔,而是追踪视网膜。
以下为编译内容,为便于阅读,部分表述有调整。
图源:Immersix
不走寻常路:
别人追瞳孔,它追视网膜
目前市面上几乎所有的眼动追踪方案,都在追踪瞳孔。Immersix 却选择了一条完全不同的路——追踪用户的视网膜。
按照这家公司的说法,追踪视网膜相比传统方案有几个大的优势:
视网膜对每个人都是独一无二的,因此可以用于身份认证,而且极难伪造;
视网膜几乎不随时间变化,所以眼动校准只需要做一次,之后可以一直用;
视网膜是眼睛的 " 绝对真值 ",无论眼镜在头上怎么移动,一次性校准始终有效——哪怕你摘下再戴上,也不用重新校准;
追踪精度可以非常高;
模块可以做得非常小(只需靠近鼻梁的两个微型模块),功耗极低(不到 10mW),速度极快(最高 120Hz)。
这几乎解决了当前 MR 头显眼球追踪的所有痛点。比如,我本人就很烦一件事:头显戴上摘下几次后,眼球追踪性能就下降,不得不重新做一遍无聊的校准。用 Immersix 的方案,理论上这种麻烦就不存在了。
它是怎么工作的?
Immersix 的思路非常巧妙。
每个眼睛的追踪模块,只由一个摄像头和一个红外 LED 组成,用于照亮眼睛。注意,一颗 LED 就够了,所以模块可以比那些需要一圈 LED 的传统方案小得多。
在校准阶段,用户需进行一些眼动。每个摄像头模块都看着眼睛,但它不是聚焦在外部,而是试图 " 看进去 "。摄像头由此获得视网膜随时间变化的数据。
校准的设计思路是:让眼球的各个方向的运动,一步步地把整个视网膜暴露给摄像头。软件随后重建完整的视网膜图像,并提取出它的完整 " 指纹 "。软件校准实际上重建了用户视网膜的完整特征图。而由于视网膜不会随时间变化(至少在你变得非常老之前),这张图可以沿用很多很多年。
校准之后,系统如何主动追踪眼睛呢?此时,每个摄像头仍然看着自己的那只眼睛,特别是当前眼球朝向下能看到的那块视网膜区域。利用 Immersix 提出的一种特殊算法,将这块可见的小视网膜区域与校准阶段重建的完整视网膜图进行匹配,就能找到精确的眼球朝向。
据 Immersix 称,这种追踪非常精确(他们声称达到亚度级精度)。而且,由于摄像头追踪的不是瞳孔相对眼镜的位置,而是试图追踪眼球相对视网膜的绝对旋转;追踪对摄像头的移动极不敏感。所以,你可以随意戴上摘下眼镜,眼球追踪继续工作,无需任何重新校准,哪怕每次的位置和朝向都略有不同。
上手体验:它真的管用吗?
好了,你现在肯定想知道,它是否真如宣传的那样。
公司的一位代表让我到后台去试他的方案。他不让我录制任何东西,所以我用官方提供的一些视频和图片来帮助传达我的体验。
我拿到了几副装有 Immersix 技术的眼镜框。它们不是智能眼镜,也不是 AR 眼镜,只是用来测试追踪技术的镜框。我能清楚地看到电路,所以我测试的不是产品,而是原型。这显然是一个带开发套件的技术演示。
戴上这副特殊的眼镜后,它被连接到一台笔记本电脑上。这时,眼球追踪校准程序启动了。我可以在笔记本屏幕上看到一些大的标记(可能是 ARuco 标记),中间有一个小的红色矩形。这些标记显然是为了让原型眼镜追踪屏幕位置:由于这个技术演示无法在设备上完成校准(如前所述,没有 AR 或 VR,只有镜框),它必须在笔记本电脑上校准,所以眼镜需要知道笔记本屏幕在哪里。我猜,如果这个软件直接装在眼镜上,这些标记就不需要了。
总之,有一个与我的眼睛关联的小指针,通过移动眼睛,我可以移动这个小指针。我的任务是在屏幕上扫视这个指针,完全擦除那个小矩形。这就像在 MS Paint 里用一个小半径的橡皮擦工具擦除一个矩形。我不得不反复来回移动眼睛来擦除矩形好几次。我感觉越往前走,眼指针越 " 滞后 ",所以我不得不更用力地左右移动眼睛来擦除小矩形。这可能是有意为之,让我把眼睛移到更侧面的位置,以便摄像头能记录我视网膜的所有区域。
校准持续了几分钟。很容易理解,但比我预期的要长一些,而且最后几秒指针移动时让我眼睛有些疲劳。
之后,我的眼球追踪就可以开始了。为了证明我的眼动追踪有效,Immersix 的工作人员启动了另一个应用,我看到另一组 ARuco 标记,以及笔记本电脑屏幕上的红色圆圈网格。我可以看其中一个圆形让它变成蓝色。这证明了眼动追踪是有效的。我得说,效果相当不错。 准确度确实很高,而且我看的元素颜色总是在变化。挺酷的。
当然,我无法验证亚度级精度或 120Hz 帧率的说法。但我可以证明,系统确实如宣传的那样工作,至少对于类似 Apple Vision Pro 来说是这样。这已经是个很好的结果了,因为当前有些眼动追踪方案甚至连这种都应付不了。
我还可以稍微移动眼镜,检查系统是否能在没有重新校准的情况下正常工作。在我的快速测试中,效果也不错。
最后的印象:很有前途,但隐私堪忧
Immersix 的方案让我真的很惊讶。这是一种做眼球追踪的新方式,可以消除校准问题,并允许创建体积小、低功耗且精确的眼动追踪模块。
我的上手体验证明它确实有效。我只有几分钟时间试用,只能做技术演示,没法在真实的增强现实设备上做大量测试。所以,我的判断应持保留态度。但我用它做的测试确实是积极的,所有效果也完全符合宣传。
我唯一的担忧的可能就是隐私问题。这个方案必须完整扫描我的视网膜,这意味着有人要存储我视网膜的完整数据。但这个问题可以通过将数据保存在本地来解决,这样它就不会离开用户的设备。
我认为这是一个非常有前景的产品,如果我是做头显和眼镜的公司(比如 Meta、Pico 等),我肯定会跟这些人聊聊,评估他们的解决方案。评估套件可供购买,你可以通过其网站联系这家公司索取。
注:本文基于海外 XR 网站 The Ghost Howls 主创、知名 XR 测评人 Skarredghost 现场上手体验编译整理,部分细节有所调整。
原文作者:Skarredghost
原文标题:
Hands-on: Immersix may revolutionize eye tracking with its accuracy
原文链接:
https://skarredghost.com/2026/08/19/immersix-eye-tracking-impressions/
文 / Vivi
商务合作|
爆料投稿|
媒体合作|
往期精彩推荐
VR / AR 星球


登录后才可以发布评论哦
打开小程序可以发布评论哦