乔治亚理工学院、莱斯大学与Meta合作开发全新眼动追踪系统- XR导航网最新消息

基于摄像头的眼动追踪在AR/VR系统中扮演着重要角色，但目前存在一些限制，如体积尺寸、吞吐量，以及摄像头与后端系统之间的高通信成本。

近日，美国佐治亚理工大学、莱斯大学和Meta的团队进行了一项研究，他们研发出一种全新的眼动追踪系统，旨在通过结合无透镜摄像头、专有算法和加速处理器设计来克服这些限制。

研究人员指出：“目前的VR头显太重，游戏可能存在滞后，而使用控制器会很麻烦。综合起来，这会让用户无法获得真正的沉浸式体验。”

因此，团队提出了名为EyeCoD的新系统。通过使用编码的二进制掩模代替对焦透镜，FlatCam可以比传统基于透镜的摄像头薄5倍～10倍。这种掩模对入射光进行编码，而不是直接聚焦，通过计算解码传感器测量的编码信息，从而重建捕获图像。

此外，由于系统的形状参数减小，使得后端眼动追踪处理器可以更靠近前端摄像头，从而减小了摄像头与处理器之间的距离，降低了整个系统延迟的通信成本。

EyeCoD系统的另一个特点是，它只将用户眼睛注视的位置设置为高分辨率。通过预测用户的注视点并即时渲染这些区域，系统实现了高分辨率。这种方法不仅节省了计算成本，还通过专用加速器提高了处理速度和效率。

通过结合FlatCam，团队提出的系统在保持眼动追踪算法准确性的同时，以更小的尺寸和更高的效率进行眼动追踪。另外，系统不采用基于透镜的摄像头，增强了用户的隐私。

值得一提的是，团队在2023年获得了斯坦福技术授权办公室的25000美元拨款，以帮助项目实现商业化。他们计划利用这笔资金将目前的演示集成到一个紧凑的眼动追踪系统中，并将其用于商业VR/AR头显。