苹果眼球追踪专利：结合场景相机和3D测绘来识别注视点的3D坐标

6月15日消息，USPTO公布了一项来自苹果的眼球追踪专利，专利中指出了一种在3D物体上定位人眼注视点的方案，特点是结合眼球追踪数据、头部追踪数据、3D场景结构表示、计算数据，可识别注视点在2D平面和3D场景的位置。

据青亭网了解，在WWDC 2023现场体验过Vision Pro的很多人都对眼球追踪体验称赞不已，该技术在延迟、灵敏度、准确度上的表现相当优秀，几乎远超市面上同类技术。也许在这项专利（编号US11676302B2）中，可以多少了解Vision Pro背后的秘密武器。

原理方面，该专利将注视点方向在3D场景上展示，并通过聚散特性来计算注视点终点，以及和虚拟对象的交叉点，从而准确定位用户观看的位置。接着，系统会识别距离注视点位置最近的3D对象，并识别为用户的观看/选定意图。

硬件方面，则包括场景相机（随机捕捉多个场景图像）、3D映射模块。该技术可用于头戴式眼球追踪仪器，也可以用于XR头显中，并结合头显的头部追踪功能来识别注视点坐标。