美国专利商标局正式授予苹果一项重要眼动追踪专利，涉及注视终点确定方法和装置，特别是用于确定对象在空间中的三维物体的注视端点。
一种确定三维物体注视点的方法和装置
苹果专利涵盖了一种用于确定受试者注视端点的系统，该系统包括：眼动追踪单元，适用于确定受试者一只或多只眼睛的注视方向；头部追踪单元，适于确定位置，包括头部和/或眼动追踪单元相对于参考坐标系的位置和方向；3D场景结构表示单元，其通过参考坐标系中的坐标通过它们的3D位置和/或它们的3D结构来表示现实世界场景的对象，以表示现实世界场景和场景中包含的对象从而提供场景3D结构表示；计算单元，用于基于注视方向、眼动仪位置和3D场景结构表示计算注视端点，和/或用于基于注视方向、眼动仪位置和3D场景结构表示确定受试者所注视的3D场景中的物体。
根据一个实施例，该系统包括用于计算场景的3D结构表示的对象上的注视端点的模块，其中基于注视方向与3D结构场景表示中的对象的交集来计算所述注视端点。
注视方向与3D表示的交集提供了一种几何方法，用于计算注视“击中”或与3D结构相交的位置，从而提供真实的注视端点，从而可以确定场景3D对象上的真实注视端点。
根据一个实施例，该系统包括用于基于对象的两只眼睛的注视方向的交点计算注视端点的模块，和/或用于基于计算的注视端点确定对象注视的对象模块以及现实世界场景的对象3D位置和/或3D结构。通过使用聚散度来计算对象眼睛注视方向的交点，可以确定注视终点。然后可以使用该注视端点来确定用户正在注视的对象。
根据一个实施例，通过选择其3D位置和/或结构最接近计算注视端点的对象，将被注视的对象确定为对象正在注视的对象。
根据一个实施例，适于确定所述对象的所述一只或多只眼睛的注视方向的所述眼动追踪单元适于确定所述一只或多只眼睛的所述注视方向的概率分布，并且其中所述计算单元用于确定被注视的对象基于注视端点的概率分布为一个或多个对象确定所述对象被注视的概率。
根据一个实施例，该系统还包括：场景相机，适于从任意视点获取场景的一个或多个图像；用于将3D注视端点映射到场景相机拍摄的场景图像的图像平面上的模块。
这样不仅可以确定3D结构上的3D注视端点，还可以确定场景相机拍摄的任意场景图像上的对应位置。这允许确定相机从任意视点拍摄的场景图像中的凝视点，换言之，形成任意位置。
根据一个实施例，场景相机的位置是已知的或通过一些位置确定或对象追踪机制来确定，并且映射是通过将3D注视端点投影到所述场景相机的图像上来执行的。
苹果专利图2示意性图示了注视终点确定系统。
来源：patentlyapple
