美国专利商标局正式公布苹果一项专利申请,描述了一种个性化的眼睛模型,其中包含隐私和安全敏感信息,以及当用户未登录设备时如何将其存储为加密数据。
XR系统包括HMD,HMD包括用于捕捉用户环境的静态图像或视频帧的一个或多个摄像头。 HMD包括位于眼睛前的透镜,佩戴者可通过该透镜观看环境。在XR系统中,虚拟内容可以显示或投影到这些镜片上,以使佩戴者可以看到虚拟内容,同时仍然能够通过镜片查看真实环境。
在系统中,HMD内置视线追踪技术。在示例凝视跟踪系统中,一个或多个红外(IR)光源向用户眼部发射IR光;一部分红外光从眼睛反射并被眼部追踪摄像头捕获;由眼部追踪相机捕获的图像可被输入到例如由HMD控制器的一个或多个处理器实现的闪烁和瞳孔检测过程;该过程的结果被传递到注视估计过程,例如由控制器的一个或多个处理器实现,以预估用户的当前注视点;这种注视追踪方法称为PCCR(瞳孔中心角膜反射)追踪。
在此类系统中,在初始校准或登记过程期间,可以从如上所述捕获的眼部一个或多个图像生成用户眼睛的多维个性化模型。然后,该个性化眼睛模型可以在各种算法中使用,例如在设备使用期间的凝视估计过程中。个性化眼睛模型可包括诸如角膜表面模型、虹膜和瞳孔模型、眼睛中心、入瞳、瞳孔或光轴(穿过几何眼睛中心和入瞳的矢量)以及之间的卡帕角等信息。
个性化眼睛模型包含隐私和安全敏感信息,因此当用户未登录到设备时被存储为加密数据。在设备冷启动后,由于安全和隐私问题,包括个性化眼睛模型的注视登记数据将不可访问,直到用户使用密码或其他安全登录方法登录,之后可以对安全数据进行加密。
苹果专利图1以图形方式说明了根据一些实施例的眼睛的N维模型#100。眼睛物理组成部分包括巩膜#102、角膜#104、虹膜#106 和瞳孔#108。在一些实施例中,初始校准或登记过程期间,将从眼睛的一幅或多幅图像生成用户眼睛的N维模型。