美国专利局公布了苹果一项专利申请,该专利申请涉及用于追踪用户手部、躯干和手持控制器的HMD发射器。
苹果专利涵盖了一种HMD(如Apple Vision Pro),其可包括一个或多个配置为捕获场景图像的场景摄像机、一个或多个配置为检测用户手部的手部传感器、一个或多个配置为用户手部提供补充照明的补充发射器,以及控制电路,配置为确定用户的手部是否被充分照亮,确定捕获的图像是否正确曝光,并根据用户的手部是否被充分照亮以及捕获的图像是否正确曝光来调整一个或多个补充发射器。
当所捕获的图像太暗或检测到的手部太暗时,控制电路可激活辅助发射器。当检测到的手部太亮或所捕获的图像过度曝光时,控制电路可停用辅助发射器。
在专利图3中,我们看到了头戴式设备(HMD #10)的横截面侧视图,其中该设备包括不同类型的传感器,用于监控HMD周围的环境,包括光学传感器。这些传感器可包括摄像头,摄像头具有镜头和图像传感器,配置为以紫外光波长、可见光波长和/或红外波长捕获图像。
HMD还可包括其他摄像头,用于追踪外部物体的位置和运动。例如,追踪摄像头可追踪用户的手部、躯干或其他身体部位。
例如,手势输入可用于控制HMD的操作。身体部位监控可用于让虚拟环境中显示的内容复制用户的身体动作。
如果需要,HMD还可包括用于追踪外部配件的位置(例如,用户移动以控制HMD的控制器的位置和移动)的摄像头。
在某些情况下,可通过将HMD中一个或多个摄像头的数据与其他传感器数据(例如,来自惯性测量单元的数据)相结合,形成视觉惯性里程计系统或其他确定HMD相对于HMD周围环境的位置、运动和/或方向的系统。摄像头可执行专用功能(追踪、视觉惯性里程计功能、场景捕捉、测距、用于面部识别和环境映射的三维图像捕捉等),或者这些操作中的两个或更多个操作可由共享摄像头执行。