Apple Vision Pro 的一个很酷的功能是“Persona”,其是个人数字图像或个性化化身。如今,美国专利商标局正式发布了苹果的一项专利申请,该专利申请揭示了一项可能的进步,可用于创建全身“Persona”化身,而不仅限于脸部。这个新Persona更新可以捕捉用户的服装风格、纹理、发型、头发颜色、面部毛发特征、眼睛颜色、配饰等细节。
苹果专利指出,当用户使用头戴式设备(HMD)等设备时,可能需要生成或修改用户的表示,例如3D用户模型。然而,现有系统可能无法利用可能来自外部来源的数据来生成或修改此类表示。
多设备模型增强
总体而言,苹果的发明涵盖了使用来自外部设备(例如,相机、头戴式扬声器设备、HMD 或用户佩戴的其他设备)的数据来改进可穿戴设备上生成的用户数据(例如,3D用户模型)的系统、方法和设备。
外部设备提供的数据可以包括与用户身体各部分(例如,躯干、背部、腿部、脚等)相关的视觉数据和/或与用户特征相关的信息(例如,身体尺寸、体形、皮肤纹理、衣服纹理/材质、用户姿势等),这些信息可能无法通过用户佩戴的设备的传感器(例如,摄像头)看到或以其他方式捕获。
例如,HMD的传感器可能仅通过Persona功能从有限的视角提供佩戴Vision Pro的用户的有限部分视图,以提供用于生成用户身体模型的数据,而外部设备可以提供不同的透视图,其中可能包括用户的一个或多个不同部分。通过外部设备获得的数据集(与外部设备对用户的视图相关联)可以传输到 HMD,以便可以更准确、更完整、更高效或以其他方式更理想地生成或更新用户的 3D 模型。
苹果专利图1示出了与基于从外部摄像头接收的个人数据来生成和/或更新代表用户的用户模型的过程相关的示例操作环境。有时会使用iPhone摄像头;图 2示出了与生成和/或更新代表用户的用户模型的过程相关的示例操作环境,该模型包括被遮挡的身体部分;图3示出了用于识别用户以确定代表用户的传感器数据的示例过程。