Apple Vision Pro新专利涵盖基于面部和手部追踪的AR多模态输入

🤖 由 文心大模型 生成的文章摘要

美国专利商标局正式授予苹果一项Apple Vision Pro专利,该专利涉及计算机生成的现实环境,包括在计算机生成的现实环境中多模态输入。虽然录制空间视频最初是通过头显顶部的按钮触发,但苹果专利透露,在未来,指定的面部表情可以触发例如体育赛事等事件录制。

苹果专利指出,增强现实技术旨在通过增强的物理环境来增强电子信息,从而弥合虚拟环境和物理环境之间的差距。因此,电子信息似乎是用户感知物理环境的一部分。在示例中,增强现实技术进一步支持了与覆盖在增强物理环境中的电子信息交互的用户界面。

苹果专利主题技术的实现至少部分基于电子设备是否通信耦合到相关联的基本设备来确定电子设备的操作模式。基于所确定的操作模式,本主题技术识别用于启动电子设备的视野内的内容记录的一组输入模态。

本主题技术监视由包括在电子设备中或通信耦合到电子设备的至少一个传感器生成的传感器信息。

此外,当所监视的传感器信息指示所识别的一组输入模态中的至少一个已被触发时,本主题技术发起对电子设备视野内内容的记录。

Apple Vision Pro可能包括可以接收用户输入的硬件元件,例如硬件按钮或开关。传感器和/或硬件元件检测到的用户输入对应于例如用于从应用内发起共存会话的各种输入模态。

例如,输入模态可以包括但不限于面部追踪、眼睛追踪(例如凝视方向)、手部追踪、姿势追踪、生物测定读数(例如心率、脉搏、瞳孔扩张、呼吸、温度、脑电图、嗅觉)、识别语音或音频(例如,特定的热词)以及激活按钮或开关等。

苹果专利图3B和图3C示出了根据本主题技术实施方式的追踪凝视方向以启动计算机生成的现实记录的示例:图4B和4C示出了在计算机生成的现实环境内确定感兴趣区域并基于感兴趣区域启动记录的示例;图5B和5C示出了根据本主题技术实现向计算机生成的现实环境内的各种对象或实体提供注释的示例。

来源:patentlyapple

「93913原创内容,转载请注明出处」