苹果智能硬件设备即将面世,又会掀起什么样的浪潮?

🤖 由 文心大模型 生成的文章摘要
据消息人士称,苹果公司的VR头显将会搭载单眼8K分辨率的屏幕和眼球追踪功能。从前一日2月3日(美国东部时间)苹果传出造车的市场情绪来对比今日2月4日苹果推出VR头显的市场情绪来看,明显对于下一代消费VR更乐观。
苹果在眼球追踪技术已历经多年实验部署
苹果的AR手机、AR眼镜战役始于2014年,历经3年并购,于2017年推出软件ARKit(AR SDK)2018、2019年,iOS10以上的手机变身AR手机。同年苹果公司收购德国眼球追踪公司SensoMotoric Instruments(简称SMI),针对眼球追踪在手机、AR眼镜的应用进行开发探索。
根据PatSnap统计,近年来申请人为SMI&APPLE在眼球追踪领域的申请了27组同族专利,涉及用户与计算机之间交互层面,确定和记录眼球运动层面,显示器、光学系统层面等等,涵盖了眼球追踪技术和应用方向。其专利数量公布在2019年和2020年呈爆发性提升,可以见得苹果公司近两年在眼球追踪技术和硬件结合使用上的经有更大的进步成果。
眼球追踪技术在智能硬件中的重要表现
虽然目前眼动追踪至今还没有进入主流的公众视野,但是眼动追踪技术对于智能眼镜走进消费者视野却有着不可忽视重要意义。
目前此款消费级的VR设备会高到3000美金。为了满足搭载超高分辨率的单目8K(双目16K)屏幕的性能要求,眼球追踪功能是必不可少的。
众所周知,VR对屏幕渲染的要求很高,目前全球主流VR头显的分辨率配置是双目4K,要达到双目16K分辨率,GPU的渲染压力大幅度提升,即使是苹果这种具有高性能芯片的公司,仍然无法靠芯片本身的能力完成渲染,所以苹果公司采用了“注视点渲染”技术,即通过眼球追踪判断用户注视屏幕的位置,只对用户注视点小范围的显示进行高清渲染,外围则进行低分辨率的渲染,这样可以降低对GPU芯片的压力,降低渲染延迟,提升帧率,降低用户的眩晕感,提升用户体验。
近日,苹果又曝光了一份新专利称,苹果眼镜可能会采用眼球追踪技术,追踪瞳孔缩放和眼睛视线,评估用户观看内容时的特定类型生理反应。苹果公司希望用户可以较长时间的佩戴VR产品,以上专利表明,眼球追踪技术可以根据用户的眼动数据,判断当前用户的疲劳情况和注意力情况,从而调节屏幕亮度,提供更加舒适的观看体验,或者在显示内容上提供替代内容或建议,例如,提示用户休息一下,来改善用户的体验和理解力。
从苹果布局的专利可以看出眼球追踪对于提升VR用户的使用体验起到非常重要的作用,除了专利中提到的对疲劳度和注意力的提升外,眼动数据还可以用于更多的商业用途和医疗用途,如用户的消费心理分析、认知障碍分析等,不排除苹果公司会将眼球追踪用于这些用途,但是苹果公司一向重视用户隐私,这些用途肯定是在经过用户允许的情况下安全使用的。
全球领头硬件厂商积极布局眼球追踪技术
基于眼球追踪技术在AR/VR发展中的独特意义,各大消费电子领头厂商在筹备进军虚拟现实设备研发的同时,也在开始部署眼球追踪技术在硬件上的结合与应用:
2014年末,三星投资了FOVE,主打眼球追踪的VR头盔;
2016年10月,Google收购专注于眼球追踪的初创公司Eyefluence,进攻AR交互;
2017年初Facebook旗下Oculus确认收购The Eye Tribe,用眼球追踪技术改善产品;
2017年6月,苹果公司收购了德国计算机视觉公司SensoMotoric Instruments(SMI),打造苹果AR眼镜;
2018年,NVIDIA为了提升GPU在VR应用中的性能,在其Turing架构GPU中推出了支持注视点渲染的VRS(可变速率着色, Variable Rate Shading) 功能,七鑫易维多年来一直与NVIDIA合作推进该功能的实现;
2018年,Qualcomm为了更好的支持VR一体机,在Snapdragon 845和之后的升级型号中推出了Eye-Tracking Framework,目前全球只有两家企业完成了与高通在该功能上的集成合作,七鑫易维便是其一。
面临重量级智能设备厂商通过收购眼球追踪技术企业,来获得技术研究的主动权,轻量级企业又该如何选择未来?
小派作为全球VR头显中更容易被消费者接受的厂商之一,和苹果公司类似,追求更高的分辨率,采用了单眼8K分辨率,对屏幕渲染能力提出了很高的要求,一般的PC显卡无法满足需求,很容易会造成VR显示的渲染延迟和帧率的大幅度下降。为了解决这个问题,从2018年开始,小派就和国内眼球追踪技术公司七鑫易维合作开发眼球追踪产品,并于2020年上市实现“注视点渲染”功能,获得国内外玩家的一致好评,由此看来选择强强合作也是一种往前迈进的好方式。
追随领头企业的关注动态进程,我们不难发现AR/VR的未来,是离不开眼球追踪技术作为支持,苹果作为硬件行业的风向标,这次举动更是敲定了眼球追踪在虚拟现实头显中的重要地位。可以说这不仅仅是AR/VR头显的浪潮时代,更是眼球追踪技术的浪潮时代。