Oculus专利采用光场摄像机进行眼动追踪

🤖 由 文心大模型 生成的文章摘要
Oculus 发布了眼动追踪技术的专利,该技术在头显内部使用了光场相机。当前大多数的眼动追踪系统使用常规或红外摄像机与红外照明器相结合。
光场相机与普通相机的不同之处在于它还捕获光传播的方向。该方向信息可用于理解图像的深度,从而理解眼睛的3D形状,而不仅仅是颜色和亮度。通过了解眼睛的3D形状,系统可以找出瞳孔相对于眼睛本身的位置,从而比2D形状更准确地估计用户的凝视方向。
眼动追踪可以极大地增强多人VR中“社交存在”的感觉,但其最有前景的用例是渐进式渲染。Foveated渲染是指当您正在查看的内容以全分辨率绘制时,外围视图中的其余场景将以低细节呈现。这是有效的,因为人类视觉只是在中心的高细节。Foveated渲染可以支持更高分辨率的VR头戴式头显,而无需昂贵的顶级显卡。找到使其可靠运行的方法对于VR的未来至关重要。
Oculus首席科学家Michael Abrash曾讨论了开发足以完成渐变渲染的眼动追踪系统的挑战。他表示,对于用户看不见的巨型渲染,需要“几乎完美”的眼动追踪。如果即使在几分之一秒内眼睛跟踪失败,用户也会看到视觉质量的显着降低。即便在今天,还没有公司在消费产品中提供这种眼动追踪质量。
今年9月底,在Oculus Connect 5上,Abrash表示他希望这种高质量的眼动追踪能够在2022年准备就绪。如该专利中所述,这取决于使用光场相机具有眼睛的实时3D视图。

【93913原创内容,转载请注明及回链】