Meta、苹果都在研究的RST技术,或将应用于大朋VR下一代PCVR

🤖 由 文心大模型 生成的文章摘要

未来的某一天,当我们可以佩戴着头显去进行社交、工作和生活时,朋友、同事、家人却只能看着我们脸上的黑色外屏自说自话,未免有些太过扫兴,也感受不到那份应有的真实感。

眼睛是心灵的窗户,注视着他人的眼睛才能够拉近心的距离,想要让XR产品真正进入日常生活,成为一种必需品,就需要完成“眼部向外投射”,让旁观者在外屏上就可以看到使用者的眼睛。

而这并不是天方夜谭的幻想,伴随着Vision Pro的Eye Sight功能登场,让全世界见证了这项能够让他人在外屏看到使用者眼部及周围影像的技术——反向透视Reverse See through(或写作Reverse Pass through,此处简称RST)。

Meta、苹果都盯上的技术

早在2021年,这项技术就已经被业界所注意。

在2021SIGGRAPH(ACM SIGGRAPH组织的计算机图形学顶级年度会议)上,Facebook Reality Labs(Facebook现实实验室)首次带来了RST这个新技术概念,表示该技术可以“使外界的人们看到正戴着头显设备的人的眼睛”。

Facebook现实实验室的科学家认为,戴上几乎半张脸的VR头显设备,遮挡了眼睛这一关键部分,会导致虚拟环境中的人与现实环境中的人进行交流变得不自然。

刚刚提出RST技术时,其基本组件是一个面向外部的2D或3D显示器。随着研究的发展,Facebook现实实验室的研究人员认为3D显示是一个更好的方向,因为3D显示可以让用户的眼睛和脸部出现在正确的位置。

“能提供完全沉浸感且带有显示器的VR和AR眼镜完全是不同的技术,从长远来看,它们最终可能服务于不同场景的不同客户。”Facebook现实实验室研究人员如此表示。

是不是有些迫不及待看到这项技术批量应用到市面上主流的VR设备当中了?

别急,短期内或许还看不到这个场景。

一方面原因在于,该技术目前仍未达到完全成熟的状态。即便是Vision Pro,其Eye Sight功能局限性也非常严重。根据行业专家分析,Eye Sight由于采用透镜技术,预计会出现相当暗淡和低分辨率的图像以及有限的视角。另一方面原因则在于,价格成本让人望而却步。要知道,该技术的硬件基础至少需要一个能够清晰显示的外屏,价格绝对是不菲的。

但科技是需要畅想和期待的,RST有望打破XR设备的社交困局,光是这一点就值得尝试。

大朋VR,愿意做一个吃螃蟹的人

大朋VR作为在VR赛道奔跑八年的坚守者,也有着深厚的技术积累,对RST技术也有自己的研究与理解,我们不妨畅想:假如大朋将在下一代PCVR产品中,应用RST技术,会带来怎样的全新体验呢?

首先,搭载RST技术后,产品可通过算法与内部摄像头将眼部图像完整、清晰地传递到高清显示的外屏上,但并不局限于此,外屏能够呈现的内容还有很多,如果大朋下一代产品还可以搭载手势识别的话,玩家可以动动手指便更改自己的眼部图像,或是切换外屏显示的内容。

与此同时,由于RST与VST(Video Pass-Through,即视觉透视)是完全独立的两套透视系统,假如大朋下一代产品也可搭载VST技术的话,玩家完全可以在利用VST看清现实世界的同时,利用RST让外界的其他人也能看到你设备外屏上的内容,实现真正的无障碍日常社交,或是组队游戏。

当然,想尝试搭载RST技术并非一腔孤勇,PCVR产品本身就更适合这项技术。PCVR的运算、加载等处理步骤均在PC端完成,不会占用头显自身的进程,而RST对于算力的需求不低,如果换作一体机可能就需要和Vision Pro一样搭载基础算力更大的芯片,相对来说难度过大。

可以预见的是,除了上述先进技术的加入,大朋下一代产品仍将继承PCVR优良传统,例如E4已拥有的DP有线直连,保障低损耗、低延迟传输等等。而至于E4的4K+120Hz原生画质、毫米级精度手柄等功能及硬件,或许也将得到进一步的升级。

在这里,大朋也诚邀各位资深VR玩咖们供计献策,提出你们的需求与期待,一同让大朋的下一代产品向着更完美的形态进化。