Meta首席技术官博斯沃思表达了他对Quest开发者采用直通透传摄像头的看法。
虽然Meta Quest 3和Apple Vision Pro等头显基于摄像头使你看到现实世界,但只有系统和某些第一方应用才能真正获得对摄像头的原始访问权限。第三方开发者可以基于摄像头透视作为背景,但其应用实际上看不到这种透视效果;相反,可获得更高级的数据,例如手和身体骨骼坐标、带有家具边界框的环境3D网格以及有限的对象追踪功能。这意味着头显无法运行计算机视觉模型,这严重限制了头显的增强功能。
借助visionOS 2,苹果面向企业提供了Vision Pro直通摄像头的原始访问权限,仅支持非公开的内部应用。虽然这需要获得苹果的特别许可,并且仅限于“在商业环境中”,但此举再次引发了Meta是否计划采取相同做法的疑问。
在接受《元宇宙:以及它将如何彻底改变一切》一书作者Matthew Ball的采访时,博斯沃思被问及这一问题并发表了他的想法:
“如果开发者可以直接采用摄像头,我们都可以想象出非常实用的用例。你是一名机械师,你正在看一个不熟悉的引擎,而开发者可以构建各种工具来帮助你查看示意图中的叠加层,甚至诊断问题。然而,目前,Meta将不会为此开发相关功能。
同时,我们也希望确保旁观者在有人佩戴头显(例如在飞机上)时感到舒适,现在,我们正在寻求最佳方案来解决这个问题,使头显用户可以用不同的方式向旁观者发出信号。
我认为,消费市场对直通透传技术越来越熟悉,值得一提的是,Vision Pro对我们整个行业来说很有意义,现在人们对这类设备的了解非常广泛,而了解得越多,人们就越不会担心旁观者会感到害怕,或者会因为担心别人会对头显产生负面反应或对它感到惊讶而感到不好意思佩戴。
技术应用与社会背景密切相关,社会对技术越包容,技术就越能自由执行;社会越不包容,在将技术推向市场时就越需要谨慎,因为如果采用不当,实际上可能会阻碍技术随着时间的推移而被采用。
所以我认为Meta在技术普及方面采取了相当保守的立场。我想每个人都可能理解我们为什么采取保守方案——我坚持认为这是当时正确的做法。但当然,与此同时,我们对混合现实的潜在应用感到兴奋。如果开发者完全征得了消费者的同意,并且了解用户的背景……如果我们能够解锁该功能,我想我们都对混合现实代表的意义感到兴奋。
随着直通透传技术的发展,我们将根据消费者体验舒适度以及混合现实用例来释放技术潜能。”