Meta XR Audio SDK现已具有声学射线追踪功能,这是迄今为止最重要的更新。
该功能可以真实模拟声音如何通过虚拟世界的几何形状传播到耳朵。该模拟包括反射、混响、遮挡、阻碍和衍射。
Meta并不是第一家提供带有光线追踪功能音频SDK的公司。Valve Steam Audio自2018年起就具备音频光线追踪功能。事实上,Meta XR Audio SDK的前身Oculus Audio SDK早在2019年就具备了该功能。
但是,尽管Steam Audio和Oculus Audio SDK的完整音频传播模拟功能是为在PC或高端游戏机上使用而设计的,但Meta声称其声学射线追踪性能足够好,可以在其Quest头显中使用的移动芯片组上良好运行,即便面对“任意复杂的几何形状场景”。
Meta声称:“无论VR场景是蜿蜒的洞穴、熙熙攘攘的城市景观还是错综复杂的室内环境,我们的技术都可以在不影响性能的情况下管理复杂性。”
Meta博文解释:“衍射允许声音绕过障碍物,遮挡模拟物体如何阻挡声音,障碍物模拟声音通过不同材料时的变化。”
“例如,用户可以听到对手的脚步声在走廊和拐角处回响,即使没有视线,他们也可以清楚感受到位置,从而可以潜入角落进行伏击。”
与Steam Audio一样,开发者为每个虚拟对象标记声音材质,例如金属、砖块、地毯、玻璃和木材,从而显著改变其吸收和反射声线的方式。
Meta表示,其收购的工作室Camouflaj即将推出的Quest 3独家游戏「蝙蝠侠:阿卡姆之影」将是其首款使用这项新声射线追踪技术的大型游戏。
由于Oculus Audio SDK在2019年后几乎没有更新,许多第三方开发者转而使用Steam Audio。但自去年以来,Meta声称其新XR Audio SDK具有领先的HRTF空间化质量,这意味着使用其的应用程序中的音频源听起来比使用任何其他SDK更像来自虚拟对象。现在,XR Audio SDK也拥有性能最高的音频传播模拟,Meta希望VR开发者能够回归采用该解决方案,从而使Quest用户能在基于头显上运行的虚拟世界中听到更逼真的音频。