PICO SDK 2.3.0版本新增MR环境感知技术,支持开发者开发MR应用和游戏

🤖 由 文心大模型 生成的文章摘要

PICO SDK2.3.0版本和OS5.7.0版本,现已新增MR环境感知技术,支持开发者开发独特MR应用和游戏!

基于Sense Pack全新空间标定和空间锚点支持,开发者将能正式开发MR应用。“空间标定”与“空间锚点”功能可实现现实世界中的物体和场景与虚拟世界交互,使用户可以在虚拟环境中感受现实物理世界。

版本更新重点内容如下:

渲染新增“眼动追踪注视点渲染”功能,可以根据用户的注视点进行渲染,节省GPU负载。

追踪能力四项更新:

“人体追踪”功能新增“全身动捕”(全身追踪)模式,可以实现实时收集用户身体位置和动作信息,从而为虚拟现实应用程序提供更加精确和自然的动作和姿态;

“面部追踪”新增融合驱动(HybridBlendshapes)模式,准确还原用户面部变化;

“手势追踪”功能优化了智能算法和手部模型,全面对标OpenXR标准,同时新增支持Unity可视化手势编辑;

“原点追踪”新增设置和获取原点追踪模式接口(仅Unity)。

平台服务新增“高光时刻”服务,记录和分享用户在应用内的精彩时刻。

新增“语音转文字”服务,可实现60秒语音实时转换为文字。