周报导读
●XREAL Air 2 ULTRA正式开售,书写开发者生态建设新篇章
●HTC VIVE亮相SIGGRAPH:通过NVIDIA ACE提升VIVERSE虚拟形象交互体验
●进入元宇宙!长虹佳华携手ShallxR、PICO打造场景级元宇宙入口
●触摸未来,字节跳动提出6DoF直播创新方案
●Meta AR/VR季度收入持续增长,Quest 3“超出我们的预期”
●扎克伯格与黄仁勋共同推介Meta最新视频视觉AI
●Apple Vision Pro现可通过脑机接口进行控制
●iPad Pro串联OLED显示屏技术或将延伸至未来Apple Vision Pro
●Vision Pro Vision Hack全球黑客马拉松活动将于下月开幕
●visionOS 1.3发布,带来错误修复和安全性改进
●巴黎世家和Rimowa推出Apple Vision Pro版本应用
●Quest v68带来降低延迟、自适应亮度、下载改进、Layout应用
●招聘信息表明,Meta Codec Avatars虚拟化身离发布越来越近
●Meta Quest 3S:增加新操作按钮,取消3.5毫米耳机插孔
●Meta XR Audio SDK现具有声线追踪功能,可实现逼真声音传播模拟
●Valve粉丝依然忠诚:Valve Index在SteamVR仍击败Quest 3
●据报道,PS VR2促销首日销量猛增
●微软和索尼加入OpenUSD联盟
●Virtuix Omni One Home VR跑步机将于9月发货
●Trivver与Niantic 8th Wall合作利用3D智能对象增强AR广告测量
「国内新闻」
XREAL Air 2 ULTRA正式开售,书写开发者生态建设新篇章
7月31日下午2点整,XREAL系列AR眼镜的最新成员XREAL Air 2 Ultra在国内正式发售,目前在京东、天猫和抖音等平台都已上线,首发价3999元。
这款AR眼镜是主要面向开发者群体打造的旗舰级产品,旨在降低广大开发者进入空间计算的门槛,推动空间计算领域革新,建立更繁荣的AR生态体系。
作为XREAL第二款6 DoF(Six Degrees of Freedom,六自由度)全功能眼镜,XREAL Air 2 Ultra也是目前业界唯一通过双环境感知传感器(SLAM Camera)来实现空间计算的轻量化AR设备。其通过搭载双环境感知传感器硬件+软件SDK,支持高精确度和低延迟的6DoF空间定位和手势交互,这意味着AR交互体验迈入全新阶段。
HTC VIVE亮相SIGGRAPH:通过NVIDIA ACE提升VIVERSE虚拟形象交互体验
全球智能移动设备与沉浸式科技的创新领袖HTC VIVE在SIGGRAPH 2024大会上宣布将与英伟达(NVIDIA)合作,将NVIDIA ACE技术集成到VIVERSE虚拟形象系统(VIVERSEAvatar)中,增强其在扩展现实(XR)中互动的真实感和真实性。
HTC VIVE的沉浸式XR开放平台VIVERSE一直致力于为用户提供最具沉浸感的使用体验。VIVERSE Avatar是一个开放的虚拟形象创建系统,不仅提供多种全身虚拟形象风格,还允许用户导入VRM 3D模型虚拟形象,在VIVERSE中创建自己的身份。
进入元宇宙!长虹佳华携手ShallxR、PICO打造场景级元宇宙入口
7月30日,“长虹佳华 & ShallxR & PICO合作签约仪式暨ShallxR动感飞椅新品推介会”在北京举行,为现场观众带来多维度、沉浸式的仿真交互体验。
中国电子商会数字展示专业委员会、中国电子商会数字文旅专业委员会秘书长赵峰,北京信息化协会副秘书长、元宇宙创新发展工作委员会执行秘书长纪菁,长虹佳华公司副总裁邓鹤明,PICO企业服务亚太区负责人刘凯,ShallxR创始人唐剑虹,YAW VR公司CEO Zsolt等嘉宾出席本次发布会,并见证了合作签约仪式。
虽然有传统的点云、网格以及现在火热的隐式辐射场(NeRF)等三维表征,但想将三维应用在直播媒体层面却尤为困难,原因在于三维产出的数据量远大于传统直播链路,需要更高的带宽以及特定的三维显示设备来确保流畅的传输和播放。
面对这一挑战,火山引擎多媒体实验室近期提出了一项突破性技术——可实时交互的自由视角视频技术。这项技术通过链路革新,为三维直播媒体的发展贡献了重要力量。2024年7月27日至8月1日,在美国科罗拉多州丹佛市举办的SIGGRAPH 2024的沉浸体验展馆中,火山引擎多媒体实验室会展示这项最新的研究成果。
「国际新闻」
Meta AR/VR季度收入持续增长,Quest 3“超出我们的预期”
2024年,Meta Reality Labs季度收入将继续同比增长。
在Meta 2024第二季度财报电话会议上,Meta CEO马克·扎克伯格告诉投资者Quest 3的销量“超出了我们的预期”。
Reality Labs是Meta旗下部门,负责Quest、Horizon平台、Ray-Ban Meta智能眼镜以及AR眼镜及其神经腕带输入设备的研发。
Meta报告称,2024第二季度Reality Labs季度收入为3.53亿美元,比2023年第二季度增长 28%;第一季度收入也比2023年高出30%。Meta首席财务官Susan Li告诉投资者,这一增长是由Quest 3推动的。2023年前三个季度,Reality Labs的收入均低于前几年。Quest 2已问世近三年,Quest Pro未能吸引消费者,Quest 3被泄露后才正式发布。Quest 3扭转了这一趋势,使Reality Labs在2024年恢复了季度收入同比增长。
Meta去年推出了Segment Anything,这是一个机器学习模型,可以快速可靠识别和勾勒出图像中的任何东西。Meta首席执行官马克·扎克伯格周一在SIGGRAPH大会上首次亮相了该模型的续集,将该模型带入了视频领域,彰显了该领域的发展速度之快。
分割是一个技术术语,指的是视觉模型在查看图片时,会挑选出各个部分:“这是一只狗,这是狗身后的一棵树”,但愿如此,而不是“这是从狗身上长出来的一棵树”。这种现象已经存在了几十年,但最近图像识别机制变得更好、更快,其中“分割一切”是向前迈出的重要一步。
鉴于与神经技术初创公司Synchron的脑机接口(BCI)相结合,Apple Vision Pro现在支持通过大脑指令进行操控。
Synchron已成功将脑机接口植入64岁肌萎缩侧索硬化症(ALS)患者马克的大脑,借助该BCI,使得马克能够控制Vision Pro。
基于该技术,马克可以操控Vision Pro来玩纸牌、观看Apple TV和发送短信,而这一切都无需动手。自2023年8月植入脑机接口以来,马克每周两次基于脑机接口练习不同的技能和功能。他指出,使用脑机接口控制Vision Pro与基于脑机接口来控制iPhone、iPad和电脑类似。苹果 在其平台上的一系列辅助功能因其卓越性而得到广泛认可,这就是Synchron最初专注于将其BCI与苹果设备集成的原因。
iPad Pro串联OLED显示屏技术或将延伸至未来Apple Vision Pro
据韩国刊物《Sisa Journal》报道,LG和三星已经采用串联OLED技术制作了微型OLED显示屏的原型,为Apple Vision Pro未来型号采用该技术铺平了道路。
报道称,目前尚不清楚LG和三星是否或何时会开始量产串联微型OLED显示屏,但由于第二代Vision Pro预计最早要到2026年底才会发布,因此两家公司仍有时间将该技术商业化,以便可能纳入下一代型号。今年早些时候,苹果发布了采用串联OLED显示屏的新款iPad Pro型号,这种显示屏将两个有机发光层堆叠在一起,与单层OLED显示屏相比,亮度更高、能效更高、使用寿命更长;而这些优势也将延伸到采用该技术的未来Vision Pro。
Vision Pro Vision Hack全球黑客马拉松活动将于下月开幕
Vision Hack是一场即将举行的远程黑客马拉松,面向visionOS开发者,将于9月13日至15 日举行。
想象一下2008年开发的第一个iPhone应用,这就是我们今天使用visionOS所面临的情况,那么Vision Hack便是你进入空间计算新前沿的启动板。
过去十年,我有幸见证了虚拟现实行业从一项小众技术发展成为一种变革性媒介。从早期笨重的原型到如今我们拥有的时尚、强大的设备,这段旅程可谓非同寻常。现在,随着Apple Vision Pro的推出,我们正站在一个新时代的门槛上。
苹果发布了visionOS 1.3,这是2月与Apple Vision Pro一起推出的visionOS操作系统的第三次重大更新。visionOS 1.3是在visionOS 1.2发布一个多月后推出。开发者可通过Vision Pro“设置”,选择“常规”,然后再选择“软件更新”来安装visionOS更新。要安装新软件,需要将Vision Pro取下,前EyeSight显示屏上将会显示进度条。
值得一提的是,visionOS 1.3更新没有发布新功能,但确实带来了一些小错误修复和安全性改进。
巴黎世家和Rimowa推出Apple Vision Pro版本应用
法国奢侈时装品牌巴黎世家和德国高端行李箱品牌Rimowa推出了适用于Apple Vision Pro的应用,扩展了该头显的沉浸式时尚体验。
巴黎世家Vision Pro应用旨在为用户提供时装秀和系列沉浸式视图。该应用提供了巴黎世家2025年春夏时装秀独家无人机视图和立体镜头,用户还可以访问交互式产品手册和过往系列内容,从而能在虚拟环境中探索巴黎世家时尚内容。
Quest v68带来降低延迟、自适应亮度、下载改进、Layout应用
Quest v68更新为Quest 3带来了延迟和视觉升级,为Quest 2和Quest Pro带来了一系列进一步改进,并带来了一款名为Layout的新应用。
与所有Quest更新一样,v68将“逐步推出”,因此用户头显可能需要几天甚至几周的时间才能获得v68更新。根据描述,Meta内容自适应亮度听起来类似于许多LCD电视上的自适应亮度功能。在此类电视上,其工作原理是调暗较暗场景中的背光,以实现更深的黑色,这种黑色更接近真正的黑色,而不是LCD通常实现的暗灰色。不过,亮度的不断变化可能会在视觉效果变化很大的内容中令人反感,为此我们很想知道Meta的算法如何处理这个问题。
招聘信息表明,Meta Codec Avatars虚拟化身离发布越来越近
最近招聘信息表明,Meta Codec Avatars虚拟化身即将走出实验室,进入产品阶段。
Meta目前有多个与Codec Avatars相关的空缺职位,该公司正在招聘一名设计原型师和一名 iOS开发工程师等。
根据描述,Meta想要构建一个“内部XR呼叫服务”:
“在我们的团队中,你将探索、设计原型并构建体验,定义人们如何通过Codec Avatars沉浸式远程呈现进行交互的未来;你将与工程师、科学家和研究产品经理密切合作,构建和扩展内部XR呼叫服务,并解决独特、复杂且微妙的用户和研究人员挑战。”
Meta Quest 3S:增加新操作按钮,取消3.5毫米耳机插孔
VR爱好者Luna提供了有关Meta Quest 3S的最新信息,Quest 3S是Quest 3的廉价版本,据传将于今年秋季发布。
今年3月,一份带有该设备渲染图的宣传材料被泄露,显示Quest 3S底部有一个按钮,其功能尚不清楚。
Luna现在援引匿名消息人士的消息表示,该按钮是某种操作按钮。在某些操作系统版本中,该按钮用于切换到直通透传模式;在其他版本中,用户仍需要双击头显以操作。Luna表示,未来该按钮可能会是可配置的。
Meta XR Audio SDK现具有声线追踪功能,可实现逼真声音传播模拟
Meta XR Audio SDK现已具有声学射线追踪功能,这是迄今为止最重要的更新。
该功能可以真实模拟声音如何通过虚拟世界的几何形状传播到耳朵。该模拟包括反射、混响、遮挡、阻碍和衍射。
Meta并不是第一家提供带有光线追踪功能音频SDK的公司。Valve Steam Audio自2018年起就具备音频光线追踪功能。事实上,Meta XR Audio SDK的前身Oculus Audio SDK早在2019年就具备了该功能。
Valve粉丝依然忠诚:Valve Index在SteamVR仍击败Quest 3
根据最新SteamVR统计数据,拥有五年历史的Valve Index在SteamVR平台仍然比Meta Quest 3更受欢迎。
在Quest 3推出近十个月后,Valve Index仍然是第二大最常用的SteamVR头显。Quest 3于 2023年10月发布,在2024年1月以14% SteamVR头显使用份额排名第三,但此后仅略有增长。六个月后,Valve Index仍在捍卫其地位。这款头显于6月庆祝了其五周年,目前仍在 Valve销售(Valve Index VR套件的价格是Quest 3的两倍)。Valve尚未宣布或暗示任何继任者。
据报道,PS VR2销量在当前大促销的首日就猛增。
PS VR2目前售价350美元,比其550美元的正常价格有大幅折扣。
据Shortcut了解的零售商销售数据,PS VR2促销第一天的销量比前一天增长了2350%,这意味着一天的销量超过了今年迄今为止全年的销量。
如果数据准确,这些数据凸显了售价对于当前VR头显的普及有多么重要,并且有力证明了 PS VR2定价过高。
去年,皮克斯、Adobe、苹果、Autodesk和英伟达宣布成立OpenUSD联盟,该组织旨在推动和推广USD文件格式,使其成为未来创建和分发3D内容的标准。该标准是构建和打包复杂3D场景的框架,被英伟达称为“元宇宙HTML”,并被苹果称为“有助于加速下一代AR体验”。
现在,微软和索尼这两家重量级公司也加入了OpenUSD联盟,支持通用场景描述(USD),将其作为创作和打包复杂3D内容的未来。其理念是拥有一种包含几何图形、灯光、动画等的单一文件格式,可在Maya、3ds Max、Houdini、Substance Painter等3D创作工具和协作工作流程之间轻松使用。
Virtuix Omni One Home VR跑步机将于9月发货
Virtuix声称,Virtuix Omni One是一款长期开发的家用一体化VR跑步机,最终将于9月开始发货。
Omni One于四年前宣布Virtuix Omni One将于2021年底推出,但并未实现。
与早期VR跑步机产品不同,Omni One的独特之处在于它是完全集成的,这意味着配备了一台VR头显,可以运行内容商店并支持开发者集成的跑步机。
Trivver与Niantic 8th Wall合作利用3D智能对象增强AR广告测量
增强现实(AR)和人工智能(AI)科技公司Trivver与面向代理商、品牌和开发者的领先WebAR 平台Niantic 8th Wall宣布建立合作伙伴关系,将Trivver的3D数据分析功能与8th Wall的 WebAR工具相结合,以更精确衡量AR广告和品牌体验。
Trivver的技术可将任何3D文件转换为3D智能对象,这些对象可部署在沉浸式Niantic 8th Wall项目、游戏、广告和虚拟环境中。这些3D智能对象包含元数据,可实时捕获可见性和注意力指标,为广告商提供以前无法获得的洞察力,了解用户如何在3D空间中与这些对象互动,并改变开发者和广告商在空间计算场景和沉浸式环境中监控用户活动的方式。