周报导读
●YVR正式搭载自研手势识别功能,打造更自然的交互方式
●第13届AWE展会圆满落幕亿境XR产品引爆现场
●一分钟了解VPS&DHDC,数字科技带你飞
●最高奖励1000万元!济南出台八条政策抢占元宇宙产业高地
●苹果推出首个空间计算设备「Apple Vision Pro」,售价3499美元明年初发售
●Apple Vision Pro动手实践:这是有史以来最好的头显演示
●苹果将在7月开放Vision Pro开发套件
●Apple Vision Pro支持虚拟打字,可通过手势和眼动追踪进行导航
●Apple Vision Pro基于虹膜扫描进行Optic ID登录
●Apple Vision Pro:基于“神经网络”扫描面部以创建超逼真数字角色
●苹果确认Vision Pro显示屏刷新率大多数情况下为90Hz
●Apple Vision Pro可捕获3D空间视频和照片
●苹果通过头部、手腕和食指控件突出Vision Pro辅助功能
●Meta将在Siggraph 2023展示具备视网膜分辨率、变焦显示器的VR原型
●Meta Quest 3:更好的散热,更少的CPU节流
●扎克伯格:Quest 3混合现实功能比Quest Pro“更好、更先进”
●「Virtual Desktop」1.27.1版将带来显著改进
●苹果收购AR头显初创公司Mira
●工业AR技术平台Squint完成600万美元战略融资
●心理治疗VR方案提供商BiPSEE完成新一轮融资
「国内新闻」
戴上VR眼镜,无需手柄,仅凭双手即可完成点击、拖拽、滑动等交互。手势识别作为未来XR交互的主流技术趋势之一,能实现更“自然、直观、有效”的交互形式,将有效助力虚拟世界和现实世界深度融合,打造更具“原生感”的三维空间交互体验。
6月9日,全球领先的虚拟现实科技品牌玩出梦想YVR在其最新发布的软件版本中正式搭载手势识别功能。此前,YVR在官方微信账号发布了自研手势识别技术预告短片,正式宣布该算法取得重大突破。据悉,YVR自研手势识别算法具备高精度、高鲁棒性、高实时性等特征,可轻松识别多种常见手势。在已发布的软件版本中,已支持远场交互场景下的裸手点击、滑动等动作,未来该功能还将不断通过OTA升级。
亿境展示的基于最新高通芯片研发的MR新品A863成为本次展会的一大亮点。本次亮相的MR新品为最新研发的XR产品,使用最新一代高通骁龙XR2+平台,搭载高通最新LA1.2基线、支持OpenXR标准、具备头6DoF手6DoF、手势识别、眼球追踪、VST(采用双1600M彩色摄像头实现)、IPD无极调节;2160*2160双屏高清分辨率,超大105°FOV,而且特色MR穿戴方案,符合人体工学设计穿戴舒适,解决长时间佩戴不舒服等行业痛点,且支持穿戴可更换,可满足众多行业客户、品牌客户、快速定制需求。
上海国际虚拟制作峰会(VPS)暨数字人开发者大会(DHDC)由AIS国际先进影像协会主办,上海国际旅游度假区管委会、上海市浦东新区文体旅游局、北京电影学院、中关村数智人工智能联盟支持,北京电影学院未来影像高精尖创新中心提供学术指导单位,隶属于上海国际电影节一带一路电影周的行业线下会展活动。
其聚焦于数字内容产业的虚拟制作和数字人技术的开发、创新以及商业模式,以全景式解构数字内容生产与运营方面的技术革新和落地走向,分享前瞻趋势的同时将虚拟制作与数字人技术有机串联,展示最新技术创新与实操进展,探讨虚拟制作及数字人技术挑战、商业经验与产业趋势。
济南市起步区出台元宇宙八条政策(简称“济南政策”)。 这是山东省内继2022年10月青岛发布元宇宙产业政策后,又一地方政府出台元宇宙专业扶持政策。
本次济南政策分别从培育市场主体、完善投融资环境、生态培育等八个方面提出了对元宇宙的支持。
对经国家级、省级、市级新认定的平台,济南政策提出分别给予实际投资额30%、20%、10%的财政补助,最高分别给予1000万元、800万元、500万元奖励。
「国际新闻」
苹果推出首个空间计算设备「Apple Vision Pro」,售价3499美元明年初发售
苹果公布了Apple Vision Pro,一台革命性的空间计算设备,将数字内容无缝融入真实世界,让用户处在当下并与他人保持连接。Vision Pro打造无边际画布,让app突破传统显示屏的限制,为用户带来全新的3D交互体验,以最自然、最直观的输入方式来控制——眼睛、双手与语音。Vision Pro搭载全球首创的空间操作系统 visionOS,通过用户与数字内容互动的模式,让数字内容如同存在于真实世界。Vision Pro的突破性设计,搭载超高分辨率显示系统,将 2300 万像素置于两个显示屏中,定制的 Apple芯片为独特的双芯片设计,确保用户每次的体验如同在眼前即时发生。
Apple Vision Pro动手实践:这是有史以来最好的头显演示
苹果在为WWDC23建造的名为“Fieldhouse”的大型白色立方体建筑中进行了Apple Vision Pro 演示。我进入时,得到了一部iPhone,以快速设置过程:转个圈扫描(非常类似于确定使用多大尺寸面罩的Face ID设置),然后再进行一次左右面部扫描,以耳朵来校准空间音频。在那之后,苹果让我去见一位“视力专家”,他问我是否佩戴眼镜——我戴的是隐形眼镜,对于近视用户有一个快速的处方镜片处理方案(镜片由蔡司制造,苹果需要一个销售处方镜片的合作伙伴,该镜片通过磁性吸附,将在头显发布时单独出售。)
苹果官网页面显示,将在7月开放Vision Pro开发套件。
苹果开发者网站visionOS部分子页面标题名为“与苹果一起工作”(Work with Apple),为有兴趣将应用程序引入新空间计算平台的开发者提供了三个选项,该页面标签写着“7月上市”。
Vision Pro兼容性评估:现有iPhone和iPad应用开发者将能要求苹果提供一份“关于你的应用程序或游戏的画面以及游戏在visionOS中的表现”的报告。
Vision Pro开发者实验室:苹果将在库比蒂诺、伦敦、慕尼黑、上海、新加坡和东京举办会议——开发者可以申请参加会议并体验在Vision Pro上运行的visionOS、iPadOS或iOS应用程序。
Apple Vision Pro支持虚拟打字,可通过手势和眼动追踪进行导航
Apple Vision Pro采用手势、眼动追踪和语音命令进行菜单导航。例如,你可以通过凝视主屏幕以选择要操作的内容,然后通过手指轻敲确认;而通过轻微手指移动即能实现窗口页面快速滑动;不仅如此,基于搜索栏麦克风按钮,用户更能以Siri语音命令打开/关闭应用程序、播放歌曲等。
Apple Vision Pro基于虹膜扫描进行Optic ID登录
苹果正在推出Optic ID,这是该公司最新的生物识别安全认证技术,也是该公司首个基于虹膜细节的技术。Optic ID将用于解锁Apple Vision Pro AR/VR头显。
苹果表示,Optic ID工作原理通过LED光照分析用户的虹膜,然后将其与存储在设备Secure Enclave上已注册的Optic ID进行比较。在WWDC23主题演讲中,苹果技术开发组副总裁Mike Rockwell表示,该系统甚至可以检测同卵双胞胎的虹膜差异。
Apple Vision Pro:基于“神经网络”扫描面部以创建超逼真数字角色
当你使用FaceTime时,基于Apple Vision Pro,用户将能以超逼真的化身作为形象。如WWDC23 所示,你可以通过头显扫描面部,以创建数字“角色”,该角色将在视频通话期间出现。
与Microsoft Teams、Meta Horizon Worlds等应用制作的卡通化身不同,苹果的目的是创建一个与你的真实面貌相符的虚拟人脸。WWDC23展示的视频中,用户将头显放在脸前,以支持设备使用“先进的编码器-解码器神经网络”对面部进行扫描,苹果称该网络已经针对“数千不同群体”进行了“培训”。
苹果确认Vision Pro显示屏刷新率大多数情况下为90Hz
苹果确认了Vision Pro显示屏刷新率。
Vision Pro配备双OLED微显示屏,总像素达2300万,这比以往任何一款头显像素都要高。
WWDC23上,苹果证实大多数内容的刷新率为90Hz。不过,当观看24FPS内容时,刷新率会暂时为96Hz。
大多数电影都采用24FPS,这被认为是“电影化外观”的基本要素。正因为如此,当电影制作人尝试更高的帧率时,观众通常会产生负面反应,尽管这样做可以提高清晰度。
Apple Vision Pro配备了一系列摄像头,可用于从眼部追踪到手部跟踪等一系列功能,同时,该头显还配备了一个用于拍摄照片和视频的外部摄像头。
Vision Pro 3D摄像头可拍摄3D 照片并录制3D视频,这些视频可在头显上观看。苹果表示,该功能旨在让用户以前所未有的方式重温记忆;来自iPhone或其他设备的照片也可以在头显上查看,且3D图像将更加身临其境。
苹果称,空间视频和照片具有“令人难以置信的深度”,可以让用户“看到图片瞬间细节”。并且像普通照片一样放大。
苹果通过头部、手腕和食指控件突出Vision Pro辅助功能
Apple Vision Pro默认通过眼部和手部追踪机制进行操控。然而,对于那些有辅助功能需求的用户来说,VoiceOver、Pointer Control和Dwell Control等功能将支持用户以其他方式与 visionOS进行交互。
基于Pointer Control,用户可根据头部、手腕或食指位置来操控Vision Pro,不仅如此,用户更能调整运动灵敏度以进一步满足个性化需求。
Meta将在Siggraph 2023展示具备视网膜分辨率、变焦显示器的VR原型
在Siggraph 2023上,Meta将展示一款结合了核心VR技术和超高像素密度的头显原型。
VR科技达人Brad Lynch通过Twitter最先发现了即将到来的展示。
Siggraph网站上,Meta演讲内容描述如下:
“我们开发了一种虚拟现实头戴式显示器,可实现接近视网膜的分辨率,角像素密度高达每度56像素,支持从0到4屈光度的大范围眼睛调节,并匹配眼睛调节动态。”
该演讲将于2023年8月8日召开,Meta显示研究负责人Douglas Lanman和来自Reality Labs Research的六名研究人员参与了这项研究。
Meta Quest 3 将比其前身强大得多,这不仅仅是因为采用了新芯片组的缘故。
热量和散热严重限制了VR一体机的性能,Meta Quest 2就是一个典型的例子:SoC CPU多年来一直以半负载运行以避免过热,但性能远未能全部发挥。
据悉下一次固件更新将减少CPU限制,结果是:在某些情况下,CPU性能最高可提高45%,这种提升是多年数据分析和软件优化的成果,这说明了头显散热的重要性。
扎克伯格:Quest 3混合现实功能比Quest Pro“更好、更先进”
扎克伯格表示,Meta Quest 3彩色透视混合现实功能优于Meta Quest Pro。
在接受科技达人Lex Fridman的采访中,扎克伯格讨论了Quest 3相对于之前Meta头显的改进,并重申了他对Apple Vision Pro的看法。
Quest 3于上周正式公布,Meta尚未透露完整规格,但表示面罩薄了40%,而GPU的功能是原来的两倍多。
扎克伯格告诉Lex Fridman,Quest 3的屏幕比Quest 2“清晰40%”,透视式混合现实功能比 Quest Pro“更好、更先进”。
「Virtual Desktop」1.27.1版将带来显著改进
「Virtual Desktop」新更新为桌面和VR流媒体带来了更高的比特率,以及其他改进。
「Virtual Desktop」1.27.1版仍在Beta测试中,但测试人员已经在Twitter和其他渠道上对新版本赞不绝口。
「Virtual Desktop」1.26.6版引入了超级分辨率,这一功能已经很强大了,该功能可以在不牺牲性能的情况下提高流式VR游戏的分辨率。
就在苹果推出Vision Pro头显的第二天,The Verge报道称,苹果收购了AR头显初创公司Mira,这家公司以提供在日本环球影城和好莱坞环球影城的超级任天堂世界马里奥卡丁车上使用的头戴设备而闻名。
美国工业AR技术平台Squint完成了由红杉资本种子期和种子前期孵化器Arc和Menlo Ventures风险工作室Menlo Labs领投,其他几位天使投资人参投的600万美元战略融资。
Squint基于AR技术使工厂操作员更直观操作工作内容,同时赋予了强交互性和技能学习途径,凭借AR功能,Squint使企业能够仅使用一部手机就将标准操作程序数字化——甚至不需要 IT团队——使培训、操作和维护等日常任务更快、更安全。
日本心理治疗VR方案提供商BiPSEE完成了由Beyond Next Ventures、ANRI、Scrum Ventures和Ocean Lease投资的新一轮融资,新资金将用于加速抑郁症“VR数字疗法”的研发。
“VR数字疗法”是一种基于VR和智能手机应用程序的新型治疗方法,面向以抑郁症为主的精神疾病,尤其是对抗抑郁药难以奏效的高亢患者的有效治疗而在国内外备受关注。
延伸阅读
深入解读从业者眼中的「Vision Pro」:引领产业,拓展视野
苹果「Vision Pro」全汇总:你的下一台Mac何必是Mac
「Vision Pro」亮相前夜:一文带你回顾苹果的XR布局