OPPO AR技术负责人徐毅:携手开发者共创计划,探索应用新场景

🤖 由 文心大模型 生成的文章摘要

▲OPPO AR技术负责人、OPPO研究院美国研究所副所长 徐毅

上海市北高新股份有限公司、93913、邀界网共同主办的2021虚拟与增强现实产业年会暨“金V奖”颁奖盛典日前在上海·市北高新商务中心隆重落幕。超300名来自XR产业链上下游企业、投资机构、高等院校、科研机构、媒体以及相关协会和组织的代表出席,现场大咖云集、行业菁英齐聚,堪称今年XR产业规格最高、规模最大的年度盛会之一。

在主题演讲环节,OPPO广东移动通信有限公司(以下简称“OPPO”) AR技术负责人、OPPO研究院美国研究所副所长徐毅通过远程视频的形式向现场嘉宾介绍了OPPO在AR行业取得的发展成就及正在开展的「OPPO AR开发者共创计划」

徐毅表示,OPPO一直在积极布局AR前沿技术,从2018年以来,陆续推出了AR开放平台——ARUnit,两代AR眼镜原型,并自研了SLAM算法、手势追踪、肢体追踪深度感知四项AR系统的核心能力,不仅延迟、精度和功耗等参数优秀,也能无缝适配OPPO手机和AR眼镜的各类镜头,凸显OPPO软硬结合的优势。

同时,OPPO深知开发者对内容生态构建的重要性,于今年推出「OPPO AR开发者共创计划」。该计划是OPPO面向AR开发者们推出的一项激励计划,涵盖2021 Qualcomm XR 创新应用挑战赛-OPPO AR特别奖赛道、OPPO AR开发者沙龙、OPPO AR 创意赛三大生态活动,OPPO将为最终入选团队或个人提供专用开发资金与投资对接机会、线上/线下资源和开发者创新技术支持等多维度的扶持,帮助优秀开发者们更好地成长,为更广阔的创新型AR应用场景提供基础支撑。

OPPO AR技术负责人、OPPO研究院美国研究所副所长徐毅演讲全文整理如下:

大家好,我是OPPO研究院美国研究所的副所长,也是OPPO AR的技术负责人,很高兴也很荣幸能够参与今天的活动,为大家介绍OPPO的相关信息。

接下来将由我代表OPPO AR团队给大家做一下OPPO AR的整体介绍。我的演讲分为三个部分:第一部分是OPPO的介绍,包括AR的简单介绍;第二部分将会向大家介绍我们OPPO AR Glass 2021的基本信息;最后我会介绍一下我们今年正在开展的「OPPO AR开发者共创计划」

首先给大家介绍一下OPPO,OPPO创始于2004年,如今是全球5大智能手机品牌之一,旗下手机系列产品销往全球40多个国家和地区,在全球拥有超过40万家门店。

大家对于OPPO的印象可能是营销做的比较出色,但实际上OPPO也非常重视技术的投入。这里我可以给大家透露一个数据,仅在2019年,我们的研发投入就接近100亿人民币,同时还建立了全球化的研发体系,在全球拥有6个研究所、5个研发中心、超过10000名研发人员,占员工总数的1/4。6个研究所分别位于美国硅谷、日本横滨、深圳、上海、北京和东莞。5个研发中心分别位于深圳、东莞、印度海德拉巴、成都和西安。

未来我们还会持续加强研发创新投入,探索更多前沿科技,而 AR就是OPPO前沿探索的一个重点领域

接下来给大家介绍一下过去OPPO在AR领域的一些探索。其实OPPO并不是刚刚开始探索AR的相关技术,很早以前我们就成立了跨国AR研发团队,主要进行AR底层技术研发。

早在2018年,我们就推出了AR开放平台——ARUnit。但我们认为,随着AR技术发展、显示科技的进步,AR眼镜这类可穿戴设备正在加速融入社会生产生活中。因此,OPPO研发团队内部开始结合现有AR研发成果,尝试开发AR眼镜原型。在2019年年底,我们发布了第一代AR眼镜原型机,通过第一代原型机的设计和研发,我们积累了丰富的AR眼镜研发经验,并且针对行业痛点进行持续的改善。

最终的成果是去年11月份发布的第二代AR眼镜——OPPO AR Glass 2021,我们在各项设计上做了大幅的优化,提升了设备的一些核心参数以及性能。

关键的核心技术以及成熟的硬件平台很重要,但内容的创新与成熟也是行业成熟非常关键的一块,而这正需要我们和开发者一起去实现。因此,我们在今年启动了「OPPO AR开发者共创计划」,希望通过这个计划为开发者进行AR内容创新提供全方位的支持,并和开发者一起去探索各种场景的应用。在未来我们还将持续加大投入,与行业伙伴及开发者一起加速培养行业走向成熟。

相信大家对于OPPO AR眼镜的详细参数非常好奇,OPPO AR Glass 2021采用了分体式设计,通过USB线连接手机,比第一代眼镜减轻了75%,CPU、GPU的性能也提升了超过40%。

在光学方面,我们采用了自研的光学方案,追求极致的显示效果,OPPO AR Glass 2021在亮度均匀性、对比度以及每度像素数量上相比第一代眼镜都有大幅提升。我们的眼镜搭载了双目鱼眼摄像头以及一颗拥有三维感知能力的TOF摄像头。在交互层面,我们同样配备了自研的手势识别算法,可以在毫秒级时间内识别跟踪单手20多个关键监测点。我们的手势算法基于双目语言开发,拥有更低的功耗,更快的识别速度,以及更大的运动辅助范围,同时也支持手势的语义识别。

去年,我们自研的「奇幻森林」游戏,属于全手势的塔防游戏,只需要简单的三个手势用户就可以上手,整体风格上也做得非常好,作为一款休闲类游戏,它非常合适。

AR的应用需要让用户通过设备实现虚拟世界、现实世界以及人之间的交互,因此确定相机的位置和周围的环境是最基本的能力,OPPO AR Glass 2021搭载了自研的定位算法,能够实现实时的六自由度的高精度空间定位,以及三维重建。

▲SLAM算法处理下的镜头画面

AR领域空间定位的主要挑战在于,在计算力有限的平台上完成较高精度及鲁棒性的定位与建图,一些情况下受限于算法实施的硬件,设备所处的环境也会对算法产生不同程度的影响。因此,AR领域的空间定位算法应该根据设备以及应用场景来设计和实现。

OPPO AR自研SLAM算法的优势在于:软硬件相结合,同时兼容手机和眼镜,并且支持多传感器,能够更好的适配我们自己的硬件设备,并针对目标应用场景做针对性的优化。

光学是AR的核心技术,也是很关键的待突破技术。当前行业存在着各种技术方向和路径,都不能算是非常完美,未来的光学技术需要针对产品用户以及场景进行合适的选择优化。在光学方面,OPPO AR Glass 2021采用了目前行业显示效果比较优秀的自研Birdbath光学方案,只为了追求极致的显示效果。

在这里再介绍一下OPPO AR眼镜的主要一些架构。在传感器方面,我们采用了双目鱼眼摄像头及ToF镜头;在光学部分,我们采用了Birdbath光学方案。当然AR行业的发展不仅在于技术以及硬件,内容的探索以及内容生态的成熟也是非常关键的一块。

在内容方面我们联合爱奇艺和京东打造了AR观影、购物体验,并开发了多人对战游戏,使用手势操作的塔防游戏等内容。

AR内容场景创新仅凭我们一己之力也是没有办法实现的,内容生态的发展成熟离不开内容开发者的作用和努力,因此我们也推出了「OPPO AR开发者共创计划」

最后我就共创计划给大家简单介绍一下,我们今年的开发者共创计划共包括三个部分,高通创新应用挑战赛-OPPO AR特别奖赛道,在北京、深圳、成都共举办三场OPPO AR开发者沙龙以及OPPO AR创意赛。我们将从参与这三项活动的开发者中筛选出部分优质的AR开发者,通过内容订制或者是内容共创的方式,支持开发者进行AR未来创新。对于入围开发者共创计划的开发者,OPPO将提供全方位的支持,这里面包括技术上的支持、开发资金的支持、投资机会的对接、内容的共创、OPPO全国门店展示以及通过OPPO渠道的媒体曝光机会等。

总之,我们希望能够给国内优质的AR内容开发者提供全方位的支持,与开发者一起去进行AR内容的创新及尝试,这是我们生态活动的一个计划表(注:如下图),目前高通创新大赛已经在3月19日开启,不少开发者已经报名参与其中;4月到5月间,我们已经在北京、深圳、成都连续举办了三场AR开发者沙龙;到8月份我们还会举办OPPO AR创意赛。OPPO将通过这三项生态活动,帮助开发者参与到我们的共创计划中。

下半年,我们还有更多开发者共创计划相关的活动,我们会持续不断的推动AR内容的发展,给开发者更多的场景创新、内容展示以及媒体传播的机会。这里就我们在北京、深圳以及成都举办的三站沙龙情况给大家简单回顾一下。OPPO AR开发者沙龙举办的非常成功,也非常感谢所有现场参与的开发者,以及我们的合作伙伴百度、网易易现以及爱奇艺的大力支持。

现在,我们的开发者共创计划已经进入了优秀开发者筛选阶段,任何报名参与以上三项活动中的任意一项、并提交注册信息的开发者,都将获得参与共创计划的评审机会。入选共创计划的开发者名单将在今年内产生,开发者进入到共创计划之后,我们将配合开发者一起努力,争取加速优秀项目的产出。

我们的工作人员已经开始依次与这些开发者取得联系,完善其参与共创计划的相关信息,如果有开发者还没有提交相关信息或收到参与消息,请随时通过我们的网站以及邮箱与我们联系。

以上就是我今天的分享,谢谢大家,也感谢主办方93913的邀请,希望以后能和国内AR行业同仁们一起推动国内AR行业的发展,谢谢。

「93913原创内容,转载请注明及回链」