2022年春节可能对很多人来说是「信息量」极大的一年,也是中国高歌猛进的一年。从春晚一路划到北京冬奥,我们进行了一场一个月的全民狂欢,几乎每个社交平台都在疯狂刷屏。在热烈又兴奋的一个月里,我们不仅秀出了中国人民的友好和热情,也再一次向世界展示由高新科技「覆盖」的全新中国,民族自豪感那是嘎嘎乱飚。
作为XR从业者,兴奋之余,我们也从春晚、冬奥和各种短视频中,发现了不少XR的影子。
话不多说,让我们来盘它!
《金面》:由XR牵线的「古今之恋」
虽说春晚语言类节目最出圈的依旧是网络段子,但不得不承认,歌舞类节目水准又创新高。展示「三星堆」文物的舞蹈《金面》更是为三星堆本身带来一波热度,百度指数显示,「三星堆」一词的搜索量在除夕夜达到近一月的顶峰:
舞蹈节目《金面》讲述的是一个人民群众喜闻乐见的穿越故事,将现代人对爱情的憧憬和「三星堆」文物相结合,谱写一个浪漫的爱情故事。不得不说,5G冲浪编剧俞白眉还是很会玩儿的,一个简单的故事编写,直接将上千年的距离化为乌有,许多观众看完之后也赞美道:“感觉看了个电影”。
但这里不仅有「今穿古」,甚至还有「古穿今」。在节目结尾部分,青铜人借助数字建模、动作捕捉等「活」过来,与女孩一起在天空漫步。
《金面》整个舞台与720度屏幕融合在一起,呈现出极具沉浸感的无边界舞台,在这里虚实的界限被打破,观众也像踏入「三星堆」神秘文明之中,由数字建模构建的虚拟还原场景栩栩如生,无论是屏幕前还是现场观众,都被包裹这跨越千年的浪漫七夕中。
当然,《金面》不是春晚唯一一个借助沉浸式舞台的节目,被推上热搜「青绿腰」的出处《只此青绿》、创意音舞诗画《忆江南》背景中《千里江山图》、《富春山居图》的恢弘、诗意的山水场景,也是通过XR、全息扫描等技术呈现。特别是《只此青绿》,正是利用XR技术在地板上做出镜面效果,呈现出「人从画中来、到画中去」的中国山水画、特别是色彩中的朦胧意向美。
从去年周杰伦和刘德华的远程+实时渲染舞台起,春晚就开始采用XR、云渲染等技术,今年更是在硬件上对舞美进行了升级。据光明网报道,今年春晚的无边界舞台就是通过,4K XR制作系统、4K AR实时渲染系统、高清晰度大屏幕等共同完成。同时还具备最新研发的近红外光学高精度摄像机跟踪系统,使屏幕内外视频的融合效果更加完美,演员与虚拟空间的交互更加自然。此外,春晚在演播大厅还设置了130台4K摄像机,通过对采集视频流的实时处理制作,实现子弹时间、多视角等沉浸式观看方式。
不过,春晚XR行业最大赢家当属在口播中出现无数次的Pico。顺便一提,此前的央视春晚冠名商是美的、哈药集团等,自2015年开始引入阿里、腾讯、京东等互联网企业,并在近几年呈现出向高新科技倾斜的趋势。
上春晚效果也很明显,Pico一词在除夕夜热度飙升,这一波属实赢麻了。
冬奥村还是「度假村」?这些黑科技说了算
说完春晚,咱们再来聊聊冬奥。
虽然张emo导演说了冬奥要环保、简约,但正所谓「砍柴的以为皇帝都挑金扁担」,一个14亿人口的泱泱大国所谓的简约也不是一般国家能想象的。
比如咱的开幕式。那地板比08年夏奥会还夸张,用了总面积达10393平方米的8K高清屏幕构建的地面显示系统,分辨率更是达到惊人的29900×15096。在此基础上,还要满足耐磨、结构承重、防水防寒、电气安全等特殊需求,但即便是这样,多次排练依然会面临屏幕损坏、坏点等风险(想想08年emo导演还怕击缶环节缶不亮了)。
但要么说咱中国人骨子里的勤俭节约呢。既然只要用就可能坏,那不用就不会坏。
于是我们又研发了一套冬奥开幕式仿真系统。
这套系统出自北京理工大学计算机学院数字表演与仿真技术团队,采用原创的「智能化创编排演一体化系统」打造的全仿真「虚拟鸟巢」。据了解,在开幕式之前,虚拟鸟巢里就完成了12次的排练,甚至精确记录了每一位演员的移动,还准备了定制的表演手册。
这一举动不仅节省了在排练中的地屏损耗成本,也极大程度保证了地屏与演员的配合不出错。
同样的虚拟仿真系统也被应用在转播中,也就是虚拟场馆仿真系统(VSS)。
这套系统中1:1建立了冬奥场馆的仿真模型,利用数字孪生的形式帮助活动流程配合、转播调度等等。
要知道,我们举办冬奥会,面临的可不仅仅是赛事,还包括数千名闭环人员的防疫工作,工作量相比以往更大,VSS系统的出现,从实际上减轻了各环节的压力。
相比以前大喇叭喊着满场找人的画面,用这套系统不管是安排还是应急,都提高了不少效率。
看完了开幕式,再来说说奥运村。
最初关注奥运村运动员Vlog的小伙伴可能有印象,有运动员拍到VR蛋椅等设备。
其实冬奥村的VR娱乐可真不少。据了解,冬奥村专门设置了VR体验区,不仅有大家熟知的《节奏光剑》、VR电影、XR滑雪等娱乐,甚至还有「蛟龙」号载人深海模拟体验器、「神州」号VR飞船模拟器。
不过让运动员们最兴奋的还是VR电竞。超大空间中,只需要带着VR眼镜拿着枪,就能自由奔跑对战,不受任何限制。
看看他们,开心的像200多斤的孩子……
这一套VR体验甚至吸引了国际奥委会主席巴赫的注意。那么它来自于谁呢?就是致力于VR线下体验的当红齐天。
相关媒体报道显示,2019年,当红齐天正式与英特尔签署关于东京、北京、巴黎三届奥运会的合作备忘录,共同研发基于5G的VR/AR内容解决方案,为奥运运动员提供基于VR/AR的训练及体验。
2022冬奥会,当红齐天的5G+XR智能体育产品正式进驻冬奥会,通过创新技术为国际奥运运动员、教练员带来丰富的元宇宙体验。
除了娱乐之外,还有一些实用功能。比如在张家口的冬奥村中,运动员就可以利用由商汤科技研发的AR导航应用,扫描实景就能锁定自己的位置,输入目的地后,跟随地面上的AR虚拟箭头便可抵达。
XR的好,不止运动员能体验到,我们观赛的观众也可以体验。
咪咕作为国内赛事转播巨头,也拿下了冬奥会转播权,关心的小伙伴可能知道,除了央视频之外,咪咕是唯一一个能看冬奥直播的网络App。
对这一次北京冬奥的转播,咪咕做足了准备。比如精心搭建的演播厅,邀请了知名前职业选手(连上12个热搜的王濛)、国民解说(「插不上话」黄健翔)等等受观众喜爱的嘉宾作为赛事解说,还把VR、AR等技术完美融合在冬奥赛事转播中。
像短道速滑、坡面障碍技巧、大跳台等项目,观众都可以选择用VR、手机等设备近距离观看。像肖恩·怀特这场比赛,用VR模式就可以直接站在首钢大跳台的旁边,近距离感受职业选手的技术压制,甚至感觉雪都溅到了脸上……
此外,咪咕还把国家速滑馆「冰丝带」、云顶滑雪公园场地等用AR的形式「搬进」了演播厅,让解说们也「爽一把」。
当然,上线VR的不止咪咕一家,像央视频、新华社等APP也都用不同方式上线了VR观赛、参与冬奥的功能。
▲阿里巴巴Cloud Me
其实XR相关的技术在冬奥还有不少:阿里巴巴的「任意门」Cloud Me让阿里巴巴集团董事会主席、CEO张勇和国际奥林匹克委员会主席托马斯·巴赫远程会面,央视新闻的AI手语虚拟主播、虚拟天气主播冯小殊、谷爱凌数字形象Meet Gu、奥林匹克公益宣传大使REAI等等。正是无数人的热情呈现和高新科技的助力,才促成这一场全民的盛会。
写在最后
在最初刷到外国运动员入住冬奥村Vlog时,我们就注意到许多熟悉的东西,咖啡机器人、做饭机器人、全自动售卖机、刷卡模式等等,随着冬奥会的举办,越来越多的所谓「冬奥黑科技」进入我们的视野,而这些,都显得那么新奇又熟悉。
开幕式结束后,有网友在论坛发帖,问地屏光效跟随人的效果怎么实现,众人纷纷惊讶于居然是人工智能实时计算。有网友说,这有什么,商场里早就有了,只不过没有这块屏幕大罢了。
一语惊醒梦中人。「冬奥黑科技」其实早就进入中国人的日常生活中,调酒机器人,不就是面馆的“削面奥特曼”?而VR、智能送餐机器人,也早就成了商场、酒店的标配。这也是让我们作为中国人最自豪的地方,中国的「黑科技」从来都不是藏在实验室里的科技,而是接着地气、人民群众喜闻乐见的科技。