1月7日21:00,CoCo李玟“千禧之境”全虚拟VR演唱会在PICO视频上线。这是国内首场明星6DoF全虚拟VR演唱会,也是PICO首次尝试制作集6DoF、全虚拟场景和实时动捕技术于一体的VR视频内容。而这样一场听上去科技感、未来感十足的全虚拟VR演唱会究竟体验如何,能否媲美真实的线下演唱会或有无超越线下演唱会的特殊体验,今天我通过自己的亲身体验来表达一些自己的看法。
四个主题场景演唱会,带来轻松有趣的VR体验
演唱会以搭乘“时光列车”穿越至千禧年代“解救”李玟为故事主线展开。进入演唱会后,就会发现自己置身于一个充满未来科技感的大厅当中,周围是和我一样正在等待演唱会开始的其他用户,所有用户都是以一个较为简单的虚拟半身形象呈现的,在我体验的这段时间,与我观看同场演出的用户数量并不算多。
大厅的正前方是一座巨大的类似传送门的建筑,传送门上方则是演唱会开始的倒计时。几分钟的倒计时结束后,巨大的李玟虚拟半身形象出现在传送门中间,伴随着空灵的李玟的开场白,我发现自己的沉浸感好像确实在逐步提升。
值得一提的是,在等待演唱会开始的时候,我还发现一个比较好玩的功能,即演唱会中的拍摄功能,这个拍摄功能几乎和在现实生活当中的拍摄功能完全一致,平滑地运镜和可调节的取景框都让拍摄变得非常方便,这也致使我在等待过程中拍拍拍了许久,毕竟第一次观看VR演唱会,得多拍照留念不是?
李玟的开场白结束后,我和其他用户便被一起传送到了一辆“时光列车”上,说实话,我对“穿越时空”的概念在此前还挺有期待。不过列车车厢的设计和其他用户简单的虚拟形象让我稍稍有些出戏。不过在列车开动的过程中,同一车厢内的用户之间是可以互相交流的,大家在蹦蹦跳跳上窜下窜的过程中互相打招呼,发表自己对这场VR演唱会的一些看法,这个过程我还感觉挺有趣,也在很大程度上提升了我的沉浸感。
演唱会共设计了四个主题场景,分别是“奇幻热烈的东方之境”“复古动感的DISCO舞池”“拾光之遇的回忆梦境”“摇摆热烈的狂欢乐园”四大主题场景。
在第一站中,演唱会主题比较偏国风,而李玟也以花木兰的形象演绎了经典中国风歌曲《刀马旦》和2022年发行歌曲《东方不败》,随后还演唱了一首慢歌《月光爱人》。其中最让我记忆深刻的还是演唱会中为观众设置的各种互动功能,比如发送实时弹幕并随时抬头查看漂浮在空中的其他用户的弹幕、和李玟的虚拟形象近距离自拍、用手触摸飘散在天空中的花瓣等。
当然,在听音乐的时候我也没闲着,在演唱会的虚拟世界中上蹿下跳,这时候6DoF的优势就体现的淋漓尽致了,不同于在移动终端上看2D视频,在6DoF技术的支持下,我可以在不同的方位和视角观看演唱会,甚至可以直接跳上舞台和“李玟”来次“亲密接触”,这在现实线下演唱会当中是根本不可能实现的事情,也算圆了我儿时想和李玟同台演唱的梦想。
在演唱会的过程中,我也一直在和其他用户不断交流,甚至还收获了两名好友,这种边聊天边看演唱会的体验,还比较还原现实演唱会的场景,而且在这一点上,VR演唱会还优于现实演唱会的一大优势就是,如果我并不想与其他用户交流,只想专心听歌,又或者周围用户的讨论声太大影响到我正常观看的话,我也可以随时调低或者屏蔽其他用户的声音,从而专注地沉浸在演唱会体验中。
不过如果是更想体验演唱会那种人山人海热烈激情的氛围感的话,观看VR演唱会还是需要挑选一个更加热闹的场次。当然,更多的观众对服务器端的处理能力、VR一体机端的渲染能力也会提出更大的挑战,使用类似Cloud XR这样的云端技术方案或许才能在VR中重现万人体育场座无虚席的演唱会盛况。
在第二站中,李玟从国风切换到复古风,带来了《Di Da Di》、《So Crazy》和《Candy》的歌曲串烧,机械风造型、动感舞曲让用户仿佛置身于一个复古的迪斯科歌厅。其中,全新单曲《Candy》刚刚于1月4日上线,李玟选择将这首新歌的首唱在这场全虚拟演唱会中进行演绎,确实营造出了比较甜蜜梦幻的氛围。
在这一主题中最让我感到欣喜的就是加入了节奏音游的元素,随着音乐,我的面前出现了四个节奏音轨,而我手中的手柄也随之变化成两支荧光棒,一个个节奏音符通过音轨向我传送过来,而我则可以伴随着强烈的音乐节奏敲下这些音符,甚至还有评分设置,到最后我还敲出了近35万分,系统还提示我在这一环节取得了胜利。这种在演唱会边听歌边玩节奏音游的体验确实让我有些许心潮澎湃,不得不说这一设计还是挺带感的。
第三站也是这次演唱会中我最期待的一站,因为在儿时便很喜欢听《想你的三百六十五天》这首歌,宝莲灯的动画片我也看了无数遍,而这一站以“拾光之遇的回忆梦境”为主题,很显然是要开启怀旧模式了。令我很惊喜的是,刚搭上去往第三站的列车后,我就发现自己的虚拟手柄变成了一个宝莲灯的外观,列车的车厢也和之前两站有所不同,整个车厢变成了星空主题,而且车厢内漂浮着很多闪闪发光的萤火虫,还可以使用宝莲灯来触碰这些漂浮在空中的萤火虫来获得点亮车厢的能量,不得不说这种比较用心的小互动设计我确实很喜欢。
到达第三站的演唱会现场后,整个演唱会风格也变成了树木葱郁的森林主题,天上还飘着淅淅沥沥的小雨。我个人认为演唱会的第三场的设计是最用心的,李玟的虚拟形象以一袭白色长裙的人物设计出场,森林中的各种元素如梅花鹿、地上的小水坑、雾蒙蒙的雨后森林气氛都烘托着整首歌的氛围,而且还能看到小小的沉香在和李玟互动,这一切都让我感觉到身临其境。更让我感到惊喜的是,随着李玟唱到对应歌词如“秋叶,飘落思念的红叶”时,整个场景也会在瞬时间转换成对应的秋季景象,前一秒夏雨滂沱,后一秒就秋风萧瑟,转瞬间又冰天雪地,这种对应歌词的季节转换确实是很用心了。
随着音乐到达高潮部分,屏幕上再次出现了互动的提示,当我按下手柄按钮为宝莲灯充能,就可以看到小沉香手中的宝莲灯不断吸取周围的能量,发出了七彩夺目的光芒,随后李玟的虚拟化身便牵起了沉香的手,一起飞向空中去寻找沉香的妈妈,这个时候所有观众的视角也是追随着李玟和沉香飞到天上的。在整个过程中,周围观看演唱会的其他用户都和我一样不断发出感动的欢呼声,帮助沉香激活宝莲灯并成功找到妈妈,这一幕属实是老观众的回忆杀了。
之后我们又搭乘列车来到了“摇摆热烈的狂欢乐园”,一上来便有互动环节,按下按钮就可以发射烟花,第四场的整体风格也的确是比较燃的,李玟的虚拟形象还出现了几个分身,整体的视觉效果比起前三场来说有所提升。第四场音乐结束后,所有观众便跟随李玟的虚拟化身一起飞到传送门中,穿越到了最开始的等待大厅中,之后便是“彩蛋”环节,用户可以选择四个场景中的任意场景并前往拍照打卡,拍照后还可以看到照片会带有李玟的签名,我只选择了我最喜欢的第三场并和一袭白裙的李玟虚拟形象合了一张影,便退出了VR演唱会。
概念新颖技术难度高,VR虚拟演唱会仍需「更上一层楼」
整场VR演唱会下来,虽然新鲜感促使我坚持听完了全场,但在实际体验过程中,我心里还是积攒了一些对这场演唱会的槽点。首先我认为最大的问题就是阴影效果的缺失让整场演唱会的视觉效果有些「塑料感」,虚拟舞台的搭建也较为简单,其次是四场演唱会中,李玟的虚拟化身不太符合正常人体外形,过于细长有些像火柴人形象,模模糊糊的人物五官也和李玟并不相像,此外还出现了不少穿模的状况和诡异的动作,让我感觉有些出戏。
为了了解哪些因素会影响VR虚拟演唱会的视觉呈现,我查阅了更多有关VR虚拟演唱会的资料。根据资料的说法,我们在VR世界中所看到的虚拟形象,其实都是通过前期的动作捕捉还有面部捕捉来制作的,这些捕捉通常都是通过光学或其他方式实现的。动捕演员穿上专门的动捕服装后,对每一首歌曲进行演绎,这些舞蹈动作的数据信息就会被抓取下来,随后被映射到已经绑定好的模型之上,后期再为模型加上虚拟的服装,做好物理模拟,再把人物放进虚拟场景里面,整个虚拟形象搭建过程也就完成了。
图片来源:PICO-VR官方Bilibili账号
但根据B站UP主“影视飓风”所说,这些目前来说都只是理想中的工作状态,在现实里面几乎是难以完成的。比如动捕会因为各种标定问题出现穿模还有抖动的情况,尤其是在比例不一致的情况下,甚至会出现整个人物模型扭曲变形的情况。而目前由于技术有限的原因,以上这些问题并没有很好的解决方法,就只能靠动画师后期在模型后制软件里一帧一帧对建模进行修补,处理衣服穿模,修缮人物动作还有面部表情等等,这一切都只能人工操作。
而李玟的这场虚拟演唱会中,涉及到多个场景多套人物服饰以及不断变化的动作形态,后期修缮这场虚拟演唱会的人工工作量庞大到无法想象,据说甚至直至演唱会上线前的最后一刻,动画师们还在修缮。也就是说,我们看到的最终呈现结果,已经是凝聚了20多名优秀动画师夜以继日工作半年多时间才勉强完成的。因此我们有理由认为,如果动作捕捉的解决方案能够再进步一些,后期修缮的工作能更高效完成,VR虚拟演唱会应该能够给我们带来更好的体验。但现阶段来看,综合考虑成本、技术难度、VR一体机性能等诸多要素,李玟这场虚拟演唱会已经是一场难得的优秀演出。
总结下来,这场VR虚拟演唱会给我留下印象最深的便是整场演唱会中与观众的交互,与在现实中的线下演唱会不同,在虚拟世界演唱会中的自由度几乎是百分之百的,我可以以任何姿势在任何地点观看演唱会,还可以在演唱会中随意跳到搭建的任意模型上,甚至还可以在演唱会中玩音游、捡花瓣、捉萤火虫,而且这些交互也会同步到手柄,通过宽频的震动反馈,可以让我完全有理由相信自己是真的在这个场景里面与演唱会互动,而这些都是现实演唱会或者视频演唱会所不能实现的。
但是VR演唱会除了是一场互动型的演唱会,也应该是一场观赏型的演唱会。这场VR演唱会所传达的概念是新颖且值得期待的,但受限于VR一体机性能的限制、动作捕捉解决方案的限制、同时观看观众数量的限制,最终呈现给观众的体验仍有许多可以改善的地方,VR演唱会仍需「更上一层楼」。
随着元宇宙概念的兴起,我们能够在虚拟世界中做的事情也越来越多,VR也在越来越多的领域开始发挥自己的作用,为我们带来更多的惊喜。因此我们也完全有理由相信在不久的未来,虚拟世界也许真的能够成为独立于现实世界以外的第二个世界,而在这个虚拟世界中,我们能够拥有更高的自由度,去做更多在现实世界中难以做到的事,去完成更多超越现实的梦想。