呈现真实面部,佳能VR会话应用「Kokomo」打造个性体验

🤖 由 文心大模型 生成的文章摘要

佳能VR会话应用「Kokomo」为 VR会议带来了更多个性,代替VR头显,虚拟化身将能呈现用户真实面部。

与朋友互动,就好像他们就站在你面前,这是佳能「Kokomo」赋予的功能,视频对话将在沉浸式环境中进行,并提供了更具个性的特殊体验。尽管与你交谈的人实际上戴着VR头显,但他们的面部动画图像将出现在虚拟世界中。

使用Quest 2进行VR通话

「Kokomo」入门很容易,你只需要一台VR头显和一部智能手机。手机上的配套应用会捕捉对话伙伴的相机照片,并将其显示在虚拟背景中,类似于Zoom等平台的滤镜。

智能手机和应用程序会扫描你的脸部以创建3D模型,并将该模型叠加在用户头显所在位置,这使得用户在通话期间仿佛没有佩戴头显一般。

开始通话前,将智能手机放在腰部位置,这样用户整个身体将处于相机框架内;然后,开始通话;在通话过程中,使用Quest手部追踪浏览VR菜单。

目前Techcrunch已对「Kokomo」进行了广泛的测试,并对扩展选项大加赞赏,这意味着用户可以调整比例以匹配虚拟化身。

Techcrunch编辑Haje Jan Kamps表示:“如果一切按计划进行,「Kokomo」就是最好的远程呈现系统。”

不过,在一些初始测试运行中,抖动图像下降到每秒三到四帧。另外,全身虚拟化身看起来是二维的,有时类似于动画纸板剪影。

虚拟现实中的“面具”

此外,叠加在图像上的人脸“面具”不断消失并重新出现,这都会破坏沉浸感。如果佳能在「Kokomo」抢先体验期间能够解决所有问题,那么通过手机摄像头扫描人脸再传至头显呈现虚拟化身这个概念就非常有前途。

「Kokomo」背景包括了客厅、海滩环境,如马里布和夏威夷,除此之外你还可以与对话伙伴共享图片或视频。

「Kokomo」已上线App Lab平台,面向Quest、Quest 2和Quest Pro,配套应用已可用于iOS 和Android。

来源:Mixed

「93913原创内容,转载请注明出处」