Facebook展示逼真虚拟化身研究成果

🤖 由 文心大模型 生成的文章摘要
Facebook Reality Labs(FRL)首席科学家Michael Abrash认为AR和VR将成为人们未来工作,娱乐和连接的主要方式。
被称为“Codec Avatars”的匹兹堡办事处正在采用“突破性3D捕捉技术和人工智能系统”来生成逼真的虚拟化身,这些虚拟化身可以为未来快速轻松的个人化身创作者提供基础。
FRL Pittsburgh的研究主管Yaser Sheikh说,这个想法是缩短物理距离,并在虚拟现实中创造社会联系,就像“现实世界中的自然和共同”一样。
“这不仅仅是关于尖端图形或高级运动跟踪,这是为了让它在虚拟现实中与人们进行自然而轻松的互动,就像在你面前的人一样。挑战在于在人工环境中创造真实的互动。”
一个演示展示了两个VR用户与栩栩如生的虚拟人物交谈,让人们对VR虚拟形象的未来有了一个有趣的了解。
Facebook表示,这些实时逼真的虚拟形象需要相当多的装备来实现。然而,最终的目标是通过轻巧的头显实现所有这一切,FRL Pittsburgh目前使用原型头戴式捕捉系统(HMC)配备了摄像头,加速度计,陀螺仪,磁力计,红外线照明和麦克风,以捕捉全系列人类的表达。
“编解码器头像需要捕捉你的三维轮廓,包括你移动方式的所有细微之处。”该实验室使用一小组参与者,每秒捕获1GB数据,以创建物理特征数据库。在未来,希望消费者能够在没有捕获工作室且没有太多数据的情况下创建自己的化身。
目前,体积捕获持续约15分钟,并且需要大量相机来创建最逼真的虚拟化身。然后,该实验室计划使用这些捕获来训练AI系统,以便消费者可以通过几个快照或视频快速轻松地构建Codec Avatar。
FRL研究科学家Shoou-I Yu表示人类有各种不同的体积,“这让我了解每个人的独特之处。我们必须捕捉所有这些微妙的线索,以使一切正常运作。这非常具有挑战性。”


【93913原创内容,转载请注明及回链】