GDC 2023|Epic Games发布高保真表演捕捉功能MetaHuman动画器

🤖 由 文心大模型 生成的文章摘要

在GDC 2023期间举办的State of Unreal活动上,Epic Games宣布即将为MetaHuman推出新的功能集:MetaHuman动画器。

它允许你使用iPhone或立体头戴式摄像机(HMC)在MetaHuman角色上以高保真动画的形式重现任何面部表演。有了它,你就能捕捉到演员表演中的个性、真实感和保真度,将每个细节和微妙变化转移到任意MetaHuman身上,在虚幻引擎中为他们注入生命力。

逼真的数字人类需要通过高质量动画呈现真实可信的表演,但创作这种动画需要大量专业知识和时间,即使是最熟练的创作者也会认为这项工作充满挑战性。现有的表演捕捉解决方案很难在角色身上忠实再现演员表演中的每一丝细微变化。要创作真正逼真的动画,往往需要熟练的动画师在通常极其艰辛和耗时的流程中费力调整结果。

但这种情况即将发生改变!

Epic Games计划在未来几个月内发布MetaHuman动画器,它将生成3A级游戏开发商和好莱坞电影制作人所要求的高质量面部动画,且独立工作室乃至业余爱好者都能够使用它。即使你不认为自己是一名动画师,只要使用你口袋中可能就有的iPhone以及标准三脚架,就可以为MetaHuman创建真实可信的动画,与观众建立情感联系。

MetaHuman动画器也可以与任何专业垂直立体HMC捕捉解决方案(包括Technoprops提供的解决方案)搭配使用,创造质量更高的结果。MetaHuman动画器支持时间码,因此,如果你拥有用来捕捉身体动作的动作捕捉系统,还可以轻松地将面部表演动画与身体动作捕捉及音频衔接在一起,创造完整的角色表演。它甚至可以使用音频生成惟妙惟肖的口型动画。

那么,它是如何工作的?

关键之处在于确保系统理解演员面部的独特解剖结构,以及如何将该结构映射到目标角色上。MetaHuman动画器首先会为表演者创建MetaHuman本体,即一个具有相同拓扑结构并与所有MetaHuman共用相同标准绑定的网格体。

如果你使用过网格体转MetaHuman功能,就会知道,这个过程将依据3D扫描或雕刻创建MetaHuman本体;而MetaHuman动画器则以这项技术为基础,能够根据少量捕捉镜头创建MetaHuman本体。该过程只需几分钟,并且只需要针对每位演员执行一次。

完成该步骤后,即会通过追踪和解算MetaHuman面部绑定的位置使用MetaHuman本体演绎表演。最终,不管演员和MetaHuman的容貌有什么不同,每一个细微表情都将在MetaHuman目标角色上精准重现。你可以在虚幻引擎中直观地确认表演得到正确展现,并逐帧比较MetaHuman本体的动画与演员的镜头。

另一项好处是,动画数据经过整理,控制曲线在语义上是正确的,也就是说,这些曲线将经过你期望的面部绑定控制点——就仿佛是由人类动画师创建的,因此你可以出于美术目的,轻松调整它们。

由于虚幻引擎从一开始就使用了MetaHuman本体,你可以安心地知道,即使你将来修改了该MetaHuman,或希望改用其他任何MetaHuman,仍可继续使用今天创建的动画。

MetaHuman动画器的处理功能将由虚幻引擎MetaHuman插件提供,它和引擎本身一样,可免费下载。如果你想使用iPhone(MetaHuman动画器兼容iPhone 11或更新型号),则还需要安装免费的Live Link Face iOS应用,虚幻引擎将更新此应用,通过新增一些捕捉模式为此工作流程提供支持。

来源:unrealengine