Epic Games 发布 MetaHuman Animator
最初于 2023 年 3 月 23 日发布预览版，并更新了最终版本的详细信息。
Epic Games 发布了MetaHuman Animator，这是其 MetaHuman 框架备受期待的面部动画和表演捕捉工具集。
该系统简化了将演员的面部表演从 iPhone 或头盔式摄像机拍摄的镜头传输到虚幻引擎内实时元人类角色的过程。
Epic 声称它将“制作 AAA 游戏开发商和好莱坞电影制作人所需的面部动画质量，同时可供独立工作室甚至爱好者使用”。
该工具集是在今年早些时候的GDC 2023上 Epic Games 的 State of Unreal 主题演讲期间宣布的，现在可以在其适用于 Unreal Engine 的免费 MetaHuman 插件的最新版本中使用。
Epic Games 用于为游戏和动画创建下一代数字人类的框架的一部分
MetaHuman Animator 是 Epic Games MetaHuman 框架的最新部分，用于创建用于游戏和实时应用程序的下一代 3D 角色，而且越来越多，在离线动画中。
第一部分是基于云的角色创建工具MetaHuman Creator，它使用户能够通过定制预设的3D角色来设计逼真的数字人类，已于2021年发布抢先体验版。
用户可以通过混合预设来生成新角色，然后手动调整脸部比例，并定制现成的发型和服装。
第二部分是虚幻引擎的 MetaHuman 插件，于去年发布，可以创建与其他 DCC 应用程序中创建的 3D 扫描或面部模型相匹配的 MetaHumans。
生成与演员的视频片段相匹配的元人类角色
元人类角色具有面部装备，因此它们已经支持面部动作捕捉，但要从具有不同面部比例的演员的视频片段中传输该动作需要手动处理。
MetaHuman Animator 旨在简化重定向过程：Epic Games 将这一工作流程称为“Footage to MetaHuman”。
与 Mesh to MetaHuman 一样，它会生成与源数据匹配的 MetaHuman：在本例中，是演员的视频片段以及支持深度数据——稍后会详细介绍。
“牙齿姿势”：MetaHuman Animator 工具集用来生成与演员视频片段中的演员面部比例相匹配的 MetaHuman 角色的标准参考框架之一。
从演员脸部的一到四个参考帧开始工作
该过程首先将镜头引入虚幻引擎，并识别 MetaHuman 插件可以执行求解的关键参考帧。
在使用专业相机拍摄的镜头中，只需要一个帧：演员的正面视图，具有中性的面部表情。
对于 iPhone 镜头，Epic 建议还识别演员脸部的左右视图，以提高解算质量。
显示演员裸露牙齿的进一步参考系提高了口腔动画的质量。
然后，MetaHuman 插件解析素材，使模板网格（MetaHuman 头部）与数据一致。用户可以在 3D 头和源图像之间擦拭以检查解决方案。
然后，模板网格用于生成可用于动画的资源。
处理在云端完成——这是工作流程中唯一不在本地运行的部分——生成的 MetaHuman 通过 Epic 的Quixel Bridge 插件下载到虚幻引擎。
从视频中提取面部动作并将其应用到 MetaHuman
结果是根据演员面部比例校准的 MetaHuman 装备。
然后，MetaHuman 插件可以从该演员的视频片段中提取面部动作并将其传输到 3D 角色，用户可以在视口中预览结果。
然后可以将动画作为关卡序列或动画序列导出到虚幻引擎。
导出为动画序列可以将面部动画无缝传输到其他超人类，这意味着演员的表演可用于驱动任何超人类角色。
工作流程的其他好处
该过程生成的控制曲线“语义正确”，即其结构与人类动画师创建的控制曲线相同，从而使动画更易于编辑。
MetaHuman Animator 还支持时间码，可以将面部动画与全身动作捕捉同步；并可以使用面部录音中的音频来生成舌头动画。
可与从 iPhone 到专业头盔式摄像头的任何设备配合使用，
MetaHuman Animator 还设计用于与全系列面部摄像头系统配合使用。
对于独立艺术家来说，这包括使用 Epic 的免费 Live Link Face 应用程序从 iPhone 流式传输的素材。
Live Live Face 1.3 与 MetaHuman Animator 一起发布，更新了该应用程序，使其能够捕获原始视频片段和所需的随附深度数据，后者通过 iPhone 的 TrueDepth 相机进行。
较大的工作室可以使用标准的头盔式摄像机：MetaHuman Animator 可与“任何专业垂直立体 HMC 捕捉解决方案”配合使用，包括来自 ILM 的Technoprops部门的解决方案。
价格、发布日期和系统要求
MetaHuman Animator 工具集是 Epic Games 免费 MetaHuman 插件的一部分。该插件与 Unreal Engine 5.0+ 兼容，但要使用 MetaHuman Animator 需要 Unreal Engine 5.2+。
Live Link Face 可免费用于 iOS 16.0 及更高版本。要将其与 MetaHuman Animator 一起使用，您需要该插件的 1.3+ 版本和 iPhone 12 或更高版本。
MetaHuman Creator 现已推出抢先体验版。它在云端运行，兼容 Chrome、Edge、Firefox 和 Safari 浏览器，在 Windows 或 macOS 上运行。它可以免费与虚幻引擎一起使用。
虚幻引擎编辑器的使用本身是免费的，渲染非交互式内容也是免费的。对于游戏开发商来说，在产品生命周期内赚取的前 100 万美元之外，Epic 会收取总收入的 5%。
