设置指南

本指南将引导您完成 Runtime MetaHuman Lip Sync 与您的 MetaHuman 角色的基本设置过程。

注意： Runtime MetaHuman Lip Sync 同时适用于 MetaHuman 和 自定义角色。有关设置自定义角色的详细说明，请参阅 自定义角色设置指南。

先决条件

开始之前，请确保：

1. MetaHuman 插件要求：

   • UE 5.5 及更早版本： 在您的项目中启用 MetaHuman 插件
   • UE 5.6 及更高版本： 在您的项目中启用 MetaHuman Core Tech 插件
   额外的 MetaHuman 插件

   根据您创建 MetaHuman 角色的方式，您可能需要额外的插件。例如，如果您打算使用 UE 5.6 中引入的新 MetaHuman Creator 系统创建 MetaHuman，您还需要启用 MetaHuman Creator 插件。有关此系统的更多信息，请参阅 MetaHuman Creator 文档。

2. 您至少有一个 MetaHuman 角色已下载并可在您的项目中使用

3. 已安装 Runtime MetaHuman Lip Sync 插件

标准模型扩展插件

如果您计划使用 标准模型，您需要安装扩展插件：

1. 从 此处 下载 Standard Lip Sync Extension plugin
2. 将下载的压缩包中的文件夹解压到您项目的 Plugins 文件夹中（如果该文件夹不存在，请创建它）
3. 确保您的项目设置为 C++ 项目（即使您没有任何 C++ 代码）
4. 重新构建您的项目

备注

• 此扩展 仅在 您想使用 标准模型 时才需要。如果您只需要 真实感模型，可以跳过此步骤。
• 有关如何手动构建插件的更多信息，请参阅 构建插件教程

额外插件

• 如果您计划使用 音频捕获（例如，麦克风输入），请安装 Runtime Audio Importer 插件。
• 如果您计划使用 文本转语音 功能：
  • 对于 本地 TTS（标准模型和启用情绪的真实感模型），请安装 Runtime Text To Speech 插件。
  • 对于 外部 TTS 提供商（ElevenLabs、OpenAI、Google Cloud、Azure），请安装 Runtime AI Chatbot Integrator 插件。

动画Blueprint设置

步骤 1：定位并修改面部动画Blueprint

UE 5.5 及更早版本（或 UE 5.6+ 中的旧版 MetaHumans）

您需要修改一个将用于 MetaHuman 角色面部动画的动画Blueprint。默认的 MetaHuman 面部动画Blueprint位于：

Content/MetaHumans/Common/Face/Face_AnimBP

你有几种实现唇形同步功能的选择：

编辑默认资产（最简单选项）

直接打开默认的 Face_AnimBP 并进行修改。任何更改都会影响所有使用此动画Blueprint的 MetaHuman 角色。

注意： 这种方法很方便，但会影响所有使用默认动画Blueprint的角色。

创建副本

1. 复制 Face_AnimBP 并给它一个描述性的名称
2. 找到你的角色Blueprint类（例如，对于角色 "Bryan"，它位于 Content/MetaHumans/Bryan/BP_Bryan）
3. 打开角色Blueprint并找到 Face 组件
4. 将 Anim Class 属性更改为你新复制的动画Blueprint

注意： 这种方法允许你为特定角色自定义唇形同步，同时保持其他角色不变。

使用自定义动画Blueprint

你可以在任何能够访问所需面部骨骼的动画Blueprint中实现唇形同步混合：

1. 创建或使用现有的自定义动画Blueprint
2. 确保你的动画Blueprint适用于包含与默认 MetaHuman 的 Face_Archetype_Skeleton 相同面部骨骼的骨架

注意： 这种方法为你提供了与自定义动画系统集成的最大灵活性。

UE 5.6+ MetaHuman Creator 角色

从 UE 5.6 开始，引入了新的 MetaHuman Creator 系统。对于这些角色，插件提供了一个面部动画Blueprint，位于：

Content/LipSyncData/LipSync_Face_AnimBP

重要

此 Animation Blueprint 位于插件的内容文件夹中，每次插件更新时都会被覆盖。为防止丢失您的自定义设置：

1. 将此资源复制到您项目的 Content 文件夹（例如，复制到 YourProject/Content/MetaHumans/LipSync_Face_AnimBP）
2. 在您的角色设置中使用您复制的版本
3. 所有修改都应在复制的版本上进行

使用插件的面部 Animation Blueprint：

1. 找到您的 MetaHuman Creator 角色的 Blueprint 类
2. 打开角色 Blueprint 并找到 Face 组件
3. 将 Anim Class 属性更改为插件的 LipSync_Face_AnimBP
4. 继续执行后续步骤以配置 Runtime MetaHuman Lip Sync 功能

步骤 2：事件图表设置

打开您的面部 Animation Blueprint 并切换到 Event Graph。您需要创建一个生成器来处理音频数据并生成口型同步动画。

标准模型

1. 如果尚不存在，请添加 Event Blueprint Begin Play 节点
2. 添加 Create Runtime Viseme Generator 节点并将其连接到 Begin Play 事件
3. 将输出保存为变量（例如 "VisemeGenerator"）以供图表其他部分使用

有关详细配置选项，请参阅标准模型配置部分。

真实感模型

1. 如果尚不存在，请添加 Event Blueprint Begin Play 节点
2. 添加 Create Realistic MetaHuman Lip Sync Generator 节点并将其连接到 Begin Play 事件
3. 将输出保存为变量（例如 "RealisticMetaHumanLipSyncGenerator"）以供图表其他部分使用
4. （可选）使用 Configuration 参数配置生成器设置

有关模型类型、性能设置和处理参数等详细配置选项，请参阅真实感模型配置部分。

支持情绪的真实感模型

1. 如果尚不存在，请添加 Event Blueprint Begin Play 节点
2. 添加 Create Realistic MetaHuman Lip Sync With Mood Generator 节点并将其连接到 Begin Play 事件
3. 将输出保存为变量（例如 "MoodMetaHumanLipSyncGenerator"）以供图表其他部分使用
4. （可选）使用 Configuration 参数配置生成器设置

有关情绪类型、强度设置、前瞻时间以及输出类型选择等详细情绪配置，请参阅支持情绪的模型配置部分。

步骤 3：动画图表设置

设置好事件图表后，切换到 Anim Graph 以将生成器连接到角色的动画：

标准模型

1. 找到包含 MetaHuman 面部的姿势（通常来自 Use cached pose 'Body Pose'）
2. 添加 Blend Runtime MetaHuman Lip Sync 节点
3. 将姿势连接到 Blend Runtime MetaHuman Lip Sync 节点的 Source Pose
4. 将您的 VisemeGenerator 变量连接到 Viseme Generator 引脚
5. 将 Blend Runtime MetaHuman Lip Sync 节点的输出连接到 Output Pose 的 Result 引脚

真实感模型

1. 找到包含 MetaHuman 面部的姿势（通常来自 Use cached pose 'Body Pose'）
2. 添加 Blend Realistic MetaHuman Lip Sync 节点
3. 将姿势连接到 Blend Realistic MetaHuman Lip Sync 节点的 Source Pose
4. 将您的 RealisticMetaHumanLipSyncGenerator 变量连接到 Lip Sync Generator 引脚
5. 将 Blend Realistic MetaHuman Lip Sync 节点的输出连接到 Output Pose 的 Result 引脚

支持情绪的真实感模型

1. 找到包含 MetaHuman 面部的姿势（通常来自 Use cached pose 'Body Pose'）
2. 添加 Blend Realistic MetaHuman Lip Sync 节点（与常规真实感模型使用相同的节点）
3. 将姿势连接到 Blend Realistic MetaHuman Lip Sync 节点的 Source Pose
4. 将您的 MoodMetaHumanLipSyncGenerator 变量连接到 Lip Sync Generator 引脚
5. 将 Blend Realistic MetaHuman Lip Sync 节点的输出连接到 Output Pose 的 Result 引脚

注意： 支持情绪的模型使用与常规真实感模型相同的 Animation Blueprint 节点。情绪功能由生成器内部处理。

后续步骤

现在您已完成基本的 Animation Blueprint 设置，接下来需要配置音频输入处理，以便将音频数据提供给您的口型同步生成器。

继续阅读音频处理指南，了解如何设置不同的音频输入方法，包括麦克风捕获、文本转语音和音频文件处理。

有关高级配置选项和微调，请参阅配置指南。