Runtime MetaHuman Lip Sync
Runtime MetaHuman Lip Sync プラグインのドキュメント。
ダウンロードとリンク
デモプロジェクト:
すぐに使えるデモプロジェクトが2つ用意されています。詳細、ダウンロード、チュートリアルについては、専用のデモプロジェクトページを参照してください:
- フルAI会話型NPCワークフロー - 音声認識 + LLMチャットボット + TTS + リップシンク
- 基本リップシンクデモ - マイク入力、オーディオファイル、TTS
両方のデモはクロスプラットフォーム対応(Windows、Mac、Linux、iOS、Android、Meta Quest)で、パッケージビルドと完全なUE 5.6+ソースプロジェクトとして提供されます。
ビデオチュートリアル
注目のデモ
リアルなモデル(高品質)チュートリアル
- オーディオファイル/バッファからの高品質リップシンク
- ムードコントロール&ローカルTTS付き高品質リップシンク
- ElevenLabs & OpenAI TTSを使った高品質リップシンク
- 高品質ライブマイクリップシンク
- ARKitキャラクター向け高品質リップシンク
標準モデルチュートリアル
一般的な設定
- デモプロジェクトにカスタムMetaHumanキャラクターを追加
- セットアップチュートリアル動画
- MetaHumanの目のまばたきとカメラトラッキング
- フェイシャルおよびボディアニメーションとの組み合わせ
- デモプロジェクトのウォークスルー(旧版)
サポート
- プラグインサポート & カスタム開発: [email protected] (チーム・組織向けのカスタマイズソリューション)
概要
Runtime MetaHuman Lip Sync Documentation
セットアップガイド
このガイドでは、Runtime MetaHuman Lip Sync を MetaHuman キャラクターで使用するための基本的なセットアップ手順を説明します。
オーディオ処理ガイド
リップシンク用のさまざまな音声入力方法(マイク、TTS、ストリーミング音声ソースなど)の設定方法を学びます。
プラグイン設定
リップシンクモデル、アニメーションブループリント、ムード設定、パフォーマンスオプションの設定方法と、一般的なリップシンクの問題のトラブルシューティング方法について学びます。
目のアニメーションヘルパー
リップシンクと併用して、MetaHumanの視線(アイエイム)や自動まばたきを制御するためのオプションの補助ユーティリティです。
カスタムキャラクターでプラグインを使用する方法
このガイドでは、Runtime MetaHuman Lip Sync を非 MetaHuman キャラクター向けにセットアップする手順を説明します。このプロセスには、アニメーションの概念とリギングに関する知識が必要です。特定のキャラクターにこれを実装する際にサポートが必要な場合は、[email protected] までプロフェッショナルサポートをお問い合わせください。
プラットフォーム固有の設定
このガイドでは、Runtime MetaHuman Lip Syncプラグインのプラットフォーム固有のセットアップ要件と構成について説明します。
デモプロジェクト
音声認識、LLM統合、TTS、およびリップシンクを備えた完全なAI会話アバターワークフローを含む、Runtime MetaHuman Lip Sync を紹介するすぐに使えるデモプロジェクト。