Runtime MetaHuman Lip Sync
Documentation pour le plugin Runtime MetaHuman Lip Sync.
Téléchargements & Liens
Projets de démonstration :
Deux projets de démonstration prêts à l'emploi sont disponibles - consultez la page dédiée Projets de démonstration pour plus de détails, les téléchargements et les procédures pas à pas :
- Flux de travail complet de NPC conversationnel avec AI - reconnaissance vocale + chatbot LLM + TTS + synchronisation labiale
- Démo basique de synchronisation labiale - entrée microphone, fichiers audio, TTS
Les deux démos sont multiplateformes (Windows, Mac, Linux, iOS, Android, Meta Quest) et sont fournies sous forme de builds packagés et de projets source UE 5.6+ complets.
Tutoriels vidéo
Démos en vedette
Tutoriels pour le modèle réaliste (haute qualité)
- Lip Sync de haute qualité à partir d'un fichier/tampon audio
- Lip Sync de haute qualité avec contrôle de l'humeur et TTS local
- Lip Sync de haute qualité avec ElevenLabs et OpenAI TTS
- Lip Sync de haute qualité avec microphone en direct
- Lip Sync de haute qualité pour les personnages ARKit
Tutoriels du modèle standard
- Synchronisation labiale standard avec micro en direct
- Synchronisation labiale standard avec synthèse vocale locale
- Synchronisation labiale standard avec ElevenLabs et OpenAI TTS
Configuration générale
- Ajout d'un personnage MetaHuman personnalisé au projet de démonstration
- Vidéo tutoriel de configuration
- Clignement des yeux MetaHuman et suivi de caméra
- Combinaison avec les animations faciales et corporelles
- Visite guidée du projet de démonstration (ancienne version)
Assistance
- Support des plugins et développement sur mesure : [email protected] (solutions adaptées aux équipes et aux organisations)
Aperçu
Runtime MetaHuman Lip Sync Documentation
Guide d'installation
Ce guide vous accompagne dans le processus de configuration de base de Runtime MetaHuman Lip Sync avec vos personnages MetaHuman.
Guide de traitement audio
Apprenez à configurer différentes méthodes d'entrée audio pour le lip sync, y compris le microphone, la TTS et les sources audio en streaming.
Configuration du plugin
Apprenez à configurer les modèles de lip sync, les animation blueprints, les paramètres d'humeur, les options de performance et à résoudre les problèmes courants de lip sync.
Aides d'animation des yeux
Utilitaires facultatifs pour piloter le regard des MetaHuman (direction des yeux) et les clignements automatiques des yeux en parallèle de la synchronisation labiale.
Comment utiliser le plugin avec des personnages personnalisés
Ce guide vous accompagne dans le processus de configuration de Runtime MetaHuman Lip Sync pour des personnages non-MetaHuman. Ce processus nécessite une familiarité avec les concepts d'animation et le rigging. Si vous avez besoin d'aide pour l'implémenter sur votre personnage spécifique, vous pouvez contacter un support professionnel à [email protected].
Configuration spécifique à la plateforme
Ce guide couvre les exigences de configuration et les paramètres spécifiques à la plateforme pour le plugin Runtime MetaHuman Lip Sync.
Projets de démonstration
Projets de démonstration prêts à l'emploi présentant Runtime MetaHuman Lip Sync, y compris un flux de travail complet d'avatar conversationnel IA avec reconnaissance vocale, intégration de LLM, TTS et synchronisation labiale.