Runtime MetaHuman Lip Sync
Documentation pour le plugin Runtime MetaHuman Lip Sync.
Téléchargements & Liens
Projets de démonstration :
Deux projets de démonstration prêts à l'emploi sont disponibles - consultez la page Projets de démonstration dédiée pour tous les détails, téléchargements et présentations :
- Workflow complet de PNJ conversationnel par IA - reconnaissance vocale + chatbot LLM + TTS + synchronisation labiale
- Démo de synchronisation labiale de base - entrée de microphone, fichiers audio, TTS
Les deux démos sont multiplateformes (Windows, Mac, Linux, iOS, Android, Meta Quest) et sont livrées sous forme de builds empaquetés et de projets source complets UE 5.6+.
Tutoriels vidéo
Démos en vedette
Tutoriels sur le modèle réaliste (haute qualité)
- Synchronisation labiale de haute qualité à partir d'un fichier audio/tampon
- Synchronisation labiale de haute qualité avec contrôle de l'humeur et TTS local
- Synchronisation labiale de haute qualité avec ElevenLabs et OpenAI TTS
- Synchronisation labiale de haute qualité en direct via microphone
- Synchronisation labiale de haute qualité pour personnages ARKit
Tutoriels sur le modèle standard
- Synchronisation labiale standard en direct via microphone
- Synchronisation labiale standard avec synthèse vocale locale
- Synchronisation labiale standard avec ElevenLabs et OpenAI TTS
Configuration générale
- Ajout d'un personnage MetaHuman personnalisé au projet de démonstration
- Vidéo tutoriel de configuration
- Visite guidée du projet de démonstration (ancienne)
Assistance
- Support du plugin & Développement personnalisé : [email protected] (solutions sur mesure pour les équipes et organisations)
Aperçu
Documentation Runtime MetaHuman Lip Sync
Guide d'Installation
Ce guide vous accompagne dans le processus de configuration de base de Runtime MetaHuman Lip Sync avec vos personnages MetaHuman.
Guide de Traitement Audio
Apprenez à configurer différentes méthodes d'entrée audio pour le lip sync, y compris le microphone, la TTS et les sources audio en streaming.
Configuration du Plugin
Apprenez à configurer les modèles de synchronisation labiale, les blueprints d'animation, les paramètres d'humeur, les options de performance et à résoudre les problèmes courants de synchronisation labiale.
Aides à l'animation des yeux
Utilitaires facultatifs pour piloter l'orientation du regard des MetaHumans (direction des yeux) et les clignements automatiques des yeux en parallèle du lip sync.
Comment utiliser le plugin avec des personnages personnalisés
Ce guide vous accompagne dans le processus de configuration de Runtime MetaHuman Lip Sync pour des personnages non-MetaHuman. Ce processus nécessite une familiarité avec les concepts d'animation et de rigging. Si vous avez besoin d'aide pour l'implémenter pour votre personnage spécifique, vous pouvez contacter le support professionnel à [email protected].
Configuration spécifique à la plateforme
Ce guide couvre les exigences de configuration spécifiques à la plateforme et les configurations pour le plugin Runtime MetaHuman Lip Sync.
Projets de démonstration
Projets de démonstration prêts à l'emploi mettant en avant Runtime MetaHuman Lip Sync, incluant un flux de travail complet d'avatar conversationnel IA avec reconnaissance vocale, intégration de LLM, TTS et synchronisation labiale.