Runtime MetaHuman Lip Sync
Dokumentation für das Runtime MetaHuman Lip Sync-Plugin.
Downloads & Links
Demoprojekte:
Zwei einsatzbereite Demo-Projekte sind verfügbar – siehe die spezielle Seite Demo-Projekte für vollständige Details, Downloads und Schritt-für-Schritt-Anleitungen:
- Vollständiger KI-Konversations-NPC-Workflow - Spracherkennung + LLM-Chatbot + TTS + Lippen-Synchronisation
- Basis-Demo zur Lippen-Synchronisation - Mikrofon-Eingabe, Audiodateien, TTS
Beide Demos sind plattformübergreifend (Windows, Mac, Linux, iOS, Android, Meta Quest) und werden als gepackte Builds sowie als vollständige UE 5.6+-Quellprojekte ausgeliefert.
Video-Tutorials
Ausgewählte Demos
Realistisches Modell (Hochwertig) Tutorials
- Hochwertige Lippen-Synchronisation aus Audiodatei/-puffer
- Hochwertige Lippen-Synchronisation mit Stimmungssteuerung & lokaler TTS
- Hochwertige Lippen-Synchronisation mit ElevenLabs & OpenAI TTS
- Hochwertige Live-Mikrofon-Lippen-Synchronisation
- Hochwertige Lippen-Synchronisation für ARKit-Charaktere
Standardmodell-Tutorials
- Standard-Live-Mikrofon-Lippensynchronisation
- Standard-Lippensynchronisation mit lokaler Text-zu-Sprache
- Standard-Lippensynchronisation mit ElevenLabs & OpenAI TTS
Allgemeine Einrichtung
- Hinzufügen eines benutzerdefinierten MetaHuman-Charakters zum Demo-Projekt
- Video-Tutorial zur Einrichtung
- MetaHuman-Augenblinzeln & Kameraverfolgung
- Kombination mit Gesichts- und Körperanimationen
Support
- Plugin-Support & individuelle Entwicklung: [email protected] (maßgeschneiderte Lösungen für Teams & Organisationen)
Übersicht
Runtime MetaHuman Lip Sync Documentation
Einrichtungsanleitung
Diese Anleitung führt Sie durch den grundlegenden Einrichtungsprozess für Runtime MetaHuman Lip Sync mit Ihren MetaHuman-Charakteren.
Audio-Verarbeitungsleitfaden
Erfahren Sie, wie Sie verschiedene Audioeingabemethoden für Lippen-Synchronisation einrichten, einschließlich Mikrofon, TTS und Streaming-Audioquellen.
Plugin-Konfiguration
Erfahren Sie, wie Sie Lip-Sync-Modelle, Animation Blueprints, Stimmungseinstellungen und Leistungsoptionen konfigurieren und häufige Lip-Sync-Probleme beheben.
Augenanimations-Helfer
Optionale Hilfsprogramme zur Steuerung des MetaHuman-Blickziels (Gaze) und automatischer Augenblinzeln zusammen mit der Lippen-Synchronisation.
So verwenden Sie das Plugin mit benutzerdefinierten Charakteren
Dieser Leitfaden führt Sie durch die Einrichtung von Runtime MetaHuman Lip Sync für Nicht-MetaHuman-Charaktere. Dieser Prozess erfordert Vertrautheit mit Animationskonzepten und Rigging. Wenn Sie Unterstützung bei der Implementierung für Ihren spezifischen Charakter benötigen, können Sie sich für professionelle Unterstützung an [email protected] wenden.
Plattformspezifische Konfiguration
Dieser Leitfaden behandelt plattformspezifische Einrichtungsanforderungen und Konfigurationen für das Runtime MetaHuman Lip Sync Plugin.
Demo-Projekte
Einsatzbereite Demo-Projekte, die Runtime MetaHuman Lip Sync präsentieren, einschließlich eines vollständigen KI-Konversations-Avatar-Workflows mit Spracherkennung, LLM-Integration, TTS und Lippen-Synchronisation.