Runtime MetaHuman Lip Sync
Documentación para el plugin Runtime MetaHuman Lip Sync.
Descargas y enlaces
Proyectos de demostración:
Hay dos proyectos de demostración listos para usar - consulte la página dedicada Proyectos de demostración para obtener detalles completos, descargas y tutoriales:
- Flujo de trabajo completo de NPC conversacional con AI - reconocimiento de voz + chatbot con LLM + TTS + sincronización de labios
- Demostración básica de sincronización de labios - entrada de micrófono, archivos de audio, TTS
Ambos demos son multiplataforma (Windows, Mac, Linux, iOS, Android, Meta Quest) y se distribuyen como compilaciones empaquetadas y proyectos fuente completos de UE 5.6+.
Tutoriales en video
Demos destacados
Tutoriales de modelo realista (alta calidad)
- Sincronización de labios de alta calidad desde archivo de audio/búfer
- Sincronización de labios de alta calidad con control de estado de ánimo y TTS local
- Sincronización de labios de alta calidad con ElevenLabs y OpenAI TTS
- Sincronización de labios de alta calidad en vivo con micrófono
- Sincronización de labios de alta calidad para personajes ARKit
Tutoriales del Modelo Estándar
- Sincronización de labios estándar con micrófono en vivo
- Sincronización de labios estándar con texto a voz local
- Sincronización de labios estándar con ElevenLabs y OpenAI TTS
Configuración general
- Agregar un personaje MetaHuman personalizado al proyecto de demostración
- Video tutorial de configuración
- Parpadeo de ojos y seguimiento de cámara de MetaHuman
- Combinación con animaciones faciales y corporales
- Recorrido por el proyecto de demostración (versión anterior)
Soporte
- Soporte de Plugins y Desarrollo Personalizado: [email protected] (soluciones a medida para equipos y organizaciones)
Resumen
Runtime MetaHuman Lip Sync Documentation
Guía de Configuración
Esta guía te explica el proceso de configuración básica para Runtime MetaHuman Lip Sync con tus personajes MetaHuman.
Guía de Procesamiento de Audio
Aprende a configurar diferentes métodos de entrada de audio para la sincronización de labios, incluyendo micrófono, TTS y fuentes de audio en streaming.
Configuración del plugin
Aprende a configurar modelos de sincronización de labios, Animation Blueprints, ajustes de estado de ánimo, opciones de rendimiento y solucionar problemas comunes de sincronización de labios.
Ayudantes de Animación Ocular
Utilidades auxiliares opcionales para dirigir la mirada (gaze) de MetaHuman y los parpadeos automáticos junto con la sincronización de labios.
Cómo usar el plugin con personajes personalizados
Esta guía te explica el proceso de configuración de Runtime MetaHuman Lip Sync para personajes que no son MetaHuman. Este proceso requiere familiaridad con conceptos de animación y rigging. Si necesitas ayuda para implementarlo en tu personaje específico, puedes contactar para obtener soporte profesional en [email protected].
Configuración específica de la plataforma
Esta guía cubre los requisitos de configuración y las configuraciones específicas de la plataforma para el plugin Runtime MetaHuman Lip Sync.
Proyectos de demostración
Proyectos de demostración listos para usar que muestran Runtime MetaHuman Lip Sync, incluido un flujo de trabajo completo de avatar conversacional con AI, con reconocimiento de voz, integración de LLM, TTS y sincronización de labios.