Runtime MetaHuman Lip Sync
Documentación para el plugin Runtime MetaHuman Lip Sync.
Descargas y Enlaces
Proyectos de demostración:
Hay dos proyectos de demostración listos para usar disponibles; consulta la página dedicada de Proyectos de Demostración para obtener todos los detalles, descargas y tutoriales:
- Flujo de trabajo completo de NPC conversacional con IA - reconocimiento de voz + chatbot LLM + TTS + sincronización de labios
- Demo básica de sincronización de labios - entrada de micrófono, archivos de audio, TTS
Ambas demos son multiplataforma (Windows, Mac, Linux, iOS, Android, Meta Quest) y se distribuyen como compilaciones empaquetadas y proyectos fuente completos de UE 5.6+.
Tutoriales en video
Demostraciones destacadas
- Demostración de NPC Conversacional con IA
- Demostración básica de sincronización de labios (video anterior)
Tutoriales del Modelo Realista (Alta Calidad)
- Sincronización de labios de alta calidad desde archivo de audio/búfer
- Sincronización de labios de alta calidad con control de estado de ánimo y TTS local
- Sincronización de labios de alta calidad con ElevenLabs y TTS de OpenAI
- Sincronización de labios de alta calidad con micrófono en vivo
- Sincronización de labios de alta calidad para personajes ARKit
Tutoriales del Modelo Estándar
- Sincronización de Labios Estándar con Micrófono en Vivo
- Sincronización de Labios Estándar con Texto a Voz Local
- Sincronización de Labios Estándar con ElevenLabs y TTS de OpenAI
Configuración general
- Añadir un personaje MetaHuman personalizado al proyecto de demostración
- Video tutorial de configuración
- Parpadeo de ojos y seguimiento de cámara de MetaHuman
- Combinación con animaciones faciales y corporales
Soporte
- Soporte de complementos y desarrollo personalizado: [email protected] (soluciones personalizadas para equipos y organizaciones)
Descripción general
Runtime MetaHuman Lip Sync Documentation
Guía de Configuración
Esta guía te explica el proceso de configuración básica para Runtime MetaHuman Lip Sync con tus personajes MetaHuman.
Guía de Procesamiento de Audio
Aprende a configurar diferentes métodos de entrada de audio para la sincronización de labios, incluyendo micrófono, TTS y fuentes de audio en streaming.
Configuración del plugin
Aprende a configurar modelos de lip sync, animation blueprints, ajustes de estado de ánimo, opciones de rendimiento y a solucionar problemas comunes de lip sync.
Ayudantes de Animación de Ojos
Utilidades auxiliares opcionales para controlar la dirección de la mirada (gaze) de los ojos de MetaHuman y los parpadeos automáticos junto con la sincronización de labios.
Cómo usar el plugin con personajes personalizados
Esta guía te explica el proceso de configuración de Runtime MetaHuman Lip Sync para personajes no MetaHuman. Este proceso requiere familiaridad con conceptos de animación y rigging. Si necesitas asistencia para implementarlo en tu personaje específico, puedes contactar con soporte profesional en [email protected].
Configuración específica de la plataforma
Esta guía cubre los requisitos de configuración y las configuraciones específicas de la plataforma para el plugin Runtime MetaHuman Lip Sync.
Proyectos de demostración
Proyectos demo listos para usar que muestran Runtime MetaHuman Lip Sync, incluyendo un flujo de trabajo completo de avatar conversacional con IA que incluye reconocimiento de voz, integración con LLM, TTS y sincronización de labios.