Runtime MetaHuman Lip Sync
Documentação para o plugin Runtime MetaHuman Lip Sync.
Downloads e Links
Projetos de Demonstração:
Dois projetos de demonstração prontos para uso estão disponíveis - consulte a página dedicada de Projetos de Demonstração para obter detalhes completos, downloads e tutoriais passo a passo:
- Fluxo de Trabalho Completo de NPC Conversacional com AI - reconhecimento de fala + chatbot de LLM + TTS + sincronização labial
- Demonstração Básica de Sincronização Labial - entrada de microfone, arquivos de áudio, TTS
As duas demonstrações são multiplataforma (Windows, Mac, Linux, iOS, Android, Meta Quest) e vêm como builds empacotadas e projetos-fonte completos de UE 5.6+.
Tutoriais em Vídeo
Demonstrações em Destaque
Tutoriais de Modelo Realista (Alta Qualidade)
- Lip Sync de alta qualidade a partir de arquivo/buffer de áudio
- Lip Sync de Alta Qualidade com Controle de Humor e TTS Local
- Lip Sync de Alta Qualidade com ElevenLabs e OpenAI TTS
- Lip Sync de Alta Qualidade com Microfone ao Vivo
- Sincronização Labial de Alta Qualidade para Personagens ARKit
Tutoriais do Modelo Padrão
- Lip Sync Padrão com Microfone ao Vivo
- Lip Sync Padrão com Texto para Fala Local
- Lip Sync Padrão com ElevenLabs & OpenAI TTS
Configuração Geral
- Adicionando um personagem MetaHuman personalizado ao projeto demo
- Vídeo tutorial de configuração
- Piscar de olhos do MetaHuman e rastreamento de câmera
- Combinando com animações faciais e corporais
- Passo a passo do projeto demo (antigo)
Suporte
- Suporte a Plugins e Desenvolvimento Personalizado: [email protected] (soluções personalizadas para equipes e organizações)
Visão geral
Runtime MetaHuman Lip Sync Documentation
Guia de Configuração
Este guia orienta você pelo processo de configuração básica do Runtime MetaHuman Lip Sync com seus personagens MetaHuman.
Guia de Processamento de Áudio
Aprenda a configurar diferentes métodos de entrada de áudio para sincronização labial, incluindo microfone, TTS e fontes de áudio em streaming.
Configuração do Plugin
Aprenda a configurar modelos de lip sync, Animation Blueprints, configurações de humor, opções de desempenho e solucionar problemas comuns de lip sync.
Ajudantes de Animação dos Olhos
Utilitários auxiliares opcionais para controlar o direcionamento do olhar (gaze) do MetaHuman e piscadas automáticas dos olhos junto com a sincronia labial.
Como usar o plugin com personagens personalizados
Este guia orienta você pelo processo de configuração do Runtime MetaHuman Lip Sync para personagens que não são MetaHuman. Este processo requer familiaridade com conceitos de animação e rigging. Se precisar de assistência para implementar isso em seu personagem específico, você pode entrar em contato para obter suporte profissional em [email protected].
Configuração Específica da Plataforma
Este guia aborda os requisitos de configuração específicos da plataforma e as configurações para o plugin Runtime MetaHuman Lip Sync.
Projetos de demonstração
Projetos de demonstração prontos para uso que apresentam o Runtime MetaHuman Lip Sync, incluindo um fluxo de trabalho completo de avatar conversacional com IA, com reconhecimento de fala, integração com LLM, TTS e sincronização labial.