Runtime MetaHuman Lip Sync
Tài liệu về plugin Runtime MetaHuman Lip Sync.
Tải xuống & Liên kết
Các dự án demo:
Có hai dự án demo sẵn sàng để sử dụng — hãy xem trang Dự án Demo dành riêng để biết đầy đủ chi tiết, các bản tải xuống và hướng dẫn:
- Quy trình hội thoại NPC AI hoàn chỉnh - nhận dạng giọng nói + chatbot LLM + TTS + khớp khẩu hình
- Bản demo khớp khẩu hình cơ bản - đầu vào micrô, tệp âm thanh, TTS
Cả hai bản demo đều đa nền tảng (Windows, Mac, Linux, iOS, Android, Meta Quest) và được phân phối dưới dạng các bản build đóng gói lẫn các dự án UE 5.6+ mã nguồn đầy đủ.
Video hướng dẫn
Demo nổi bật
Hướng dẫn Mô hình Chân thực (Chất lượng Cao)
- Lip Sync chất lượng cao từ tệp âm thanh/bộ đệm
- Lip Sync chất lượng cao với điều khiển cảm xúc & TTS cục bộ
- Lip Sync chất lượng cao với ElevenLabs & OpenAI TTS
- Lip Sync chất lượng cao từ micro trực tiếp
- Lip Sync chất lượng cao cho nhân vật ARKit
Hướng dẫn Mô hình Tiêu chuẩn
- Khớp khẩu hình tiêu chuẩn với micrô trực tiếp
- Khớp khẩu hình tiêu chuẩn với chuyển văn bản thành giọng nói cục bộ
- Khớp khẩu hình tiêu chuẩn với ElevenLabs và OpenAI TTS
Thiết lập chung
- Thêm một Nhân vật MetaHuman tùy chỉnh vào Dự án Demo
- Video hướng dẫn thiết lập
- Chớp mắt MetaHuman & Theo dõi Camera
- Kết hợp với Hoạt ảnh Khuôn mặt và Cơ thể
- Hướng dẫn chi tiết Dự án Demo (bản cũ)
Hỗ trợ
- Hỗ trợ Plugin và Phát triển Tùy chỉnh: [email protected] (giải pháp phù hợp cho nhóm và tổ chức)
Tổng quan
Runtime MetaHuman Lip Sync Documentation
Hướng dẫn Thiết lập
Hướng dẫn này sẽ hướng dẫn bạn quy trình thiết lập cơ bản cho Runtime MetaHuman Lip Sync với các nhân vật MetaHuman của bạn.
Hướng dẫn Xử lý Âm thanh
Tìm hiểu cách thiết lập các phương pháp nhập âm thanh khác nhau cho đồng bộ môi, bao gồm micrô, TTS và các nguồn âm thanh phát trực tuyến.
Cấu hình Plugin
Tìm hiểu cách cấu hình các mô hình lip sync, animation blueprint, cài đặt cảm xúc, tùy chọn hiệu suất và khắc phục các sự cố lip sync phổ biến.
Trợ giúp Hoạt ảnh Mắt
Các tiện ích hỗ trợ tùy chọn để điều khiển hướng nhìn mắt MetaHuman (ánh mắt) và chớp mắt tự động song song với đồng bộ môi.
Cách sử dụng plugin với nhân vật tùy chỉnh
Tài liệu hướng dẫn này sẽ đưa bạn qua quy trình thiết lập Runtime MetaHuman Lip Sync cho các nhân vật không phải MetaHuman. Quy trình này đòi hỏi sự quen thuộc với các khái niệm hoạt hình và rigging. Nếu bạn cần hỗ trợ triển khai cho nhân vật cụ thể của mình, bạn có thể liên hệ để được hỗ trợ chuyên nghiệp tại [email protected].
Cấu hình dành riêng cho từng nền tảng
Hướng dẫn này bao gồm các yêu cầu và cấu hình thiết lập dành riêng cho từng nền tảng cho plugin Runtime MetaHuman Lip Sync.
Dự án Demo
Các dự án demo sẵn sàng sử dụng giới thiệu Runtime MetaHuman Lip Sync, bao gồm quy trình làm việc đầy đủ cho hình đại diện hội thoại AI với nhận dạng giọng nói, tích hợp LLM, TTS và đồng bộ khẩu hình.