Runtime MetaHuman Lip Sync
Tài liệu dành cho plugin Runtime MetaHuman Lip Sync.
Tải xuống & Liên kết
Các dự án demo:
Hai dự án demo sẵn sàng sử dụng có sẵn - xem trang Demo Projects chuyên dụng để biết chi tiết đầy đủ, tải xuống và hướng dẫn:
- Quy trình NPC Hội thoại AI Đầy đủ - nhận dạng giọng nói + chatbot LLM + TTS + đồng bộ môi
- Demo Đồng bộ Môi Cơ bản - đầu vào micrô, tệp âm thanh, TTS
Cả hai bản demo đều đa nền tảng (Windows, Mac, Linux, iOS, Android, Meta Quest) và được phân phối dưới dạng bản dựng đóng gói và dự án nguồn UE 5.6+ đầy đủ.
Video Hướng dẫn
Bản demo Nổi bật
Hướng dẫn Mô hình Chân thực (Chất lượng Cao)
- Đồng bộ Môi Chất lượng Cao từ Tệp/Bộ đệm Âm thanh
- Đồng bộ Môi Chất lượng Cao với Kiểm soát Tâm trạng & TTS Cục bộ
- Đồng bộ Môi Chất lượng Cao với ElevenLabs & OpenAI TTS
- Đồng bộ Môi Micrô Trực tiếp Chất lượng Cao
Hướng dẫn Mô hình Tiêu chuẩn
- Đồng bộ Môi Micrô Trực tiếp Tiêu chuẩn
- Đồng bộ Môi Tiêu chuẩn với Chuyển văn bản thành giọng nói Cục bộ
- Đồng bộ Môi Tiêu chuẩn với ElevenLabs & OpenAI TTS
Thiết lập Chung
- Thêm Nhân vật MetaHuman Tùy chỉnh vào Dự án Demo
- Video hướng dẫn thiết lập
- Hướng dẫn dự án demo (phiên bản cũ)
Hỗ trợ
- Hỗ trợ Plugin & Phát triển Tùy chỉnh: [email protected] (giải pháp phù hợp cho nhóm & tổ chức)
Tổng quan
Tài liệu Runtime MetaHuman Lip Sync
Hướng dẫn Thiết lập
Hướng dẫn này sẽ hướng dẫn bạn qua quy trình thiết lập cơ bản cho Runtime MetaHuman Lip Sync với các nhân vật MetaHuman của bạn.
Hướng dẫn Xử lý Âm thanh
Tìm hiểu cách thiết lập các phương pháp nhập âm thanh khác nhau cho đồng bộ môi (lip sync), bao gồm micro, TTS và các nguồn âm thanh phát trực tuyến (streaming).
Cấu hình Plugin
Tìm hiểu cách cấu hình mô hình đồng bộ môi, animation blueprints, cài đặt tâm trạng, tùy chọn hiệu năng và khắc phục các sự cố đồng bộ môi thường gặp.
Trình hỗ trợ Hoạt ảnh Mắt
Các tiện ích hỗ trợ tùy chọn để điều khiển hướng nhìn mắt (gaze) của MetaHuman và nháy mắt tự động đồng bộ với chuyển động môi.
Cách sử dụng plugin với các nhân vật tùy chỉnh
Hướng dẫn này sẽ hướng dẫn bạn quy trình thiết lập Runtime MetaHuman Lip Sync cho các nhân vật không phải MetaHuman. Quy trình này yêu cầu sự quen thuộc với các khái niệm hoạt ảnh và rigging. Nếu bạn cần hỗ trợ triển khai cho nhân vật cụ thể của mình, bạn có thể liên hệ để được hỗ trợ chuyên nghiệp tại [email protected].
Cấu hình theo Nền tảng
Hướng dẫn này bao gồm các yêu cầu thiết lập và cấu hình theo nền tảng cụ thể cho plugin Runtime MetaHuman Lip Sync.
Dự án Demo
Các dự án demo sẵn sàng sử dụng giới thiệu Runtime MetaHuman Lip Sync, bao gồm quy trình làm việc đầy đủ của avatar hội thoại AI với nhận dạng giọng nói, tích hợp LLM, TTS và khớp môi.