Runtime MetaHuman Lip Sync
Tài liệu cho plugin Runtime MetaHuman Lip Sync.
Tải xuống & Liên kết
Dự án Demo:
Hai dự án demo sẵn sàng sử dụng có sẵn - xem trang Dự án Demo chuyên dụng để biết chi tiết đầy đủ, bản tải xuống và hướng dẫn từng bước:
- Quy trình NPC Hội thoại AI Đầy đủ - nhận dạng giọng nói + chatbot LLM + TTS + đồng bộ khẩu hình
- Bản demo Đồng bộ Khẩu hình Cơ bản - đầu vào micro, tệp âm thanh, TTS
Cả hai bản demo đều đa nền tảng (Windows, Mac, Linux, iOS, Android, Meta Quest) và được phân phối dưới dạng bản build đóng gói cùng dự án nguồn UE 5.6+ đầy đủ.
Hướng dẫn video
Bản demo nổi bật
Hướng dẫn Mô hình Chân thực (Chất lượng Cao)
- Khớp khẩu hình chất lượng cao từ tệp/bộ đệm âm thanh
- Khớp khẩu hình chất lượng cao với điều khiển cảm xúc & TTS cục bộ
- Khớp khẩu hình chất lượng cao với ElevenLabs & OpenAI TTS
- Khớp khẩu hình chất lượng cao từ micro trực tiếp
- Khớp khẩu hình chất lượng cao cho nhân vật ARKit
Hướng dẫn Mô hình Tiêu chuẩn
- Đồng bộ khẩu hình micro trực tiếp chuẩn
- Đồng bộ khẩu hình chuẩn với chuyển văn bản thành giọng nói cục bộ
- Đồng bộ khẩu hình chuẩn với ElevenLabs & OpenAI TTS
Thiết lập chung
- Thêm Nhân Vật MetaHuman Tùy Chỉnh vào Dự Án Demo
- Video hướng dẫn thiết lập
- Nhấp Nháy Mắt MetaHuman & Theo Dõi Camera
- Kết Hợp với Hoạt Ảnh Khuôn Mặt và Cơ Thể
Hỗ trợ
- Hỗ trợ Plugin & Phát triển Tùy chỉnh: [email protected] (giải pháp phù hợp cho nhóm & tổ chức)
Tổng quan
Runtime MetaHuman Lip Sync Documentation
Hướng dẫn Thiết lập
Hướng dẫn này sẽ hướng dẫn bạn quy trình thiết lập cơ bản cho Runtime MetaHuman Lip Sync với các nhân vật MetaHuman của bạn.
Hướng dẫn Xử lý Âm thanh
Tìm hiểu cách thiết lập các phương pháp nhập âm thanh khác nhau cho đồng bộ môi, bao gồm micrô, TTS và các nguồn âm thanh phát trực tuyến.
Cấu hình Plugin
Tìm hiểu cách cấu hình các mô hình lip sync, animation blueprint, cài đặt cảm xúc, tùy chọn hiệu suất và khắc phục các sự cố lip sync thường gặp.
Trợ giúp Hoạt ảnh Mắt
Các tiện ích hỗ trợ tùy chọn để điều khiển hướng nhìn mắt MetaHuman (ánh mắt) và chớp mắt tự động song song với đồng bộ môi.
Cách sử dụng plugin với nhân vật tùy chỉnh
Tài liệu hướng dẫn này sẽ đưa bạn qua quy trình thiết lập Runtime MetaHuman Lip Sync cho các nhân vật không phải MetaHuman. Quy trình này đòi hỏi sự quen thuộc với các khái niệm hoạt hình và rigging. Nếu bạn cần hỗ trợ triển khai cho nhân vật cụ thể của mình, bạn có thể liên hệ để được hỗ trợ chuyên nghiệp tại [email protected].
Cấu hình dành riêng cho từng nền tảng
Hướng dẫn này bao gồm các yêu cầu và cấu hình thiết lập dành riêng cho từng nền tảng cho plugin Runtime MetaHuman Lip Sync.
Dự án Demo
Các dự án demo sẵn sàng sử dụng giới thiệu Runtime MetaHuman Lip Sync, bao gồm quy trình làm việc đầy đủ cho hình đại diện hội thoại AI với nhận dạng giọng nói, tích hợp LLM, TTS và đồng bộ khẩu hình.