Runtime MetaHuman Lip Sync
Tài liệu cho plugin Runtime MetaHuman Lip Sync.
Tải xuống & Liên kết
Các Dự Án Mẫu:
Hai dự án demo sẵn sàng sử dụng đã có sẵn - hãy xem trang Dự án Demo chuyên dụng để biết chi tiết đầy đủ, các bản tải xuống và hướng dẫn:
- Quy trình NPC Hội thoại AI Đầy đủ - nhận dạng giọng nói + chatbot LLM + TTS + đồng bộ môi
- Bản demo Đồng bộ môi Cơ bản - đầu vào micrô, tệp âm thanh, TTS
Cả hai bản demo đều đa nền tảng (Windows, Mac, Linux, iOS, Android, Meta Quest) và được phân phối dưới dạng bản build đóng gói cùng các dự án mã nguồn đầy đủ cho UE 5.6+.
Hướng dẫn bằng Video
Bản trình diễn nổi bật
Hướng dẫn Mô hình Chân thực (Chất lượng Cao)
- Khớp khẩu hình chất lượng cao từ tệp âm thanh/bộ đệm
- Khớp khẩu hình chất lượng cao với Kiểm soát cảm xúc & TTS cục bộ
- Khớp khẩu hình chất lượng cao với ElevenLabs & OpenAI TTS
- Khớp khẩu hình chất lượng cao từ micrô trực tiếp
- Khớp khẩu hình chất lượng cao cho nhân vật ARKit
Hướng dẫn Mô hình Chuẩn
- Phát môi theo micro trực tiếp chuẩn
- Phát môi chuẩn với Chuyển văn bản thành giọng nói cục bộ
- Phát môi chuẩn với ElevenLabs & OpenAI TTS
Thiết lập Chung
- Thêm Nhân Vật MetaHuman Tùy Chỉnh vào Dự Án Demo
- Video hướng dẫn thiết lập
- Chớp Mắt MetaHuman & Theo Dõi Camera
- Hướng dẫn tổng quan dự án demo (phiên bản cũ)
Hỗ trợ
- Hỗ trợ Plugin & Phát triển Tùy chỉnh: [email protected] (giải pháp phù hợp cho nhóm & tổ chức)
Tổng quan
Runtime MetaHuman Lip Sync Documentation
Hướng dẫn Thiết lập
Hướng dẫn này sẽ hướng dẫn bạn quy trình thiết lập cơ bản cho Runtime MetaHuman Lip Sync với các nhân vật MetaHuman của bạn.
Hướng dẫn Xử lý Âm thanh
Tìm hiểu cách thiết lập các phương pháp nhập âm thanh khác nhau cho đồng bộ môi, bao gồm micrô, TTS và các nguồn âm thanh phát trực tuyến.
Cấu hình Plugin
Tìm hiểu cách cấu hình các mô hình đồng bộ khẩu hình, blueprint hoạt ảnh, cài đặt tâm trạng, tùy chọn hiệu suất và khắc phục các sự cố đồng bộ khẩu hình phổ biến.
Hỗ trợ Hoạt ảnh Mắt
Các tiện ích hỗ trợ tùy chọn để điều khiển hướng nhìn mắt (gaze) của MetaHuman và tự động chớp mắt đồng bộ với khớp môi.
Cách sử dụng plugin với các nhân vật tùy chỉnh
Hướng dẫn này sẽ hướng dẫn bạn quy trình thiết lập Runtime MetaHuman Lip Sync cho các nhân vật không phải MetaHuman. Quy trình này yêu cầu bạn phải quen thuộc với các khái niệm về hoạt ảnh và dựng rig. Nếu bạn cần hỗ trợ triển khai tính năng này cho nhân vật cụ thể của mình, bạn có thể liên hệ để được hỗ trợ chuyên nghiệp tại [email protected].
Cấu hình dành riêng cho từng nền tảng
Hướng dẫn này bao gồm các yêu cầu và cấu hình thiết lập dành riêng cho từng nền tảng cho plugin Runtime MetaHuman Lip Sync.
Dự án Demo
Các dự án demo sẵn sàng sử dụng giới thiệu Runtime MetaHuman Lip Sync, bao gồm quy trình làm việc đầy đủ của avatar hội thoại AI với nhận dạng giọng nói, tích hợp LLM, TTS và đồng bộ môi.