跳到主要内容

概述

Runtime AI Chatbot Integrator Documentation

Runtime AI Chatbot Integrator 是一款跨平台的 Unreal Engine 插件，可将 AI 聊天机器人和文本转语音服务无缝集成到您的项目中。该插件支持多个领先的 AI 提供商，提供灵活的聊天交互，支持流式和非流式响应模式，以及具有流式传输能力的高质量文本转语音转换。

支持的功能​

文本到文本聊天​

集成AI驱动的对话功能，支持多个领先的提供商。

OpenAI​

  • GPT-5.6 Sol
  • GPT-5.6 Terra
  • GPT-5.6 Luna
  • GPT-5.5
  • GPT-5.4
  • GPT-5.4 Mini
  • GPT-5.4 Nano
  • GPT-5.3
  • GPT-5.2
  • GPT-5.1
  • GPT-5
  • GPT-5 Mini
  • GPT-5 Nano
  • GPT-4-1
  • GPT-4-1 Mini
  • GPT-4-1 Nano
  • GPT-4o
  • GPT-4o Mini
  • GPT-4
  • GPT-4 Turbo
  • GPT-4-32k
  • GPT-3.5 Turbo
  • GPT-3.5 Turbo 16k
  • ChatGPT-4o 最新版
  • O1
  • O1 Pro
  • O3
  • O3 Mini
  • O4 Mini

Claude（Anthropic）​

  • Claude 5.5 Opus
  • Claude 5.5 Sonnet
  • Claude 5.1 Fable
  • Claude 5 Opus
  • Claude 5 Sonnet
  • Claude 5 Fable
  • Claude 4.8 Opus
  • Claude 4.7 Opus
  • Claude 4.6 Opus
  • Claude 4.6 Sonnet
  • Claude 4.5 Haiku
  • Claude 4.5 Sonnet
  • Claude 4.5 Opus
  • Claude 4.1 Opus
  • Claude 4 Sonnet
  • Claude 4.0 Opus
  • Claude 3.7 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek​

  • DeepSeek V4 Pro
  • DeepSeek V4 Flash
  • DeepSeek Chat
  • DeepSeek Reasoner（带专用推理输出）

Gemini（Google）​

  • Gemini 3.7 Flash
  • Gemini 3.6 Flash
  • Gemini 3.1 Pro
  • Gemini 3.1 Flash Light
  • Gemini 3.5 Flash
  • Gemini 2.5 Pro
  • Gemini Flash 最新版
  • Gemini Flash Lite 最新版
  • Gemini 2.5 Flash
  • Gemini 2.5 Flash Lite
  • Gemini 2.0 Flash
  • Gemini 2.0 Flash Lite

Grok (xAI)​

  • Grok 4.3
  • Grok 4.1 快速推理
  • Grok 4.1 快速非推理
  • Grok 4 快速推理
  • Grok 4 快速非推理
  • Grok Code Fast 1
  • Grok 4 0709
  • Grok 3
  • Grok 3 Mini
  • Grok 2 Vision 1212

Ollama​

在完全隐私且无需 API 密钥的情况下运行本地 AI 模型：

  • Ollama 库中可用的任何模型（例如 Llama 3、Mistral、Gemma、Phi、Qwen 等）
  • 本地托管的定制和微调模型

文本转语音（TTS）​

使用领先的 TTS 提供商将文本转换为自然流畅的语音，支持标准和流式两种选项。

OpenAI TTS​

支持常规和流式传输的多种语音选项：

  • 合金
  • 灰烬
  • 叙事曲
  • 珊瑚
  • 回声
  • 寓言
  • 缟玛瑙
  • 新星
  • 鼠尾草
  • 微光
  • 诗篇

模型：

  • TTS-1
  • TTS-1-HD
  • GPT-4o Mini TTS

ElevenLabs TTS​

支持常规和流式传输的多个模型：

  • Eleven v4（ElevenLabs 情感最丰富、表现力最强的语音合成模型，具备卓越的语音克隆、90+ 种语言支持以及自然的多说话人对话）
  • Eleven v4 Turbo（富有表现力的实时语音合成模型，具有超低延迟（中位数约 100ms）、卓越的语音克隆以及 90+ 种语言支持）
  • Eleven V3（类人且富有表现力的语音生成，支持 70+ 种语言）
  • Eleven TTV V3（文本到语音设计模型，具有类人且富有表现力的语音，支持 70+ 种语言）
  • Eleven Multilingual V2（逼真的语音合成，具有丰富的情感表达，支持 29 种语言）
  • Eleven Turbo V2（高质量、低延迟模型，针对英语优化）
  • Eleven Turbo V2.5（高质量、低延迟模型，支持多语言）
  • Eleven Flash V2（超快速模型，针对英语实时使用优化）
  • Eleven Flash V2.5（超快速模型，针对实时使用优化，支持多语言）
  • Eleven Monolingual V1

Google Cloud TTS​

高质量神经语音，支持多种语言：

  • Neural2 语音
  • Studio 语音
  • Wavenet 语音
  • Standard 语音
  • 自定义语音支持
  • 多语言和区域设置
  • 支持 SSML 以实现精细控制

Azure TTS​

微软的认知语音服务，提供丰富的语音选项：

  • 跨多种语言的神经语音
  • 语音风格与情感
  • 自定义语音支持
  • SSML 标记支持

主要功能​

  • 跨平台兼容性（Windows、Mac、Android、iOS、Linux、Meta Quest 等）
  • 支持多个 AI 和 TTS 提供商
  • 通过 Ollama 支持本地模型（无需 API 密钥，完全隐私）
  • 流式和非流式聊天响应
  • 流式 TTS，用于实时音频合成和处理
  • 支持推理模型，具有独立的推理和内容输出（DeepSeek、Grok）
  • 高质量语音合成，延迟极低
  • 轻松与 Unreal Engine Blueprint 和 C++ 集成
  • 灵活的配置选项
  • 通过 ElevenLabs V4 模型支持 90 多种语言
  • Google Cloud 和 Azure TTS 的语音列表和发现

前置条件​

要使用该插件，你需要从以下受支持的服务提供商之一获取 API 访问凭证：

对于音频处理，你可以实现自己的解决方案，或使用 Runtime Audio Importer 插件，它可以导入多种格式的音频数据（MP3、WAV、FLAC、OGG VORBIS、OGG OPUS、BINK、RAW (PCM)）。更多信息请参见此处。

其他资源​

Join our Discord
online · support