跳到主要内容

概述

Runtime AI Chatbot Integrator 文档

Runtime AI Chatbot Integrator 是一款跨平台的 Unreal Engine 插件，能够将 AI 聊天机器人和文本转语音服务无缝集成到您的项目中。该插件支持多个主流 AI 服务提供商，提供灵活的聊天交互（包括流式和非流式响应模式），以及支持流式传输的高质量文本转语音转换功能。

支持的功能​

文本到文本聊天​

集成由多个主流提供商支持的 AI 对话功能。

OpenAI​

  • GPT-3.5 Turbo
  • GPT-4o
  • GPT-4o Mini
  • GPT-4-32k
  • GPT-4 Turbo
  • O1
  • O1 Mini
  • O3 Mini

Claude (Anthropic)​

  • Claude 3.7 Sonnet
  • Claude 3.5 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek​

  • DeepSeek Chat
  • DeepSeek Reasoner (提供专用推理输出)

文本转语音 (TTS)​

使用主流 TTS 提供商将文本转换为自然语音，支持标准和流式选项。

OpenAI TTS​

多种语音选项，支持常规和流式模式：

  • Alloy
  • Ash
  • Ballad
  • Coral
  • Echo
  • Fable
  • Onyx
  • Nova
  • Sage
  • Shimmer
  • Verse

ElevenLabs TTS​

多种模型，支持常规和流式模式：

  • Eleven Multilingual V2
  • Eleven Monolingual V1
  • Eleven Turbo V2
  • Eleven Turbo V2.5
  • Eleven Flash V2.5

主要特性​

  • 跨平台兼容性（Windows、Mac、Android 等）
  • 支持多个 AI 和 TTS 提供商
  • 流式和非流式聊天响应
  • 流式 TTS 实现实时音频合成和处理
  • 高质量语音合成，延迟极低
  • 轻松与 Unreal Engine Blueprints 和 C++ 集成
  • 灵活的配置选项

先决条件​

使用本插件需要从支持的提供商处获取 API 访问凭证：

对于音频处理，您可以自行实现解决方案或使用 Runtime Audio Importer 插件，该插件可导入多种格式的音频数据（MP3、WAV、FLAC、OGG VORBIS、OGG OPUS、BINK、RAW (PCM)）。更多信息请参见此处。

其他资源​