Перейти к основному содержимому

Обзор

Runtime AI Chatbot Integrator Documentation

Runtime AI Chatbot Integrator — это кроссплатформенный плагин для Unreal Engine, который обеспечивает бесшовную интеграцию AI-чатботов и сервисов преобразования текста в речь непосредственно в ваши проекты. Плагин поддерживает несколько ведущих AI-провайдеров и предлагает гибкие варианты взаимодействия в чате как в потоковом, так и в непотоковом режиме ответа, а также высококачественное преобразование текста в речь с поддержкой потоковой передачи.

Поддерживаемые функции​

Чат текст-в-текст​

Интегрируйте разговорные возможности на основе ИИ с несколькими ведущими провайдерами.

OpenAI​

  • GPT-5.6 Sol
  • GPT-5.6 Terra
  • GPT-5.6 Luna
  • GPT-5.5
  • GPT-5.4
  • GPT-5.4 Mini
  • GPT-5.4 Nano
  • GPT-5.3
  • GPT-5.2
  • GPT-5.1
  • GPT-5
  • GPT-5 Mini
  • GPT-5 Nano
  • GPT-4-1
  • GPT-4-1 Mini
  • GPT-4-1 Nano
  • GPT-4o
  • GPT-4o Mini
  • GPT-4
  • GPT-4 Turbo
  • GPT-4-32k
  • GPT-3.5 Turbo
  • GPT-3.5 Turbo 16k
  • ChatGPT-4o Latest
  • O1
  • O1 Pro
  • O3
  • O3 Mini
  • O4 Mini

Клод (Anthropic)​

  • Claude 5.5 Opus
  • Claude 5.5 Sonnet
  • Claude 5.1 Fable
  • Claude 5 Opus
  • Claude 5 Sonnet
  • Claude 5 Fable
  • Claude 4.8 Opus
  • Claude 4.7 Opus
  • Claude 4.6 Opus
  • Claude 4.6 Sonnet
  • Claude 4.5 Haiku
  • Claude 4.5 Sonnet
  • Claude 4.5 Opus
  • Claude 4.1 Opus
  • Claude 4 Sonnet
  • Claude 4.0 Opus
  • Claude 3.7 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek​

  • DeepSeek V4 Pro
  • DeepSeek V4 Flash
  • DeepSeek Chat
  • DeepSeek Reasoner (с выделенным выводом рассуждений)

Gemini (Google)​

  • Gemini 3.7 Flash
  • Gemini 3.6 Flash
  • Gemini 3.1 Pro
  • Gemini 3.1 Flash Light
  • Gemini 3.5 Flash
  • Gemini 2.5 Pro
  • Gemini Flash Latest
  • Gemini Flash Lite Latest
  • Gemini 2.5 Flash
  • Gemini 2.5 Flash Lite
  • Gemini 2.0 Flash
  • Gemini 2.0 Flash Lite

Grok (xAI)​

  • Grok 4.3
  • Grok 4.1 Fast Reasoning
  • Grok 4.1 Fast Non-Reasoning
  • Grok 4 Fast Reasoning
  • Grok 4 Fast Non-Reasoning
  • Grok Code Fast 1
  • Grok 4 0709
  • Grok 3
  • Grok 3 Mini
  • Grok 2 Vision 1212

Ollama​

Запускайте локальные AI-модели с полной конфиденциальностью и без необходимости API-ключа:

  • Любая модель, доступная в библиотеке Ollama (например, Llama 3, Mistral, Gemma, Phi, Qwen и другие)
  • Пользовательские и дообученные модели, размещённые локально

Синтез речи (TTS)​

Преобразуйте текст в естественно звучащую речь с помощью ведущих TTS-провайдеров, со стандартными и потоковыми вариантами.

OpenAI TTS​

Несколько вариантов голоса с поддержкой обычного режима и потоковой передачи:

  • Сплав
  • Пепел
  • Баллада
  • Коралл
  • Эхо
  • Басня
  • Оникс
  • Нова
  • Шалфей
  • Мерцание
  • Стих

Модели:

  • TTS-1
  • TTS-1-HD
  • GPT-4o Mini TTS

ElevenLabs TTS​

Несколько моделей с поддержкой обычного режима и потоковой передачи:

  • Eleven v4 (самая эмоционально насыщенная и выразительная модель синтеза речи от ElevenLabs, с исключительным клонированием голоса, поддержкой 90+ языков и естественным многоспикерным диалогом)
  • Eleven v4 Turbo (выразительная модель синтеза речи в реальном времени со сверхнизкой задержкой (~100 мс медианной), исключительным клонированием голоса и поддержкой 90+ языков)
  • Eleven V3 (человекоподобная и выразительная генерация речи, поддерживает 70+ языков)
  • Eleven TTV V3 (модель дизайна Text to Voice с человекоподобной и выразительной речью, поддерживает 70+ языков)
  • Eleven Multilingual V2 (реалистичный синтез речи с богатым эмоциональным выражением, поддерживает 29 языков)
  • Eleven Turbo V2 (высококачественная модель с низкой задержкой, оптимизированная для английского языка)
  • Eleven Turbo V2.5 (высококачественная модель с низкой задержкой и поддержкой нескольких языков)
  • Eleven Flash V2 (сверхбыстрая модель, оптимизированная для использования в реальном времени на английском языке)
  • Eleven Flash V2.5 (сверхбыстрая модель, оптимизированная для использования в реальном времени с поддержкой нескольких языков)
  • Eleven Monolingual V1

Google Cloud TTS​

Высококачественные нейронные голоса с обширной языковой поддержкой:

  • Голоса Neural2
  • Голоса Studio
  • Голоса Wavenet
  • Стандартные голоса
  • Поддержка Custom Voice
  • Поддержка множества языков и локалей
  • Поддержка SSML для точного контроля

Azure TTS​

Когнитивный речевой сервис Microsoft с обширными возможностями выбора голоса:

  • Нейронные голоса на нескольких языках
  • Стили голоса и эмоции
  • Поддержка пользовательских голосов
  • Поддержка разметки SSML

Ключевые особенности​

  • Кроссплатформенная совместимость (Windows, Mac, Android, iOS, Linux, Meta Quest и другие)
  • Поддержка нескольких провайдеров AI и TTS
  • Поддержка локальных моделей через Ollama (не требуется API-ключ, полная приватность)
  • Потоковые и непотоковые ответы чата
  • Потоковый TTS для синтеза и обработки аудио в реальном времени
  • Поддержка моделей рассуждения с раздельными выводами рассуждений и контента (DeepSeek, Grok)
  • Высококачественный синтез голоса с минимальной задержкой
  • Простая интеграция с Unreal Engine Blueprints и C++
  • Гибкие параметры конфигурации
  • Поддержка 90+ языков с моделями ElevenLabs V4
  • Просмотр и поиск голосов для Google Cloud и Azure TTS

Предварительные требования​

Чтобы использовать плагин, вам понадобятся учётные данные для доступа к API от одного из поддерживаемых провайдеров:

Для обработки аудио вы можете реализовать собственное решение или использовать плагин Runtime Audio Importer, который может импортировать аудиоданные в различных форматах (MP3, WAV, FLAC, OGG VORBIS, OGG OPUS, BINK, RAW (PCM)). Для получения дополнительной информации см. здесь.

Дополнительные ресурсы​

Join our Discord
online · support