Перейти к основному содержимому

Обзор

Документация Runtime AI Chatbot Integrator

Runtime AI Chatbot Integrator — это кроссплатформенный плагин для Unreal Engine, обеспечивающий бесшовную интеграцию AI-чатов и сервисов преобразования текста в речь (TTS) прямо в ваши проекты. Плагин поддерживает несколько ведущих провайдеров искусственного интеллекта, предлагая гибкие чат-взаимодействия с режимами потоковой и не потоковой передачи ответов, а также высококачественное преобразование текста в речь с возможностью потоковой передачи.

Поддерживаемые функции

Текст-в-Текст Чат

Интеграция возможностей AI-диалогов с несколькими ведущими провайдерами.

OpenAI

  • GPT-3.5 Turbo
  • GPT-4o
  • GPT-4o Mini
  • GPT-4-32k
  • GPT-4 Turbo
  • O1
  • O1 Mini
  • O3 Mini

Claude (Anthropic)

  • Claude 3.7 Sonnet
  • Claude 3.5 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek

  • DeepSeek Chat
  • DeepSeek Reasoner (с выделенным выводом логики)

Текст-в-Речь (TTS)

Преобразование текста в естественно звучащую речь с использованием ведущих TTS-провайдеров, включая стандартные и потоковые варианты.

OpenAI TTS

Несколько вариантов голосов с поддержкой обычного и потокового режимов:

  • Alloy
  • Ash
  • Ballad
  • Coral
  • Echo
  • Fable
  • Onyx
  • Nova
  • Sage
  • Shimmer
  • Verse

ElevenLabs TTS

Несколько моделей с поддержкой обычного и потокового режимов:

  • Eleven Multilingual V2
  • Eleven Monolingual V1
  • Eleven Turbo V2
  • Eleven Turbo V2.5
  • Eleven Flash V2.5

Ключевые особенности

  • Кроссплатформенная совместимость (Windows, Mac, Android и др.)
  • Поддержка нескольких AI и TTS-провайдеров
  • Потоковые и не потоковые чат-ответы
  • Потоковый TTS для синтеза и обработки аудио в реальном времени
  • Высококачественный синтез голоса с минимальной задержкой
  • Простая интеграция с Unreal Engine Blueprints и C++
  • Гибкие настройки конфигурации

Требования

Для использования плагина потребуются API-ключи доступа от одного из поддерживаемых провайдеров:

Для обработки аудио можно реализовать собственное решение или использовать плагин Runtime Audio Importer, который поддерживает импорт аудио в различных форматах (MP3, WAV, FLAC, OGG VORBIS, OGG OPUS, BINK, RAW (PCM)). Подробнее см. здесь.

Дополнительные ресурсы