Aller au contenu principal

Aperçu

Documentation du Runtime AI Chatbot Integrator

Runtime AI Chatbot Integrator est un plugin multiplateforme pour Unreal Engine qui permet une intégration transparente de chatbots IA et de services de synthèse vocale directement dans vos projets. Le plugin prend en charge plusieurs fournisseurs d'IA leaders, offrant des interactions conversationnelles flexibles avec des modes de réponse en streaming et non-streaming, ainsi qu'une conversion texte-parole de haute qualité avec capacités de streaming.

Fonctionnalités prises en charge​

Chat Texte-à-Texte​

Intégrez des capacités conversationnelles alimentées par l'IA avec plusieurs fournisseurs leaders.

OpenAI​

  • GPT-3.5 Turbo
  • GPT-4o
  • GPT-4o Mini
  • GPT-4-32k
  • GPT-4 Turbo
  • GPT-4-1
  • ChatGPT-4o Latest
  • O1 Pro
  • O1
  • O3
  • O3 Mini
  • O4 Mini

Claude (Anthropic)​

  • Claude 3.7 Sonnet
  • Claude 3.5 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek​

  • DeepSeek Chat
  • DeepSeek Reasoner (avec sortie dédiée de raisonnement)

Synthèse Vocale (TTS)​

Convertissez du texte en parole naturelle en utilisant des fournisseurs TTS leaders, avec des options standard et en streaming.

OpenAI TTS​

Plusieurs options vocales avec support standard et streaming :

  • Alloy
  • Ash
  • Ballad
  • Coral
  • Echo
  • Fable
  • Onyx
  • Nova
  • Sage
  • Shimmer
  • Verse

ElevenLabs TTS​

Plusieurs modèles avec support standard et streaming :

  • Eleven Multilingual V2
  • Eleven Monolingual V1
  • Eleven Turbo V2
  • Eleven Turbo V2.5
  • Eleven Flash V2.5

Fonctionnalités Clés​

  • Compatibilité multiplateforme (Windows, Mac, Android, etc.)
  • Prise en charge de multiples fournisseurs d'IA et TTS
  • Réponses de chat en streaming et non-streaming
  • TTS en streaming pour une synthèse audio en temps réel
  • Synthèse vocale de haute qualité avec latence minimale
  • Intégration facile avec les Blueprints Unreal Engine et C++
  • Options de configuration flexibles

Prérequis​

Pour utiliser le plugin, vous aurez besoin d'identifiants d'accès API d'un des fournisseurs pris en charge :

Pour le traitement audio, vous pouvez implémenter votre propre solution ou utiliser le plugin Runtime Audio Importer, qui peut importer des données audio dans divers formats (MP3, WAV, FLAC, OGG VORBIS, OGG OPUS, BINK, RAW (PCM)). Pour plus d'informations, voir ici.

Ressources Supplémentaires​