Zum Hauptinhalt springen

Übersicht

Runtime AI Chatbot Integrator Dokumentation

Runtime AI Chatbot Integrator ist ein plattformübergreifendes Unreal Engine Plugin, das eine nahtlose Integration von KI-Chatbots und Text-zu-Sprache-Diensten direkt in Ihre Projekte ermöglicht. Das Plugin unterstützt mehrere führende KI-Anbieter und bietet flexible Chat-Interaktionen mit sowohl Streaming- als auch Nicht-Streaming-Antwortmodi sowie hochwertige Text-zu-Sprache-Umwandlung mit Streaming-Fähigkeiten.

Unterstützte Funktionen​

Text-zu-Text-Chat​

Integrieren Sie KI-gestützte Konversationsfähigkeiten mit mehreren führenden Anbietern.

OpenAI​

  • GPT-5
  • GPT-5 Mini
  • GPT-5 Nano
  • GPT-3.5 Turbo
  • GPT-4o
  • GPT-4o Mini
  • GPT-4-32k
  • GPT-4 Turbo
  • GPT-4-1
  • ChatGPT-4o Latest
  • O1 Pro
  • O1
  • O3
  • O3 Mini
  • O4 Mini

Claude (Anthropic)​

  • Claude 4.5 Sonnet
  • Claude 4 Sonnet
  • Claude 4.1 Opus
  • Claude 4.0 Opus
  • Claude 3.7 Sonnet
  • Claude 3.5 Haiku
  • Claude 3 Opus

DeepSeek​

  • DeepSeek Chat
  • DeepSeek Reasoner (mit dedizierter Reasoning-Ausgabe)

Gemini (Google)​

  • Gemini 2.5 Pro
  • Gemini Flash Latest
  • Gemini Flash Lite Latest
  • Gemini 2.5 Flash
  • Gemini 2.5 Flash Lite
  • Gemini 2.0 Flash
  • Gemini 2.0 Flash Lite

Grok (xAI)​

  • Grok 4 Fast Reasoning
  • Grok 4 Fast Non-Reasoning
  • Grok Code Fast 1
  • Grok 4
  • Grok 3
  • Grok 3 Mini
  • Grok 2 Vision 1212
  • Grok 2 1212
  • Grok Vision Beta

Text-zu-Sprache (TTS)​

Wandeln Sie Text in natürlich klingende Sprache um, indem Sie führende TTS-Anbieter nutzen, mit sowohl Standard- als auch Streaming-Optionen.

OpenAI TTS​

Mehrere Sprachoptionen mit regulärer und Streaming-Unterstützung:

  • Alloy
  • Ash
  • Ballad
  • Coral
  • Echo
  • Fable
  • Onyx
  • Nova
  • Sage
  • Shimmer
  • Verse

Modelle:

  • TTS-1
  • TTS-1-HD
  • GPT-4o Mini TTS

ElevenLabs TTS​

Mehrere Modelle mit regulärer und Streaming-Unterstützung:

  • Eleven V3 (Neuestes Modell mit menschenähnlicher und ausdrucksstarker Sprachgenerierung, unterstützt 70+ Sprachen)
  • Eleven TTV V3 (Text-zu-Sprache-Designmodell mit menschenähnlicher und ausdrucksstarker Sprache, unterstützt 70+ Sprachen)
  • Eleven Multilingual V2 (Lebensechtestes Modell mit reichem emotionalem Ausdruck)
  • Eleven Turbo V2 (Hochwertiges, Latenz-optimiertes Modell für Englisch)
  • Eleven Turbo V2.5 (Hochwertiges, Latenz-optimiertes Modell mit mehrsprachiger Unterstützung)
  • Eleven Flash V2 (Ultra-schnelles Modell für Echtzeitanwendungen in Englisch optimiert)
  • Eleven Flash V2.5 (Ultra-schnelles Modell für Echtzeitanwendungen mit mehrsprachiger Unterstützung optimiert)
  • Eleven Monolingual V1

Google Cloud TTS​

Hochwertige neuronale Stimmen mit umfassender Sprachunterstützung:

  • Neural2-Stimmen
  • Studio-Stimmen
  • Wavenet-Stimmen
  • Standard-Stimmen
  • Custom Voice-Unterstützung
  • Mehrere Sprachen und Regionaleinstellungen
  • SSML-Unterstützung für fein abgestimmte Kontrolle

Azure TTS​

Microsofts kognitiver Sprachdienst mit umfangreichen Sprachoptionen:

  • Neuronale Stimmen über mehrere Sprachen hinweg
  • Sprachstile und Emotionen
  • Custom Voice-Unterstützung
  • SSML-Markup-Unterstützung
  • Mehrere Ausgabeformate inklusive Streaming

Hauptfunktionen​

  • Plattformübergreifende Kompatibilität (Windows, Mac, Android, iOS, Linux, Meta Quest und mehr)
  • Unterstützung für mehrere KI- und TTS-Anbieter
  • Streaming- und Nicht-Streaming-Chat-Antworten
  • Streaming-TTS für Echtzeit-Audiosynthese und -verarbeitung
  • Unterstützung für Reasoning-Modelle mit separaten Reasoning- und Inhaltsausgaben (DeepSeek, Grok)
  • Hochwertige Sprachsynthese mit minimaler Latenz
  • Einfache Integration mit Unreal Engine Blueprints und C++
  • Flexible Konfigurationsoptionen
  • Unterstützung für 70+ Sprachen mit ElevenLabs V3-Modellen
  • Sprachauflistung und -erkennung für Google Cloud und Azure TTS

Voraussetzungen​

Um das Plugin zu verwenden, benötigen Sie API-Zugangsdaten von einem der unterstützten Anbieter:

Für die Audioverarbeitung können Sie Ihre eigene Lösung implementieren oder das Runtime Audio Importer Plugin verwenden, das Audiodaten in verschiedenen Formaten importieren kann (MP3, WAV, FLAC, OGG VORBIS, OGG OPUS, BINK, RAW (PCM)). Weitere Informationen finden Sie hier.

Zusätzliche Ressourcen​