メインコンテンツまでスキップ

デモプロジェクト

プラグインの Content ディレクトリ内の Demo フォルダーには、デモンストレーション用に作成されたアセットがあります。

プラグインディレクトリが表示されない場合は、Content Browser を開き、右上隅の Settings ボタンをクリックして、Show Engine ContentShow Plugin Content を有効にします。デモプロジェクトは、EnginePluginsRuntime Local LLM Content ディレクトリにあるはずです。

これらのアセットは、オンデバイスLLM推論の実装をデモンストレーションするために提供されています。デモには以下が含まれます:

  • メッセージを送信し、LLMからストリーミングのトークン単位の応答を受信できるチャットインターフェース
  • すぐに使用できる、事前ダウンロードされたモデル
  • ランタイムにURLから追加のモデルをダウンロードする機能
  • 推論パラメータ(temperature、max tokens、context sizeなど)を設定する設定メニュー

デモは、シンプルさのためにBlueprintsとUMGウィジェットを使用して実装されています。UE 4.27以降のバージョンをサポートしています。

デモをテストするには、Demo フォルダーにある RLLM_Demo レベルを開き、エディタで実行します。

これにより、画面上にLLMチャットウィジェットが表示され、操作できるようになります。

また、プロジェクトをターゲットデバイス向けにパッケージ化することもできます。

パッケージ化されたプロジェクトで RLLM_Demo レベルをデフォルトとして設定するには、プロジェクト設定に移動し、RLLM_DemoGame Default Map として設定します。