プレイグラウンドの概要¶
ユースケースのアセットであるプレイグラウンドは、LLMブループリントを作成して操作するためのスペースです。 LLMブループリントは、LLMブループリント設定でキャプチャされた、LLMからの回答を生成するために必要なすべてのコンテキストを表します。 プレイグラウンド内でLLMブループリントの回答を比較して、ビジネス問題の解決のために本番環境で使用するブループリントを決定します。
ベクターデータベースの有無にかかわらず、プレイグラウンドを使用できます。 1つのユースケースに複数のプレイグラウンドを存在させることができます。また、1つのプレイグラウンド内に複数のLLMブループリントを存在させることができます。
プレイグラウンドを操作するためのシンプルな推奨ワークフローは次のとおりです。
- プレイグラウンドを追加します。
- 基本LLM、プロンプティング設定、および関連付けられた ベクターデータベース（オプション）を始めとする LLMブループリント設定を行います。
- チャットでLLMブループリントのテストとチューニングを行います。 トレースを表示します。
- 追加のLLMブループリントを構築します。
- 並べてLLMブループリントを比較します。
- 回答評価の目的で、LLMブループリントにデータセットと指標を追加します。
プレイグラウンドの追加¶
To add a playground, create a Use Case (if needed) and change to the Playgrounds tab. Then, either:
- プレイグラウンドを追加ボタンをクリックしてください。
- プレイグラウンドタブを選択し、プレイグラウンドを追加ボタンをクリックします。 このボタンは、ユースケースに追加された最初のプレイグラウンドでのみ使用できます。それに続くプレイグラウンドにはプレイグラウンドを追加ドロップダウンを使用します。
プレイグラウンドを作成すると、LLMブループリントを 作成および設定するための2つのオプションを含むプレイグラウンドが開きます。 プレイグラウンドから、LLMブループリントのドラフトの作成、それらの操作とファインチューニング、そして比較と潜在的な将来のデプロイのためにそれらを保存するための、すべてのコントロールにアクセスできます。
備考
デフォルトでは、プレイグラウンドの名前はPlayground <timestamp>です。 アクションメニューでプレイグラウンドの情報を編集を選択して、ユースケースディレクトリから名前を変更できます 。
プレイグラウンドの要素¶
プレイグラウンドには、特定のコンポーネントに移動するための基本的な ナビゲーションコントロールがあります。
3つの主要な作業エリアがあります。
- A configuration panel for sending setting up the LLM blueprint, including vector database selection and prompting strategies.
- プロンプトの送信とLLMの回答の受信を行うチャットウィンドウ。
-
LLMブループリントとチャットを操作するための比較パネル。
-
When the configuration panel is open, use the breadcrumbs to return to the comparison.
プレイグラウンドを作成した後、ブレッドクラムドロップダウンを使用してそれらを切り替えることができます。
プレイグラウンドのナビゲーション¶
画面の左側にあるアイコンをクリックして、ナビゲーションコンポーネントにアクセスできます。
| コンポーネント | 説明 | |
|---|---|---|
 |
プレイグラウンド | Configure LLM blueprints, compare LLM blueprints, and chat. |
| プレイグラウンド情報 | Display playground summary information. | |
| LLMの評価* | プレイグラウンドでLLMブループリントの評価およびモデレーションガードレールを設定します。 | |
| トレース* | Display an exportable log that traces all components used in LLM response generation. |
* LLM評価が有効な場合にのみ使用できます。
プレイグラウンド情報¶
The Playground information area provides access to the assets associated with the playground—vector databases, deployed LLMs, and deployed embedding models. また、プレイグラウンドの基本的なメタデータも提供します。 Use the tabs, described in the table below, to view additional information.
| タブ | 説明 |
|---|---|
| ベクターデータベース | Lists each unique vector database used in the playground and a variety of configuration metadata. Entries that are grayed out are custom vector databases—not built in DataRobot—and so DataRobot is unable to report configuration specifics. Click an entry to view expanded metadata and listings of related assets, including associated LLM blueprints, deployments, custom models, and registered models. Versioning information is also displayed. |
| デプロイ済みのLLM | Lists each deployed LLM that is part of at least one LLM blueprint configuration in the playground. 各エントリーに対して、メタデータは、作成情報、デプロイ名、および デプロイ済みLLMをブループリントに割り当てるときに定義されたプロンプト列名と回答列名をレポートします。 |
| デプロイ済み埋め込みモデル | Lists each deployed embedding model that is part of at least one LLM blueprint configuration in the playground. For each entry, metadata reports creation information, deployment name, and the prompt and response column names that were defined. |
備考
Regardless of how many LLM blueprint configurations a vector database, deployed LLM, or deployed embedding model is used in, the listing displays a single entry.
プレイグラウンド情報ページのツール¶
Click on a playground name or description to make changes. 追加した説明は、プレイグラウンド情報ページの上部にあるプレイグラウンド名の下に表示されます。 Click the Actions menu , located to the right of the playground name, to open a menu and delete the playground. または、ユースケースのアセットリストからプレイグラウンドを削除することもできます。
Click Settings to expose options that control the display.
- チェックボックスをオンまたはオフにして、表示する列を設定します。
- 列名の右側にある矢印を使用して列を並べ替えます。
-
Set columns to appear on the far left by clicking the pin icon.
