モニタ¶
プレミアム機能
DataRobot's Agentic AI capabilities are a premium feature; contact your DataRobot representative for enablement information. DataRobotの試用版では、この機能を制限付きでお試しいただけます。
コンソールにエージェントのアーティファクトをデプロイしたら、デプロイのパフォーマンスと動作を監視します。 In Console, on the Deployed workloads page, click the Agentic Workflow tab to view a list of agentic workflow deployments.
設定が完了したエージェントワークフローのデプロイでは、以下のコンソール機能を利用できます。
| 特徴量 | 説明 |
|---|---|
| 概要 | |
| デプロイの概要 | デプロイの詳細、系統、タグ、ランタイムパラメーター、および（ガードレールが設定されている場合は）評価とモデレーションのサマリー情報を確認します。 |
| トレース | |
| トレース | Inspect agent traces from a dedicated Tracing tab. Search and filter traces, review span duration and token usage, and expand traces to view attributes, logs, input, and output on one page. |
| モニタリング | |
| デプロイのサービス正常性 | モデル固有のデプロイのレイテンシー、スループット、および誤差率の追跡。 |
| デプロイの使用状況 | 予測処理の進捗を追跡して、精度、データドリフト、時間経過に伴う予測の分析に使用します。 エージェントワークフローのデプロイについては、ユーザーまたはエージェントごとにセグメント化されたクォータ使用状況の監視が含まれます。 |
| カスタム指標 | カスタムビジネスまたはパフォーマンス指標を作成して監視するか、既成の指標を追加します。 ワークフローで評価とモデレーションを設定すると、ガード指標（ガードのレイテンシーやブロック数など）がここで報告されます。 |
| データ探索 | Explore and export stored prediction data, actuals, and training data, and assess response quality. |
| デプロイレポート | 即座に、またはスケジュールに従ってレポートを生成し、モデルのオーナー、モデルの構築方法、モデル年齢、信頼性の監視ステータスなどのデプロイの詳細を要約します。 |
| リソース監視 | サーバーレスデプロイのCPU、メモリー、およびレプリカの使用状況を監視します。 |
| OpenTelemetryメトリクス | アプリケーションからのOpenTelemetryメトリクスとDataRobotのネイティブ指標を可視化します。 |
| 予測 | |
| 予測APIスニペット | ダウンロード可能なスニペットを使用して、アプリケーションからデプロイの予測APIやChat Completion APIを呼び出します（リアルタイムスコアリングの統合を含みます）。 |
| アクティビティログ | |
| 標準出力ログ | カスタムモデルコンテナのランタイムログを確認し、スコアリングやリクエストの失敗をデバッグします。 |
| OpenTelemetryログ | View OpenTelemetry log events for troubleshooting and deeper analysis (span-related logs can also be filtered from the Tracing tab). |
| モデレーションイベント | 評価およびモデレーションのガードレールが有効になっている場合、ガードに関連するイベントを確認して、ブロックされたリクエストやガードの失敗の原因を特定します。 |