モニタ¶

プレミアム機能

DataRobot's Agentic AI capabilities are a premium feature; contact your DataRobot representative for enablement information. DataRobotの試用版では、この機能を制限付きでお試しいただけます。

コンソールにエージェントのアーティファクトをデプロイしたら、デプロイのパフォーマンスと動作を監視します。 コンソールのデプロイページで、エージェントのワークフロータブをクリックし、エージェントワークフローのデプロイのリストを表示します。

設定が完了したエージェントワークフローのデプロイでは、以下のコンソール機能を利用できます。

特徴量	説明
概要
デプロイの概要	デプロイの詳細、系統、タグ、ランタイムパラメーター、および（ガードレールが設定されている場合は）評価とモデレーションのサマリー情報を確認します。
モニタリング
デプロイのサービス正常性	モデル固有のデプロイのレイテンシー、スループット、および誤差率の追跡。
デプロイの使用状況	予測処理の進捗を追跡して、精度、データドリフト、時間経過に伴う予測の分析に使用します。エージェントワークフローのデプロイについては、ユーザーまたはエージェントごとにセグメント化されたクォータ使用状況の監視が含まれます。
カスタム指標	カスタムビジネスまたはパフォーマンス指標を作成して監視するか、既成の指標を追加します。ワークフローで評価とモデレーションを設定すると、ガード指標（ガードのレイテンシーやブロック数など）がここで報告されます。
データ探索とトレース	保存済みの予測データ、実測値、およびトレーニングデータを探索・エクスポートして、回答の品質を評価し、トレースを使用してエージェントのトレースやタイムラインを確認します。
デプロイレポート	即座に、またはスケジュールに従ってレポートを生成し、モデルのオーナー、モデルの構築方法、モデル年齢、信頼性の監視ステータスなどのデプロイの詳細を要約します。
リソース監視	サーバーレスデプロイのCPU、メモリー、およびレプリカの使用状況を監視します。
OpenTelemetry指標	アプリケーションからのOpenTelemetry指標とDataRobotのネイティブ指標を可視化します。
予測
予測APIスニペット	ダウンロード可能なスニペットを使用して、アプリケーションからデプロイの予測APIやチャット補完APIを呼び出します（リアルタイムスコアリングの統合を含みます）。
アクティビティログ
標準出力ログ	カスタムモデルコンテナのランタイムログを確認し、スコアリングやリクエストの失敗をデバッグします。
OpenTelemetryログ	トラブルシューティングや詳細な分析のために、OpenTelemetryのログイベントを確認します（データ探索から、スパンに関連するログをフィルターすることも可能です）。
モデレーションイベント	評価およびモデレーションのガードレールが有効になっている場合、ガードに関連するイベントを確認して、ブロックされたリクエストやガードの失敗の原因を特定します。