使用状況¶
モデルをデプロイし、本番環境で予測を行った後、モデルの品質とパフォーマンスを長期にわたって監視することは、モデルの有効性を維持するうえで非常に重要です。 この監視は、データドリフトタブと精度タブで行われ、大量の予測データを処理する必要があります。 予測データの処理には、遅延やレート制限が発生することがあります。 Track prediction processing progress on the Usage tab.
予測追跡チャート¶
モニタリング > 使用状況タブの左側に、予測追跡チャートが表示されます。これは、過去24時間または7日間の予測処理状況を示す棒グラフであり、処理済みの予測行、関連付けIDがない予測行、およびレート制限された予測行の数を追跡します。 選択したビュー（24時間または7日間）に応じて、ヒストグラムのビンは1時間または1日単位になります。
| チャートの要素 | 説明 | |
|---|---|---|
| 1 | 期間の選択 | 過去24時間または過去7日間のビューを選択します。 |
| 2 | ログスケーリングを使用 | 250,000行を超える予測を含むデプロイで、予測追跡チャートにログスケーリングを適用します。 |
| 3 | 予測データの受信日時 （X軸） |
ビンで表される時間範囲（日または時間単位）を表示し、その範囲内で受信した予測データの行を追跡します。 システムが処理用に予測を受信すると、予測値にタイムスタンプが付けられます。 この「受信日時」の値は、サービスの正常性、データドリフト、および精度のタイムスタンプとは異なります。 DataRobotの予測環境では、このタイムスタンプ値は予測タイムスタンプより若干遅れる場合があります。 エージェントのデプロイでは、タイムスタンプは、DataRobot APIがエージェントから予測データを受信した日時を表します。 |
| 4 | 行数 （Y軸） |
ビンの時間範囲内（日または時間単位）でタイムスタンプが付けられた予測行の数を表示します。 |
| 5 | 予測処理のカテゴリー | 予測行のステータスを追跡する棒グラフを表示します。
|
予測レート制限はどのように機能しますか？
The Usage tab displays the number of prediction rows subject to the monitoring rate limit of 100MB per hour. However, rate limiting only applies to prediction monitoring, all rows are included in the prediction results even after the rate limit is reached.
大規模監視での予測追跡
監視エージェントのデプロイでは、 大規模な監視を実施すると、予測行はこの棒グラフに表示されません。ただし、予測処理（チャンピオン）の遅延では、事前に集計されたデータが追跡されます。
予測追跡チャートで追加情報を表示するには、列にカーソルを合わせると、予測データを受信した時間範囲と、処理済みの行、レート制限された行、または関連付けIDがない行の数が表示されます。
予測値と実測値の処理遅延¶
使用状況タブの右側には、予測値の処理（チャンピオン）と実測値の処理の遅延情報が表示されます（実測値の処理の遅延は、デプロイのすべてのモデルが対象です）。
使用状況タブでは、ページを再読み込みすることなく、処理遅延が再計算されます。 更新された情報では、遅延情報が最後に更新された日時を確認できます。