Skip to content

モデレーション

評価とモデレーションが設定されたデプロイ済みLLMの場合、デプロイのアクティビティログ > モデレーションタブで、デプロイの評価とモデレーションに関連するイベントの履歴を表示できます。 これらのイベントは、デプロイに設定された評価やモデレーションに関する問題を診断するのに役立ちます。

モデレーションイベントのログを表示するには、アクティビティログ > モデレーションタブに移動します。 最新のイベントはリストの一番上に表示されます。 各イベントには、発生日時、説明、ステータスを示すアイコンが表示されます。

モデレーションイベントのステータス

すべてのモデレーションイベントには、 失敗イベントタイプがあります。

モデレーションイベントはデプロイのアクションを表し、デプロイのステータスと管理エージェントの正常性を確認するのに役立ちます。 現在、以下のイベントをモデレーションイベントとして表示できます。

イベントタイプ 説明
モデレーション指標の作成エラー カスタム指標定義の作成中に発生したエラーを報告します。 たとえば:
  • カスタム指標を作成できませんでした。 カスタム指標の最大数に達しました。
  • 別の理由でカスタム指標を作成できませんでした(詳細を含む)。
モデレーション指標の報告エラー カスタム指標値の報告中に発生したエラーを報告します。 たとえば:
  • カスタム指標をアップロードできませんでした。
モデレーションモデルのスコアリングエラー モデルのスコアリング段階で発生したエラーを報告します。 たとえば:
  • ユーザースコア関数を実行できませんでした。
  • ポストスコアガードを実行できません。
モデレーションモデルの設定エラー モデルのモデレーションを設定中に発生したエラーを報告します。
モデレーションモデルのランタイムエラー モデルのモデレーションを実行中に発生したエラーを報告します。 たとえば:
  • モデルガードのタイムアウト。
  • モデルガードの予測が失敗しました。
  • 忠実度の計算が失敗しました。
  • 引用列なしでROUGE-1ガードが設定されました。
  • NeMoガードの計算が失敗しました。