偽陰性率差評価指標

最終更新: 2025年2月21日

偽陰性率差評価指標

偽陰性率の差異メトリックは、お客様のモデルによって正しく評価されなかった取引の割合を算出します。

メトリックの詳細

偽陰性率の差は、公平性の評価基準であり、貴資産が偏った結果を生み出しているかどうかを判断するのに役立ちます。

有効範囲 (Scope)

偽陰性率の差異メトリックは、生成型AI 資産と機械学習モデルを評価します。

AI 資産の種類:
- プロンプト・テンプレート
- 機械学習モデル
生成型AIのタスク ：テキスト分類
機械学習問題の種類 ：二値分類

スコアと価値

偽陰性率差メトリックスコアは、モニターグループと参照グループの偽陰性率の差を示します。

値の範囲 ： 0.0-1.0
最高得点 ： 0.0
比率：
- 0未満：モニタリンググループにおける偽陰性の減少
- 0時：両グループのオッズは同等
- 0以上：モニタリンググループにおける偽陰性率が高い

評価プロセス

偽陽性率の差を算出するために、モニタリング対象グループと参照グループについて、各グループの偽陰性と真陽性の量を特定するためのコンフュージョン・マトリクスが生成されます。偽陰性値と真陽性値は、各グループの偽陰性率を算出するために使用されます。基準グループの偽陰性率をモニタリンググループの偽陰性率から差し引いて、偽陰性率の差を算出します。