統計的同等性差異評価基準
最終更新: 2025年3月14日
統計的な平等性の差異の測定基準は、モニタリングされたグループと参照グループの好ましい結果の割合を比較します。
メトリックの詳細
統計的同等性差異は、 資産が偏った結果を生み出しているかどうかを判断するのに役立つ公平性評価基準です。
有効範囲 (Scope)
統計的な平等性の差異メトリックは、生成型AI 資産と機械学習モデルを評価します。
- AI 資産の種類:
- プロンプト・テンプレート
- 機械学習モデル
- 生成型AIのタスク ：テキスト分類
- 機械学習問題の種類 ：二値分類
スコアと価値
統計的な同等性の差異の評価基準は、モニターグループと参照グループにおける好ましい結果の比率の差異を示します。
- 値の範囲 ： 0.0-1.0
- 最高得点 ： 0.0
- 比率：
- 0未満：モニター対象グループの利益がより高い
- 0時：両グループの利益は同等
- 0以上：参照グループの利益が大きい
計算
統計的なパリティ差を計算するには、以下の式を使用します
親トピック： 評価基準
トピックは役に立ちましたか?
0/1000