Durchschnittliche absolute Differenz der Quoten
Die durchschnittliche absolute Differenz der Odds-Ratios vergleicht den Durchschnitt der absoluten Differenz der Falsch-Positiv-Raten und der Wahr-Positiv-Raten zwischen überwachten und Referenzgruppen.
Metrikdetails
Die durchschnittliche absolute Differenz der Quoten ist eine Messgröße für die Fairnessbewertung, mit deren Hilfe festgestellt werden kann, ob Ihr Vermögenswert zu verzerrten Ergebnissen führt.
Bereich
Die durchschnittliche absolute Wahrscheinlichkeitsdifferenz-Metrik bewertet generative KI-Assets und maschinelle Lernmodelle.
- Arten von KI-Vermögenswerten :
- Eingabeaufforderungsvorlagen
- Modelle für maschinelles Lernen
- Aufgaben der generativen KI : Textklassifizierung
- Art des Problems beim maschinellen Lernen : Binäre Klassifizierung
Ergebnisse und Werte
Der durchschnittliche absolute Unterschied der Odds-Ratio-Metrik gibt den durchschnittlichen absoluten Unterschied der falsch-positiven und falsch-negativen Raten zwischen geschützten Gruppen an. Niedrigere Werte weisen auf eine bessere Fairness zwischen den Gruppen hin.
- Wertebereich: 0.0-1.0
- Bestmögliche Punktzahl : 0.0
- Kennzahlen:
- Bei 0: Keine Ungleichheit zwischen den Gruppen
- Über 0: Zunehmende Ungleichheit zwischen Gruppen
Mathematische Berechnung
Die folgende Formel wird zur Berechnung der Falsch-Positiv-Rate (FPR) verwendet:
Die folgende Formel wird zur Berechnung der True-Positive-Rate (TPR) verwendet:
Die folgende Formel wird zur Berechnung der durchschnittlichen absoluten Quotenabweichung verwendet:
Übergeordnetes Thema: Bewertungsmetriken