Durchschnittliche Differenz der Quoten
Die durchschnittliche Differenz der Wahrscheinlichkeitswerte misst den Unterschied zwischen falsch-positiven und falsch-negativen Raten zwischen überwachten und Referenzgruppen.
Metrikdetails
Die durchschnittliche Differenz der Quoten ist eine Bewertungsmetrik für Fairness, die dabei helfen kann, festzustellen, ob Ihr Vermögenswert verzerrte Ergebnisse liefert.
Bereich
Die durchschnittliche Differenz der Wahrscheinlichkeitswerte bewertet generative KI-Assets und maschinelle Lernmodelle.
- Arten von KI-Vermögenswerten :
- Eingabeaufforderungsvorlagen
- Modelle für maschinelles Lernen
- Aufgaben der generativen KI : Textklassifizierung
- Art des Problems beim maschinellen Lernen : Binäre Klassifizierung
Ergebnisse und Werte
Der durchschnittliche Quotientenunterschied gibt die Differenz der falsch-positiven und falsch-negativen Raten für die überwachten und Referenzgruppen an.
- Wertebereich : 0.0-1.0
- Bestmögliche Punktzahl : 0.0
- Kennzahlen:
- Bei 0: Beide Gruppen haben die gleichen Chancen
- Unter 0: Verzerrte Ergebnisse für die überwachte Gruppe
- Über 0: Verzerrte Ergebnisse für die Referenzgruppe
Mathematische Berechnung
Die folgende Formel wird zur Berechnung der Falsch-Positiv-Rate (FPR) verwendet:
Die folgende Formel wird zur Berechnung der True-Positive-Rate (TPR) verwendet:
Die folgende Formel wird zur Berechnung der durchschnittlichen Quotenabweichung verwendet:
Übergeordnetes Thema: Bewertungsmetriken