Metrik zur Bewertung der statistischen Paritätsdifferenz

Letzte Aktualisierung: 14. März 2025
Metrik zur Bewertung der statistischen Paritätsdifferenz

Die statistische Paritätsdifferenzmetrik vergleicht den Prozentsatz der positiven Ergebnisse für überwachte Gruppen mit Referenzgruppen.

Metrikdetails

Der statistische Paritätsunterschied ist eine Messgröße für die Fairnessbewertung, mit deren Hilfe festgestellt werden kann, ob Ihr Vermögenswert zu verzerrten Ergebnissen führt.

Bereich

Die statistische Paritätsdifferenzmetrik bewertet generative KI-Assets und maschinelle Lernmodelle.

  • Arten von KI-Vermögenswerten :
    • Eingabeaufforderungsvorlagen
    • Modelle für maschinelles Lernen
  • Aufgaben der generativen KI : Textklassifizierung
  • Art des Problems beim maschinellen Lernen : Binäre Klassifizierung

Ergebnisse und Werte

Der statistische Paritätsunterschiedswert gibt die Differenz zwischen dem Verhältnis der günstigen Ergebnisse in den beobachteten und den Referenzgruppen an.

  • Wertebereich: 0.0-1.0
  • Bestmögliche Punktzahl : 0.0
  • Kennzahlen:
    • Unter 0: Höhere Leistungen für die überwachte Gruppe
    • Bei 0: Beide Gruppen haben die gleichen Vorteile
    • Über 0: Höherer Nutzen für die Referenzgruppe

Mathematische Berechnung

Die folgende Formel wird zur Berechnung der statistischen Paritätsdifferenz verwendet:

die Formel für den Unterschied der statistischen Parität wird angezeigt

Übergeordnetes Thema: Bewertungsmetriken