Métrico de diferencia de probabilidades absolutas promedio
La métrica de diferencia de probabilidades absolutas promedio compara el promedio de la diferencia absoluta en las tasas de falsos positivos y las tasas de verdaderos positivos entre los grupos monitoreados y de referencia.
Detalles de métrica
La diferencia media de probabilidades absolutas es una métrica de evaluación de la imparcialidad que puede ayudar a determinar si su activo produce resultados sesgados.
Ámbito
La métrica de diferencia de probabilidades absolutas promedio evalúa los activos de IA generativa y los modelos de aprendizaje automático.
- Tipos de activos de IA :
- Plantillas de solicitud
- Modelos de aprendizaje automático
- Tareas de IA generativa : Clasificación de texto
- Tipo de problema de aprendizaje automático : Clasificación binaria
Puntuaciones y valores
La puntuación métrica de diferencia de probabilidades absolutas promedio indica la media de la diferencia absoluta en las tasas de falsos positivos y falsos negativos entre los grupos protegidos. Las puntuaciones más bajas indican una mayor equidad entre los grupos.
- Rango de valores : 0.0-1.0
- Mejor puntuación posible : 0.0
- Ratios :
- A las 0: No hay disparidad entre los grupos
- Más de 0: Disparidad creciente entre grupos
Cómo se calcula
La siguiente fórmula se utiliza para calcular la tasa de falsos positivos (FPR):
La siguiente fórmula se utiliza para calcular la tasa de verdaderos positivos (TPR):
La siguiente fórmula se utiliza para calcular la diferencia media de probabilidades absolutas:
Tema principal: Métricas de evaluación