Medida de la diferencia de probabilidades promedio

Última actualización: 14 feb 2025
Medida de la diferencia de probabilidades promedio

La métrica de diferencia de probabilidades promedio mide la diferencia en las tasas de falsos positivos y falsos negativos entre los grupos monitoreados y de referencia.

Detalles de métrica

La diferencia de probabilidades promedio es una métrica de evaluación de imparcialidad que puede ayudar a determinar si su activo produce resultados sesgados.

Ámbito

La métrica de diferencia de probabilidades promedio evalúa los activos de IA generativa y los modelos de aprendizaje automático.

  • Tipos de activos de IA :
    • Plantillas de solicitud
    • Modelos de aprendizaje automático
  • Tareas de IA generativa : Clasificación de texto
  • Tipo de problema de aprendizaje automático : Clasificación binaria

Puntuaciones y valores

La puntuación métrica de la diferencia de probabilidades promedio indica la diferencia en las tasas de falsos positivos y falsos negativos para los grupos monitoreados y de referencia.

  • Rango de valores : 0.0-1.0
  • Mejor puntuación posible : 0.0
  • Ratios :
    • A las 0: Ambos grupos tienen las mismas probabilidades
    • Menos de 0: resultados sesgados para el grupo supervisado
    • Más de 0: resultados sesgados para el grupo de referencia

Cómo se calcula

La siguiente fórmula se utiliza para calcular la tasa de falsos positivos (FPR):

se muestra la fórmula de la tasa de falsos positivos

La siguiente fórmula se utiliza para calcular la tasa de verdaderos positivos (TPR):

se muestra la fórmula de la tasa de positivos verdaderos

La siguiente fórmula se utiliza para calcular la diferencia de probabilidades promedio:

se muestra la fórmula de diferencia de probabilidades promedio

Tema principal: Métricas de evaluación