Indicadores de equidad

Los indicadores de equidad (Fairness Indicators) son una biblioteca que permite el procesamiento fácil de métricas de equidad que se identifican de manera habitual para clasificadores binarios y multiclase. Con el conjunto de herramientas de indicadores de equidad, puedes hacer lo siguiente:

  • Procesar las métricas de equidad que se identifican de manera habitual para los modelos de clasificación
  • Comparar el rendimiento de los modelos entre subgrupos con un modelo de referencia o con otros modelos
  • Usar intervalos de confianza para mostrar disparidades de importancia estadística
  • Realizar la evaluación en varios umbrales

Usa los indicadores de equidad mediante lo siguiente:

eval_config_pbtxt = """

model_specs {
    label_key: "%s"
}

metrics_specs {
    metrics {
        class_name: "FairnessIndicators"
        config: '{ "thresholds": [0.25, 0.5, 0.75] }'
    }
    metrics {
        class_name: "ExampleCount"
    }
}

slicing_specs {}
slicing_specs {
    feature_keys: "%s"
}

options {
    compute_confidence_intervals { value: False }
    disabled_outputs{values: "analysis"}
}
""" % (LABEL_KEY, GROUP_KEY)

Recursos