CloudWatch Métricas para el análisis de desviación de sesgo

Esta guía muestra CloudWatch las métricas y sus propiedades que puede utilizar para el análisis de la desviación de sesgo en SageMaker Clarify. Los trabajos de monitoreo de la desviación de sesgo calculan tanto las métricas de sesgo previas al entrenamiento como las métricas de sesgo posteriores al entrenamiento, y las publican en el siguiente CloudWatch espacio de nombres:

• Para puntos de conexión en tiempo real: aws/sagemaker/Endpoints/bias-metrics

• Para trabajos de transformación por lotes: aws/sagemaker/ModelMonitoring/bias-metrics

El nombre de la CloudWatch métrica agrega el nombre abreviado de la métrica a. bias_metric

Por ejemplo, bias_metric_CI es la métrica de sesgo para el desequilibrio de clases (CI).

nota

+/- infinity se publica como el número de coma flotante +/- 2.348543e108, y los errores que incluyen valores nulos no se publican.

Cada métrica tiene las siguientes propiedades:

• Endpoint: el nombre del punto de conexión supervisado, si corresponde.

• MonitoringSchedule: el nombre de la programación del trabajo de supervisión.

• BiasStage: el nombre de la fase del trabajo de supervisión de la desviación de sesgo. Elija Pre-training o Post-Training.

• Label: el nombre de la característica objetivo, proporcionado por la configuración del análisis del trabajo de supervisión label.

• LabelValue: el valor de la característica objetivo, proporcionado por la configuración del análisis del trabajo de supervisión label_values_or_threshold.

• Facet: el nombre de la faceta, proporcionado por la faceta de configuración del análisis del trabajo de supervisión name_of_index.

• FacetValue: el valor de la faceta, proporcionado por la faceta de configuración del análisis del trabajo de supervisión nvalue_or_threshold.

Para evitar que los trabajos de supervisión publiquen métricas, establezca publish_cloudwatch_metrics en Disabled en el mapa Environment de definición del trabajo de sesgo del modelo.