CloudWatch Metriken für die Bias-Drift-Analyse - Amazon SageMaker

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

CloudWatch Metriken für die Bias-Drift-Analyse

Dieser Leitfaden zeigt CloudWatch Metriken und ihre Eigenschaften, die Sie für die Bias-Drift-Analyse in SageMaker Clarify verwenden können. Jobs zur Überwachung von Verzerrungen berechnen sowohl Verzerrungsmetriken vor dem Training als auch Messwerte für Verzerrungen nach dem Training und veröffentlichen sie im folgenden Namespace: CloudWatch

  • Für Echtzeit-Endpunkte: aws/sagemaker/Endpoints/bias-metrics

  • Erstellen Sie Stapeltransformationsaufträge: aws/sagemaker/ModelMonitoring/bias-metrics

An den CloudWatch Metriknamen wird der Kurzname der Metrik angehängt. bias_metric

Dies bias_metric_CI ist beispielsweise die Bias-Metrik für das Klassenungleichgewicht (CI).

Anmerkung

+/- infinity wird als Fließkommazahl veröffentlicht, und Fehler +/- 2.348543e108, einschließlich Nullwerte, werden nicht veröffentlicht.

Jede Metrik hat die folgenden Eigenschaften:

  • Endpoint: Der Name des überwachten Endpunkts, falls zutreffend.

  • MonitoringSchedule: Der Name des Überwachungszeitplans.

  • BiasStage: Der Name der Phase, in der der Bias-Drift-Monitoring-Auftrag ausgeführt wird. Wählen Sie Pre-training oder Post-Training.

  • Label: Der Name der Zielfunktion, der von der Konfiguration label für die Analyse des Monitoring-Auftragesbereitgestellt wird.

  • LabelValue: Der Wert der Zielfunktion, der von der Konfiguration label_values_or_threshold für die Analyse des Monitoring-Auftrages bereitgestellt wird.

  • Facet: Der Name der Facette, der von der Konfigurationsfacette name_of_index für die Monitoring-Auftrag-Analyse bereitgestellt wird.

  • FacetValue: Der Wert der Facette, der von der Konfigurationsfacette für die Analyse von nvalue_or_thresholdÜberwachungsaufträgen bereitgestellt wird.

Um zu verhindern, dass die Monitoring-Jobs Metriken veröffentlichen, setzen Sie publish_cloudwatch_metrics auf Disabled in der Environment Map of Model Bias Auftragsdefinition auf.