Benachrichtigungen anzeigen und bearbeiten

Das Modell-Dashboard zeigt Warnmeldungen an, die Sie in Amazon konfiguriert haben CloudWatch. Sie können die Warnungskriterien im Dashboard selbst ändern. Die Warnkriterien hängen von zwei Parametern ab:

• Zu warnende Datenpunkte: Wie viele Ausführungsfehler innerhalb des Testzeitraums lösen eine Warnung aus.

• Evaluierungszeitraum: Die Anzahl der letzten Überwachungsausführungen, die bei der Bewertung des Alarmstatus berücksichtigt werden müssen.

Die folgende Abbildung zeigt ein Beispielszenario für eine Reihe von Model Monitor-Ausführungen, in denen wir einen hypothetischen Evaluierungszeitraum von 3 und für Datenpunkte auf einen Warn-Wert von 2 festgelegt haben. Nach jeder Ausführung der Überwachung wird die Anzahl der Fehler innerhalb des Bewertungszeitraums von 3 gezählt. Wenn die Anzahl der Fehler den Wert 2 der Datenpunkte bis zur Warnung erreicht oder überschreitet, gibt der Monitor eine Warnung aus und verbleibt im Alarmstatus, bis die Anzahl der Fehler innerhalb des Bewertungszeitraums in nachfolgenden Iterationen unter 2 liegt. In der Abbildung sind die Bewertungsfenster rot, wenn der Monitor eine Warnung ausgibt oder im Alarmstatus verbleibt, andernfalls grün.

Beachten Sie, dass selbst wenn die Größe des Bewertungsfensters den Evaluierungszeitraum von 3 nicht erreicht hat, wie in den ersten beiden Zeilen des Bildes gezeigt, der Monitor dennoch eine Warnung ausgibt, wenn die Anzahl der Fehler den Wert 2 für Datenpunkte bis zur Warnung erreicht oder überschreitet.

Auf der Seite mit den Monitor-Details können Sie Ihren Alert-Verlauf einsehen, bestehende Alert-Kriterien bearbeiten und Auftragsberichte anzeigen, die Ihnen beim Debuggen von Alert-Fehlern helfen. Anweisungen zum Anzeigen des Warnungsverlaufs oder der Auftragsberichte für fehlgeschlagene Monitoring-Ausführungen finden Sie unter Warnungshistorie oder Auftragsberichte anzeigen. Anweisungen zum Bearbeiten von Warnkriterien finden Sie unter Bearbeiten der Warnungskriterien.

Warnungshistorie oder Auftragsberichte anzeigen

Führen Sie zum Anzeigen des Warnprotokolls oder der Auftragsberichte über fehlgeschlagene Ausführungen die folgenden Schritte aus:

1. Öffnen Sie die SageMaker Konsole.

2. Wählen Sie im linken Bereich die Option Governance aus.

3. Wählen Sie Model Dashboard.

4. Wählen Sie im Bereich Modelle des Modell-Dashboards den Modellnamen der Warnungshistorie aus, die Sie anzeigen möchten.

5. Wählen Sie in der Spalte Zeitplanname den Monitornamen der Warnungshistorie aus, die Sie anzeigen möchten.

6. Um den Warnungsverlauf anzuzeigen, wählen Sie die Registerkarte Warnungsverlauf.

7. (optional) Führen Sie zum Anzeigen von Auftragsberichten zu Monitoring-Ausführungen die folgenden Schritte aus:

   1. Wählen Sie auf der Registerkarte Warnungsverlauf die Option Ausführungen anzeigen für die Warnung aus, die Sie untersuchen möchten.

   2. Wählen Sie in der Tabelle Ausführungsverlauf die Option Bericht über die Überwachungs-Ausführung anzeigen, die Sie untersuchen möchten.

      Der Bericht zeigt die folgenden Informationen an:

      • Funktion: Die überwachte benutzerdefinierte ML-Funktion

      • Einschränkung: Die spezifische Prüfung innerhalb des Monitors

      • Einzelheiten zum Verstoß: Informationen darüber, warum die Einschränkung verletzt wurde

Bearbeiten der Warnungskriterien

Führen Sie zum Bearbeiten einer Warnung im Modell-Dashboard die folgenden Schritte aus:

1. Öffnen Sie die SageMaker Konsole.

2. Wählen Sie im linken Bereich die Option Governance aus.

3. Wählen Sie Modell-Dashboard.

4. Wählen Sie im Modell-Dashboard im Bereich Modelle den Modellnamen der Warnung aus, die Sie ändern möchten.

5. Wählen Sie das Optionsfeld neben dem Monitorzeitplan der Warnung aus, die Sie ändern möchten.

6. Wählen Sie im Abschnitt Überwachungszeitplan die Option Warnung bearbeiten aus.

7. (optional) Ändern Sie die Datenpunkte in eine Warnung, wenn Sie die Anzahl der Fehler innerhalb des Testzeitraums ändern möchten, die eine Warnung auslösen.

8. (optional) Ändern Sie den Evaluierungszeitraum, wenn Sie die Anzahl der letzten Überwachungsausführungen ändern möchten, die bei der Auswertung des Warnstatus berücksichtigt werden sollen.