Anzeigen von Versuchsergebnissen im Dashboard - Amazon CloudWatch

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Anzeigen von Versuchsergebnissen im Dashboard

Sie können die statistischen Ergebnisse eines Experiments sehen, während es läuft und nachdem es abgeschlossen ist. Die Ergebnisse eines Experiments sind bis zu 63 Tage nach dem Start des Experiments verfügbar. Danach sind sie aufgrund von Richtlinien zur CloudWatch Datenspeicherung nicht mehr verfügbar.

Es werden keine statistischen Ergebnisse angezeigt, bis jede Variante mindestens 100 Ereignisse aufweist.

Evidently führt am Ende des Experiments eine zusätzliche Offline-p-Wert-Analyse durch. Offline-p-Wert-Analysen können in einigen Fällen, in denen die während des Experiments verwendeten zeitunabhängigen p-Werte keine statistische Signifikanz finden, statistische Signifikanz erkennen.

Weitere Informationen darüber, wie CloudWatch Evidently die Versuchsergebnisse berechnet, finden Sie unter. Ergebnisberechnung von Evidently

Die Ergebnisse eines Experiments ansehen
  1. Öffnen Sie die CloudWatch Konsole unter https://console.aws.amazon.com/cloudwatch/.

  2. Wählen Sie im Navigationsbereich Application Signals, Evidently aus.

  3. Wählen Sie den Namen des Projekts aus, das das Experiment enthält.

  4. Wechseln Sie zur Registerkarte Experiments (Experimente).

  5. Wählen Sie den Namen des Experiments und dann die Registerkarte Results (Ergebnisse).

  6. Bei Variation performance (Leistung der Variante) gibt es ein Steuerelement, mit dem Sie auswählen können, welche Experimentstatistiken angezeigt werden sollen. Wenn Sie mehr als eine Statistik auswählen, zeigt Evidently ein Diagramm und eine Tabelle für eine jede Statistik an.

    Die einzelnen Diagramme und Tabellen zeigen die bisherigen Ergebnisse des Experiments an.

    Die Diagramme können die folgenden Ergebnisse anzeigen. Sie können mit dem Steuerelement rechts neben dem Diagramm bestimmen, welches der folgenden Elemente angezeigt wird:

    • Die Anzahl der für jede Variante aufgezeichneten Benutzersitzungsereignisse.

    • Der Durchschnittswert der Metrik der einzelnen Varianten, die oben im Diagramm ausgewählt wird.

    • Das statistische Gewicht der Experimente. Hier wird die Differenz für die oben im Diagramm ausgewählte Metrik mit der Standardvariante und allen anderen Varianten verglichen.

    • Das obere und untere Vertrauensniveau von 95 % begrenzt die Differenz der ausgewählten Metrik zwischen jeder Variante und der Standardvariante.

    Die Tabelle hat eine Zeile pro Variante. Für jede Variante, die nicht die Standardvariante ist, zeigt Evidently an, ob es genügend Daten erhalten hat und die Ergebnisse dadurch statistisch aussagekräftig sind. Sie sehen auch, ob die Verbesserung des statistischen Werts durch die Veränderung ein Vertrauensniveau von 95 % erreicht hat.

    Zu guter Letzt sehen Sie in der Spalte Result (Ergebnis) eine Empfehlung, welche Variante basierend auf dieser Statistik am besten abschneidet bzw. ob es sich nicht eindeutig sagen lässt.