Schritt 2: Erstellen einer Versuchsdefinition

Eine Experimentdefinition beschreibt den Zweck, den Umfang und die Betriebskonfiguration eines Experiments. Sie erfasst Informationen darüber, was getestet wird, über das erwartete Ergebnis und über das geschäftliche oder technische Ziel, sodass die Beteiligten die Absicht des Experiments schnell verstehen und die Ergebnisse einheitlich interpretieren können.

Die Versuchsdefinition umfasst auch die Betriebsdetails, die für die Durchführung des Experiments erforderlich sind AWS AppConfig. Dazu gehören die dem Experiment zugeordnete Anwendungs- und Funktionskennzeichnung, das Konfigurationsprofil, das zum Speichern der Versuchseinstellungen verwendet wird, und die Behandlungskonfigurationen, die die auszuwertenden Erlebnisse definieren. Die Experimentdefinition dient als zentrale Konfiguration für die Versuchsdurchläufe, die Einstellungen für die Publikumsexposition und die Logik der Behandlungszuweisung. Weitere Informationen zu den hier beschriebenen Konzepten finden Sie unterÜber Experimente in AWS AppConfig.

Erstellen einer Experimentdefinition (Konsole)

Gehen Sie wie folgt vor, um eine Experimentdefinition mithilfe von AWS AppConfig Experimenten in der AWS-Managementkonsole zu erstellen.

Um eine Experimentdefinition zu erstellen

1. Öffnen Sie die AWS Systems Manager Konsole unter https://console.aws.amazon.com/systems-manager/appconfig/.

2. Wählen Sie im Navigationsbereich Experimente und dann Experiment erstellen aus.

3. Geben Sie unter Versuchsname einen aussagekräftigen Namen ein, um dieses Experiment von anderen Experimenten zu unterscheiden.

4. Beschreiben Sie unter Versuchshypothese das Ziel oder die Hypothese, die Sie validieren möchten.

5. Geben Sie unter Startkriterien Informationen zu Metriken oder Daten ein, die für eine erfolgreiche Behandlung unerlässlich sind. Diese Informationen sind hilfreich für lang andauernde Experimente.

6. Wählen Sie unter Experimentanwendung die Anwendung aus, in der dieses Experiment ausgeführt werden soll.

7. Wählen Sie Weiter aus.

8. Geben Sie auf der Seite „Zielgruppe angeben“ unter Zielgruppenbeschreibung Informationen zur Zielgruppe für das Experiment ein.

9. Wählen Sie im Abschnitt Zielgruppenregel entweder den Tab Regelgenerator oder den Tab Editor aus, um eine Regel zu erstellen, die die Zielgruppe identifiziert oder filtert. Wählen Sie Regel-Blueprints aus, um eine vordefinierte Regel für Ihr Experiment anzuzeigen, und wählen Sie sie aus. Beim Erstellen einer Regel:

   • Fügen Sie eine Bedingung hinzu

     Wählen Sie ein Attribut, einen Operator und geben Sie einen Wert an.

   • Bedingungen gruppieren

     Wird verwendetAND, um zu verlangen, dass alle Bedingungen in einer Gruppe wahr sind, oder OR um eine beliebige Bedingung zu erfüllen.

   • Gruppen verschachteln

     Kombinieren Sie mehrere Gruppen, um eine erweiterte Targeting-Logik zu erstellen.

   • Verfeinern Sie die Regel

     Fügen Sie je nach Bedarf Bedingungen und Gruppen hinzu oder entfernen Sie sie, um Ihren Targeting-Anforderungen zu entsprechen.

   Weitere Informationen zum Erstellen von Regeln, einschließlich Ausdrucksformaten, unterstützten Operatoren und Regelbeispielen, finden Sie unterRegeln für Zielgruppen erstellen.

10. Wählen Sie Weiter aus.

11. Wählen Sie auf der Seite mit dem Feature-Flag „Experiment auswählen“ für Umgebung die Umgebung aus, in der dieses Experiment ausgeführt werden soll. Wählen Sie für Konfigurationsprofil das Konfigurationsprofil aus, das dem Feature-Flag zugeordnet ist.

12. Wählen Sie als Feature-Flag ein vorhandenes Feature-Flag aus, das für das Experiment verwendet werden soll. Weitere Informationen zu den Feature-Flags des Experiments finden Sie unterAuswahl des Feature-Flags für das Experiment.

13. Wählen Sie Weiter aus.

14. Lesen Sie auf der Seite „Behandlungen hinzufügen“ den Abschnitt „Standard-Flag-Wert“. Wenn die Zielgruppenpräsenz zwischen 0% und 99% liegt, erhalten Benutzer, denen keine Behandlung zugewiesen wurde, den Standard-Flagwert. Dieser Wert ist immer deaktiviert und kann nicht geändert werden.

15. Geben Sie auf der Seite Behandlungen hinzufügen im Abschnitt Steuerung eine Beschreibung ein und vergewissern Sie sich, dass der Flaggenwert aktiviert ist.

    Anmerkung

    Bei der Kontrollbehandlung handelt es sich um die Ausgangserfahrungen, die während des Experiments zum Vergleich verwendet wurden. Dies ist in der Regel das aktuelle Standardverhalten, es kann sich jedoch um jede stabile, gut verständliche Konfiguration handeln. Der Standard-Feature-Flag-Wert (der standardmäßig deaktiviert ist) definiert das Fallback-Verhalten für Benutzer, die keiner Behandlung zugewiesen sind. Obwohl die Kontrollbehandlung und der Standard-Flag-Wert häufig die gleiche Benutzererfahrung bieten, nehmen nur Benutzer, denen die Kontrollbehandlung zugewiesen wurde, an der Messung und Analyse des Experiments teil.

    Wenn ein oder mehrere Schlüssel im Abschnitt Attributwerte aufgeführt sind, geben Sie deren Werte in das entsprechende Wertfeld ein.

16. Geben Sie im Abschnitt Behandlung 1 eine Beschreibung ein und vergewissern Sie sich, dass der Flaggenwert aktiviert ist. Wenn ein oder mehrere Schlüssel im Abschnitt Attributwerte aufgeführt sind, geben Sie deren Werte in das entsprechende Wertfeld ein. Wiederholen Sie diesen Vorgang für alle weiteren Behandlungen.

17. AWS AppConfig Beim Experimentieren wird der Traffic automatisch allen Behandlungen auf der Grundlage der Gesamtzahl der Behandlungen zugewiesen. Wenn Sie den Traffic verschiedenen Behandlungen zuordnen möchten, können Sie die Option Erweiterte Einstellungen erweitern und die Option Benutzerdefinierte Gewichtungen für die Zuweisung verwenden (nicht empfohlen) auswählen.

    Anmerkung

    Die Zuweisung des Traffics nach Behandlungsmethoden bestimmt, wie der Traffic auf die einzelnen Behandlungen aufgeteilt wird. Die Zuschauerpräsenz, die bestimmt, wie viel Prozent der berechtigten Zuschauer an dem Experiment teilnehmen, wird separat konfiguriert, wenn Sie den Testlauf starten.

18. Wählen Sie Weiter aus.

19. Prüfen Sie die Details und wählen Sie dann Experimentdefinition speichern aus. AWS AppConfig zeigt die vollständige Definitionsseite für das Experiment an.