Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Testen von Versionen
Releasetests generieren Testpläne und führen sie aus, um Codeänderungen in realistischen Umgebungen zu validieren. Der Releasetest-Agent führt explorative UAT- und Regressionstests — funktionale Regression, Validierung der Benutzererfahrung, Integrationstests und Edge-Case-Exploration — anhand Ihrer bereitgestellten Webanwendungen und REST-APIs durch.
Wie funktionieren Release-Tests
Beim Releasetest werden echte Anfragen an Ihre Zielanwendung ausgeführt, einschließlich Schreiboperationen (POST, PUT, DELETE). Der Agent untersucht Endpunkte, sendet Formulare und testet die Fehlerbehandlung. Diese Aktionen können Daten in der Zielanwendung erstellen, ändern oder löschen. Verwenden Sie diese Option nur, wenn Ihr Risikoprofil mutierende Aktionen als Teil der explorativen Tests zulässt. Stellen Sie sicher, dass Ihre Anwendungen explorative Schreibvorgänge ohne unbeabsichtigte Folgen wie das Senden von Kundenbenachrichtigungen, die Verarbeitung von Zahlungen oder das dauerhafte Löschen von Datensätzen tolerieren. Wir empfehlen, Staging-Bereitstellungen zu verwenden. Produktionsanwendungen sollten nur dann ins Visier genommen werden, wenn die Schreibvorgänge Ihrer Anwendung für automatisierte Tests sicher sind.
Wenn der Release-Test-Agent ausgelöst wird:
Generiert einen Testplan — Erstellt einen Testplan auf der Grundlage von Codeänderungen oder einer vom Benutzer angegebenen Testabsicht. Wenn der Plan durch eine Pull-Anfrage oder einen Branch ausgelöst wird, zielt er auf die betroffene Funktionalität ab. Wenn es manuell oder über den Chat ausgelöst wird, kannst du eine Testabsicht angeben, die beschreibt, was validiert werden soll. Der Plan deckt funktionale Korrektheit, Integrationsverhalten und Szenarien mit Benutzerorientierung ab.
Führt Tests für eine laufende Anwendung aus — Bei Angabe einer Ziel-URL (Webanwendung oder API-Endpunkt) untersucht der Agent die Anwendung und führt die generierten Tests aus. Auf das Ziel kann über das öffentliche Internet oder über eine private VPC zugegriffen werden, die in einer Release Management-Umgebung konfiguriert ist. Bei Webanwendungen umfasst dies browserbasierte Benutzeroberflächeninteraktion und visuelle Inspektion. Bei APIs umfasst dies direkte HTTP-Endpunkttests, Schemavalidierung und Überprüfung der Fehlerbehandlung.
Meldet Ergebnisse — Die Ergebnisse werden mit bestimmten Fehlern, beeinträchtigten Funktionen, Reproduktionsschritten und empfohlenen Korrekturen zurückgegeben.
Release-Tests unterstützen Webanwendungen (React, Angular, Vue, vom Server gerendert) und REST-APIs.
Unterstützte Testtypen
UI-Tests — Browser-based Testen mit visuellen Interaktionen für Webanwendungen
API-Tests — Direktes Testen von HTTP-Endpunkten für REST-APIs
Definition von Testprofilen
Testprofile definieren die Web- und API-Anwendungen, die Sie testen möchten, sowie die erforderlichen Konfigurationen. Jedes Testprofil spezifiziert eine Zielanwendung und ihren Testtyp.
Um ein Testprofil zu erstellen:
Navigieren Sie in der DevOps Agent-Web-App im linken Navigationsbereich zu Release Manager.
Wählen Sie die Schaltfläche „Profile testen“.
Wählen Sie Testprofil hinzufügen.
Füllen Sie das Formular mit den folgenden Angaben aus:
Name — Ein beschreibender Name für das Testprofil (z. B. „MyApp Staging“)
Ziel-URL — Die URL einer Staging- oder Testbereitstellung Ihrer Anwendung. Der Agent sendet echten HTTP-Verkehr, einschließlich Schreiboperationen (POST, PUT, DELETE). Verwenden Sie keine Produktions-URLs, es sei denn, Sie verstehen und akzeptieren das Risiko einer Datenänderung.
Testtyp — Wählen Sie entweder UI-Tests (browserbasierte Tests mit visuellen Interaktionen) oder API-Tests (direkte HTTP-Endpunkttests)
Die Anwendung befindet sich in einer VPC — Aktivieren Sie diese Option, wenn die Ziel-URL nur über eine private VPC erreichbar ist. Wählen Sie die richtige Release Management-Umgebung aus. Geben Sie der Sicherheitsgruppe der Umgebung nur die IP und den Port der Zielanwendung an. Der Agent kann jeden Host erreichen, den die Sicherheitsgruppe zulässt. Wenn Sie eine Umgebung erstellen müssen, folgen Sie den Anweisungen unter Konfigurieren einer Release-Management-Umgebung für private Anwendungen.
Wählen Sie Testprofil hinzufügen aus, um zu speichern.
Konfigurieren Sie eine Release Management-Umgebung für private Anwendungen
Wenn sich Ihre Anwendung in einer VPC befindet und nicht über das öffentliche Internet zugänglich ist, erstellen Sie eine Release Management-Umgebung, bevor Sie das Testprofil erstellen:
Erstellen Sie eine private Verbindung, die die VPC, das Subnetz und die Sicherheitsgruppe für Ihre Anwendung erreichen kann. Detaillierte Anweisungen finden Sie unter Verbindung zu privat gehosteten Tools herstellen.
Navigieren Sie in der AWS DevOps Agent-Konsole zu Ihrem Agent Space.
Wählen Sie die Registerkarte Umgebungen und dann Umgebung hinzufügen aus.
Geben Sie einen Umgebungsnamen ein und wählen Sie die private Verbindung aus, die Ihre Anwendung erreicht.
Wählen Sie unter Laufzeitrolle konfigurieren aus, wie die IAM-Rolle für die Umgebung konfiguriert werden soll. Sie können die Konsole eine Rolle erstellen lassen, eine vorhandene Rolle auswählen oder den Anweisungen folgen, um eine Rolle manuell zu erstellen. Wenn Sie eine vorhandene oder manuell erstellte Rolle verwenden, stellen Sie sicher, dass sie dem AWS DevOps Agenten vertraut und dass die
AIDevOpsReleaseManagementVPCPolicyAWS verwaltete Richtlinie angehängt ist.Wählen Sie Speichern.
Wenn Sie ein VPC-Testprofil erstellen, sind nur gültige Release Management-Umgebungen verfügbar, die eine private Verbindung enthalten.
Während des Tests navigiert der Agent möglicherweise über die Ziel-URL hinaus zu Unterdomänen und verknüpften Endpunkten, die er entdeckt, und sein Verhalten kann nicht deterministisch sein. Er kann jeden Host erreichen, der von der Sicherheitsgruppe über die private Verbindung der Umgebung zugelassen wurde. Beschränke diese Sicherheitsgruppe nur auf die IP und den Port der Zielanwendung. Dadurch wird verhindert, dass der Agent Datenbanken, Admin-Schnittstellen oder andere Dienste in derselben VPC erreicht.
Testen von Anwendungen, die eine Authentifizierung erfordern
Wenn Ihre Anwendung erfordert, dass sich ein Benutzer anmeldet, können Sie Anmeldeinformationen im Testprofil speichern, sodass sich der Releasetest-Agent anmelden und Ihre Anwendung ohne manuelles Eingreifen untersuchen kann. Anmeldeinformationen werden verschlüsselt gespeichert und nur für die Anmeldung bei der von Ihnen angegebenen Zielanwendung verwendet.
Wenn Sie ein authentifiziertes Testprofil konfigurieren, wählen Sie eine Zwei-Faktor-Authentifizierungsmethode (2FA), die der Art und Weise entspricht, wie die Zielanwendung Benutzer bei der Anmeldung herausfordert:
Keine — Nur Benutzername und Passwort. Der Agent meldet sich mit den gespeicherten Anmeldeinformationen und ohne zusätzlichen Bestätigungsschritt an.
TOTP (zeitbasiertes Einmalpasswort) — Ein statischer Wert aus dem Authenticator-Setup der Zielanwendung. Geben Sie ihn als Base32-Zeichenfolge oder als
otpauth://URI an oder laden Sie den Setup-QR-Code hoch, der in dieselbe URI dekodiert wird.otpauth://Der Agent verwendet das gespeicherte Geheimnis, wenn er sich anmeldet. Verwenden Sie diese Option, wenn die Anwendung zur Eingabe eines Überprüfungs- oder Authentifizierungscodes auffordert.E-Mail — Ein Einmalcode, der an eine E-Mail-Adresse gesendet wird. Der Agent ruft den per E-Mail gesendeten Code bei der Anmeldung ab. Verwenden Sie diese Option, wenn die Anwendung einen Bestätigungscode per E-Mail sendet, anstatt einen Authentifikator zu verwenden.
Bei einer 2FA-Aufforderung generiert der Agent automatisch den Code oder ruft ihn ab, sendet ihn und setzt den Test fort, ohne dass Sie weitere Maßnahmen ergreifen müssen.
TOTP konfigurieren
Wählen Sie beim Hinzufügen oder Bearbeiten eines Testprofils den Benutzertyp Authentifiziert aus.
Wählen Sie unter der 2FA-Methode TOTP aus.
Geben Sie das TOTP-Geheimnis auf eine der folgenden Arten ein:
Geben Sie das Base32-Geheimnis (z. B.
JBSWY3DPEHPK3PXP) aus dem Authenticator-Setup der Zielanwendung ein.Geben Sie den
otpauth://URI aus dem Authenticator-Setup ein.Wählen Sie QR-Code hochladen, um das Bild des Setup-QR-Codes hochzuladen. Das Geheimnis wird aus dem Bild entschlüsselt und automatisch für Sie ausgefüllt.
Speichern Sie das Testprofil.
Bei der Anmeldung verwendet der Agent das gespeicherte Geheimnis, um den Bestätigungsschritt abzuschließen, wenn die Anwendung zur Eingabe eines Codes auffordert. Bei UI-Profilen wird der Code in den Browser eingegeben; bei API-Profilen ist der Code im Text der Authentifizierungsanfrage enthalten. Das Geheimnis wird verschlüsselt gespeichert und niemals in Testausgaben oder Protokollen offengelegt.
E-Mail-2FA konfigurieren
Mit E-Mail 2FA kann der Agent einen Einmalcode abrufen, den die Zielanwendung bei der Anmeldung an eine E-Mail-Adresse sendet. Diese Methode gilt nur für UI-Testprofile.
Wählen Sie beim Hinzufügen oder Bearbeiten eines Testprofils den Benutzertyp Authentifiziert aus.
Wählen Sie unter der 2FA-Methode die Option E-Mail aus.
(Optional) Geben Sie einen Absenderfilter ein — eine E-Mail-Adresse (z. B.
noreply@service.com). Wenn diese Option aktiviert ist, akzeptiert der Agent nur Codes, die von dieser Adresse gesendet wurden.Speichern Sie das Testprofil. Auf der Testprofilseite wird eine Weiterleitungsadresse im Formular angezeigt
mfa+<testProfileId>@<stage>.<region>.release-testing.aidevops.aws.dev.Erstellen Sie in dem Postfach, das die Anmeldecodes für Ihr Testkonto erhält, eine Einmalregel, die die Bestätigungs-E-Mails an die im Testprofil angegebene Weiterleitungsadresse weiterleitet.
Erwarten Sie bei der Anmeldung, dass die Anwendung einen Bestätigungscode per E-Mail an Ihr Testkonto sendet. Ihre Weiterleitungsregel übermittelt den Code an die Weiterleitungsadresse. Der Agent ruft ihn ab und sendet ihn, um die Anmeldung abzuschließen.
Tests von einem Testprofil aus ausführen
Auf der Seite Testprofile können Sie manuell einen Testlauf auslösen:
Suchen Sie Ihr Testprofil in der Liste.
Wählen Sie Testen starten.
(Optional) Geben Sie unter Testabsicht spezifische Anweisungen an und geben Sie an, was getestet werden soll. Beispiel: „Stellen Sie sicher, dass der Checkout-Ablauf abgelaufene Coupons korrekt verarbeitet“ oder „Testen Sie das Benutzerregistrierungsformular mit ungültigen Eingaben“.
Der Mitarbeiter erstellt auf der Grundlage Ihrer Absicht einen Testplan (oder sondiert umfassend, falls keine Absicht angegeben wurde), führt Tests durch und meldet die Ergebnisse im Bereich Release Manager unter „Vorgeschlagene Änderungen“.
Tests werden vom DevOps Agenten-Chat aus ausgeführt
Im DevOps Agenten-Chat können Sie Release-Tests anfordern. Bitten Sie den Agenten, Ihre Testprofile aufzulisten oder anzugeben, welches ausgeführt werden soll. Der Mitarbeiter fragt Sie nach allen erforderlichen Folgeinformationen, z. B. was getestet werden soll oder auf welche Bereiche Sie sich konzentrieren sollten.
Beispiele:
„Meine Testprofile auflisten“
„Testprofil my-test-profile ausführen“
„Führen Sie Releasetests für meine Anwendung unter durch https://staging.myapp.com und überprüfen Sie den Zahlungsfluss“
Der Mitarbeiter meldet bei der Erkundung der Anwendung den Fortschritt und gibt Ergebnisse mit spezifischen Ergebnissen, Screenshots (für UI-Tests) und Reproduktionsschritten zurück.
Tests von Ihrer IDE aus ausführen
Von Kiro IDE oder Claude Code aus kann der Coding-Agent Release-Tests aufrufen:
Installieren Sie zunächst das Kiro Power - oder Claude Code-Plugin.
Geben Sie eine Testanforderung oder -absicht an, die beschreibt, was validiert werden soll (z. B. „Überprüfen Sie, ob der Anmeldevorgang nach dem Auth-Refactor funktioniert“)
Der Codierungsagent übergibt die Testabsicht und ein Zieltestprofil an den Release-Testagenten
Der Release-Test-Agent generiert Tests und führt sie aus und meldet dann die Ergebnisse zurück
Wenn Probleme entdeckt werden, bietet der Coding-Agent an, diese an Ort und Stelle zu beheben
Release-Tests in CI/CD Pipelines
GitHub Aktionen
Die aws-actions/devops-agent-release-testing@v1 GitHub Aktion löst den Releasetest-Agenten nach der Bereitstellung aus und meldet die Ergebnisse als GitHub Prüflauf für Ihren Commit oder Pull Request.
Voraussetzungen
Ein in Ihrem Agent Space konfiguriertes Testprofil
Ein in Ihrem Agent Space DevOps Agent über Webhook aufrufen konfiguriertes
Schritt 1: Konfigurieren Sie GitHub Repository-Geheimnisse
Gehen Sie in Ihrem GitHub Repository zu Einstellungen → Geheimnisse und Variablen → Aktionen → Repository-Geheimnisse und fügen Sie Folgendes hinzu:
| Secret | Description |
|---|---|
| DEVOPS_AGENT_WEBHOOK_URL | Die Webhook-URL aus Ihrem Agent Space |
| DEVOPS_AGENT_WEBHOOK_SECRET | Das geheime Webhook-Signaturgeheimnis aus Ihrem Agent Space |
Informationen zum Erstellen eines Webhook-Endpunkts finden Sie unter. DevOps Agent über Webhook aufrufen
Schritt 2: Fügen Sie die Aktion zu Ihrem Workflow hinzu
Fügen Sie den Release-Testschritt zu Ihrem Workflow hinzu (zum Beispiel.github/workflows/release-tests.yml):
name: Release Tests on: push: branches: [main] pull_request: branches: [main] permissions: checks: write contents: read pull-requests: read jobs: test: runs-on: ubuntu-latest steps: - name: Trigger Release Tests uses: aws-actions/devops-agent-qa@v1 with: webhook-url: ${{ secrets.DEVOPS_AGENT_WEBHOOK_URL }} webhook-secret: ${{ secrets.DEVOPS_AGENT_WEBHOOK_SECRET }} test-profile-id: <YOUR_TEST_PROFILE_ID> test-requirement: <WHAT_TO_TEST> # optional env: GITHUB_TOKEN: ${{ github.token }}
<YOUR_TEST_PROFILE_ID>Ersetzen Sie es durch die Testprofil-ID aus Ihrem Agent Space (beginnt mitki-). Die test-requirement Eingabe ist optional. Verwenden Sie sie, um den Agenten auf bestimmte Bereiche zu konzentrieren (z. B. „Überprüfen Sie den Anmeldeablauf nach dem Auth-Refactor“).
Eingaben für Aktionen
| Input | Erforderlich | Description |
|---|---|---|
| Webhook-URL | Ja | Die Webhook-URL aus Ihrem Agent Space |
| Webhook-Geheimnis | Ja | Das geheime Webhook-Signaturgeheimnis für die Authentifizierung HMAC-SHA256 |
| Testprofil-ID | Ja | Die Testprofil-ID, die ausgelöst werden soll (beginnt mit) ki- |
| Testanforderung | Nein | Optionaler Schwerpunktbereich für Tests |
Erforderliche Workflow-Berechtigungen
| Berechtigung | Grund |
|---|---|
| Inhalt: gelesen | Erforderlich für actions/checkout private Repos |
| Pull-Anfragen: lesen | PR-Nummer aus dem Merge-Commit SHA auflösen |
Funktionsweise
Ihre Workflow-Auslöser (z. B. nach der Bereitstellung in einer Staging-Umgebung).
Die Aktion erstellt einen Prüflauf (
in_progress) für den Commit oder PR, der als ausstehende Prüfung angezeigt wird.Die Aktion signiert und sendet einen Webhook an Ihren Agent Space.
Der Releasetest-Agent übernimmt die Aufgabe und führt Tests für Ihre Anwendung durch.
Die Ergebnisse werden als GitHub Prüflauf (pass/fail mit einer detaillierten Zusammenfassung) zurückgemeldet.
Sie können die vollständigen Ausführungsdetails (Zeitplan, Testfälle, Screenshots für UI-Tests) in der DevOps Agent-Web-App einsehen, die von Ihrem Agent-Bereich aus verlinkt ist.
Überprüfung der Testergebnisse
Die Testergebnisse werden im Bereich Releases der DevOps Agent-Web-App unter „Vorgeschlagene Änderungen“ angezeigt. Jeder Testlauf zeigt:
Status — Abgeschlossen, Fehlgeschlagen oder In Bearbeitung
Kategorie — Release-Tests
Dauer — Wie lange hat der Testlauf gedauert
Quelle — Ob er manuell, über einen Chat oder über eine CI/CD Pipeline ausgelöst wurde
Wählen Sie einen Testlauf aus, um detaillierte Ergebnisse wie spezifische Testfehler, Screenshots (für UI-Tests), Reproduktionsschritte und empfohlene Korrekturen anzuzeigen.