Überwachen von Apache-Spark-Berechnungen mit CloudWatch-Metriken - Amazon Athena

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Überwachen von Apache-Spark-Berechnungen mit CloudWatch-Metriken

Athena veröffentlicht berechnungsbezogene Metriken auf Amazon CloudWatch, wenn die Publish CloudWatch metrics-Option für Ihre Spark-fähige Arbeitsgruppe ausgewählt ist. Sie können in der CloudWatch-Konsole benutzerdefinierte Dashboards erstellen, Warnungen und Auslöser für Metriken festlegen.

Athena veröffentlicht die folgende Metrik in der CloudWatch-Konsole unter dem AmazonAthenaForApacheSpark-Namespace:

  • DPUCount – Anzahl der DPUs, die während der Sitzung zur Ausführung der Berechnungen verbraucht wurden.

Diese Metrik besitzt die folgenden Dimensionen:

  • SessionId – Die ID der Sitzung, in der die Berechnungen übermittelt werden.

  • WorkGroup – Name der Arbeitsgruppe.

So zeigen Sie Metriken für Spark-fähige Arbeitsgruppen in der Amazon CloudWatch-Konsole an
  1. Öffnen Sie die CloudWatch-Konsole unter https://console.aws.amazon.com/cloudwatch/.

  2. Wählen Sie im Navigationsbereich Metrics (Metriken) All metrics (Alle Metriken) aus.

  3. Wählen Sie den AmazonAthenaForApacheSpark-Namespace aus.

So zeigen Sie Metriken im CLI-Dashboard an
  • Führen Sie eine der folgenden Aktionen aus:

    • Um die Metriken für Athena-Spark-fähige Arbeitsgruppen aufzulisten, öffnen Sie eine Eingabeaufforderung und verwenden Sie den folgenden Befehl:

      aws cloudwatch list-metrics --namespace "AmazonAthenaForApacheSpark"
    • Verwenden Sie den folgenden Befehl, um alle verfügbaren Metriken aufzulisten:

      aws cloudwatch list-metrics

Liste der CloudWatch-Metriken und -Dimensionen für Apache Spark-Berechnungen in Athena

Wenn Sie CloudWatch-Metriken in Ihrer Spark-fähigen Athena-Arbeitsgruppe aktiviert haben, sendet Athena die folgende Metrik pro Arbeitsgruppe an CloudWatch. Die Metrik verwendet den AmazonAthenaForApacheSpark-Namespace.

Metrikname Beschreibung
DPUCount Anzahl der DPUs (Datenverarbeitungseinheiten), die während der Sitzung zur Ausführung der Berechnungen verbraucht werden. Bei einer DPU handelt es sich um ein relatives Maß der Rechenleistung, die aus 4 vCPUs Rechenkapazität und 16 GB Arbeitsspeicher besteht.

Diese Metrik besitzt die folgenden Dimensionen.

Dimension Beschreibung
SitzungsID

Die ID der Sitzung, in der die Berechnungen übermittelt werden.

WorkGroup

Der Name der Arbeitsgruppe.