Apache Livy - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Apache Livy

Livy ermöglicht die Interaktion über eine REST-Schnittstelle mit einem EMR-Cluster, auf dem Spark ausgeführt wird. Sie können die REST-Schnittstelle oder eine RPC-Client-Bibliothek verwenden, um Spark-Jobs oder Bausteine von Spark-Code zu senden, Ergebnisse synchron oder asynchron abzurufen und Spark-Kontext zu verwalten. Weitere Informationen finden Sie auf der Apache Livy-Website. Livy ist in Amazon EMR Version 5.9.0 und höher enthalten.

Richten Sie für den Zugriff auf die Livy-Webschnittstelle einen SSH-Tunnel zum Master-Knoten und eine Proxy-Verbindung ein. Weitere Informationen finden Sie unter Anzeigen von auf Amazon EMR-Clustern gehosteten Webschnittstellen.

In der folgenden Tabelle wird die Version von Livy, die in der neuesten Version von Amazon EMR-6.x-Serie enthalten ist, zusammen mit den Komponenten aufgeführt, die Amazon EMR mit Livy installiert.

Die Version der Komponenten, die mit Livy in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 6.2.0.

Livy-Versionsinformationen für emr-6.2.0
Amazon EMR-Versionsbezeichnung Livy-Version Mit Livy installierte Komponenten

emr-6.2.0

Livy 0.7.0

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

In der folgenden Tabelle ist die Version von Livy, die in der neuesten Version von Amazon EMR 5.x enthalten ist, zusammen mit den Komponenten aufgeführt, die Amazon EMR mit Livy installiert.

Die Version der Komponenten, die mit Livy in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 5.32.0.

Livy-Versionsinformationen für emr-5.32.0
Amazon EMR-Versionsbezeichnung Livy-Version Mit installierte KomponentenLivy

emr-5.32.0

Livy 0.7.0

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx