Apache Livy - Amazon EMR

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Apache Livy

Livy permite la interacción a través de una interfaz de REST con un clúster de EMR en el que se ejecuta Spark. Puede utilizar la interfaz de REST o una biblioteca de cliente RPC para enviar trabajos de Spark o fragmentos de código de Spark, recuperar resultados de forma síncrona o asíncrona, y gestionar Spark Context. Para obtener más información, consulte el sitio web de Apache Livy. Livy se incluye en la versión de lanzamiento 5.9.0 de Amazon EMR y posteriores.

Para acceder a la interfaz web de Livy, configure un túnel de SSH en el nodo maestro y una conexión proxy. Para obtener más información, consulte Ver interfaces web alojadas en clústeres de EMR.

En la siguiente tabla, se muestra la versión de Livy incluida en la última versión de la serie 7.x de Amazon EMR, junto con los componentes que Amazon EMR instala con Livy.

Para ver la versión de los componentes instalados con Livy en esta versión, consulte Versiones de componentes de la versión 7.1.0.

Información sobre la versión de Livy para emr-7.1.0
Etiqueta de versión de Amazon EMR Versión de Livy Componentes instalados con Livy

emr-7.1.0

Livy 0.8.0

emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

En la tabla siguiente, se muestra la versión de Livy incluida en la última versión de la serie Amazon EMR 6.x, junto con los componentes que Amazon EMR instala con Livy.

Para ver la versión de los componentes instalados con Livy en esta versión, consulte Versiones de los componentes de la versión 6.15.0.

Información de la versión de Livy para emr-6.15.0
Etiqueta de versión de Amazon EMR Versión de Livy Componentes instalados con Livy

emr-6.15.0

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

En la tabla siguiente, se muestra la versión de Livy incluida en la última versión de la serie Amazon EMR 5.x, junto con los componentes que Amazon EMR instala con Livy.

Para ver la versión de los componentes instalados con Livy en esta versión, consulte Versiones de componentes de la versión 5.36.2.

Información sobre la versión de Livy para emr-5.36.2
Etiqueta de versión de Amazon EMR Versión de Livy Componentes instalados con Livy

emr-5.36.2

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx