Amazon EMR en las EKS versiones 6.3.0 - Amazon EMR

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Amazon EMR en las EKS versiones 6.3.0

Las siguientes versiones de Amazon EMR 6.3.0 están disponibles para Amazon EMR enEKS. Selecciona una XXXX versión específica de emr-6.3.0- para ver más detalles, como la etiqueta de imagen del contenedor correspondiente.

Notas de publicación de Amazon EMR 6.3.0

  • Nuevas funciones ‐ A partir de Amazon EMR 6.3.0 de la serie de versiones 6.x, Amazon EMR on es EKS compatible con la función de plantillas de pods de Spark. También puedes activar la función de rotación del registro de eventos de Spark para EMR AmazonEKS. Para obtener más información, consulte Uso de plantillas de pods y Uso de la rotación del registro de eventos de Spark.

  • Aplicaciones compatibles: Spark 3.1.1-amzn-0, Jupyter Enterprise Gateway (puntos de conexión, versión preliminar pública).

  • Componentes compatibles: aws-hm-client (conector de Glue), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Clasificaciones de configuración compatibles:

    Clasificaciones Descripciones

    core-site

    Cambia los valores en el archivo core-site.xml de Hadoop.

    emrfs-site

    Cambia EMRFS la configuración.

    spark-metrics

    Cambiar los valores en el archivo metrics.properties de Spark.

    spark-defaults

    Cambiar los valores en el archivo spark-defaults.conf de Spark.

    spark-env

    Cambiar los valores en el entorno de Spark.

    spark-hive-site

    Cambia los valores en el archivo hive-site.xml de Spark.

    spark-log4j

    Cambiar los valores en el archivo log4j.properties de Spark.

    Las clasificaciones de configuración le permiten personalizar las aplicaciones. Suele corresponder a un XML archivo de configuración de la aplicación, como un spark-hive-site archivo.xml. Para obtener más información, consulte Configuración de aplicaciones.