Versions 5.33.0 d'Amazon EMR on EKS - Amazon EMR

Versions 5.33.0 d'Amazon EMR on EKS

Les versions 5.33.0 suivantes d'Amazon EMR sont disponibles pour Amazon EMR on EKS. Sélectionnez une version emr-5.33.0-XXXX spécifique pour voir plus de détails tels que la balise de l'image du conteneur correspondant.

Notes de mise à jour pour Amazon EMR 5.33.0

  • Nouvelle fonctionnalité – À partir d'Amazon EMR 5.33.0 de la série de versions 5.x, Amazon EMR on EKS prend en charge la fonctionnalité de modèle de pod de Spark. Pour de plus amples informations, veuillez consulter Utilisation de modèles de pods.

  • Applications prises en charge : Spark 2.4.7-amzn-1, Jupyter Enterprise Gateway (points de terminaison, version préliminaire publique ; le noyau Scala n'est pas pris en charge).

  • Composants pris en charge : aws-hm-client (connecteur Glue), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Classifications de configuration prises en charge :

    Classifications Descriptions

    core-site

    Modifiez les valeurs dans le fichier core-site.xml de Hadoop.

    emrfs-site

    Modifiez les paramètres EMRFS.

    spark-metrics

    Modifiez les valeurs dans le fichier metrics.properties de Spark.

    spark-defaults

    Modifiez les valeurs dans le fichier spark-defaults.conf de Spark.

    spark-env

    Modifiez les valeurs dans l'environnement Spark.

    spark-hive-site

    Modifiez les valeurs dans le fichier hive-site.xml de Spark.

    spark-log4j

    Modifiez les valeurs dans le fichier log4j.properties de Spark.

    Les classifications de configuration vous permettent de personnaliser les applications. Elles correspondent souvent à un fichier XML de configuration de l'application, tel que spark-hive-site.xml. Pour plus d'informations, consultez Configuration des applications.