Amazon EMR 6.3.0 版 - Amazon EMR

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

Amazon EMR 6.3.0 版

以下亞馬遜 EMR 6.3.0 版本適用於 EKS 上的亞馬遜 EMR:

亞馬遜 EMR 6.3.0 發行説明

  • 新功能 - 從 6.x 版本系列中的亞馬遜 EMR 6.3.0 開始,EKS 上的亞馬遜 EMR 支持 Spark 的容器模板功能。您還可以為 EKS 上的亞馬遜 EMR 打開 Spark 事件日誌旋轉功能。如需詳細資訊,請參閱 使用 Pod 模板使用 Spark 事件日誌旋轉

  • 支持的應用程序‐Spark 3.1.1-amzn-0,木星企業網關(終端,公共預覽)。

  • 支援的元件‐aws-hm-client(Glue 連接器)、aws-sagemaker-spark-sdkemr-s3-selectemrfsemr-ddbhudi-spark

  • 支持的配置分類:

    分類 説明

    core-site

    變更 Hadoop 中 core-site.xml 檔案的值。

    emrfs-site

    變更 EMRFS 設定。

    spark-metrics

    變更 Spark 中 metrics.properties 檔案的值。

    spark-defaults

    變更 Spark 的 spark-defaults.conf 檔案中的值。

    spark-env

    變更 Spark 環境中的值。

    spark-hive-site

    變更 Spark 的 hive-site.xml 檔案中的值。

    spark-log4j

    變更 Spark 中 log4j.properties 檔案的值。

    配置分類允許您自定義應用程序。這些通常與應用程序的配置 XML 文件對應,如 spark-hive-site.xml。如需詳細資訊,請參閱設定應用程式