翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
Amazon EMR on EKS 6.12.0 リリース
このページでは、EKSデプロイEMR中の Amazon に固有の Amazon EMR の新機能と更新機能について説明します。Amazon でEMR実行されている Amazon EC2と Amazon 6.12.0 EMR リリース全般の詳細については、「Amazon リリースガイド」の「Amazon EMR 6.12.0」を参照してください。 EMR
Amazon EMR on EKS 6.12 リリース
Amazon EMR on では、次の Amazon EMR 6.12.0 リリースが利用可能ですEKS。特定の emr-6.12.0-XXXX リリースを選択すると、関連するコンテナイメージタグなどの詳細が表示されます。
-
emr-6.12.0-spark-rapids-latest
-
emr-6.12.0-spark-rapids-20230701
-
emr-6.12.0-java11-latest
-
emr-6.12.0-java11-20230701
-
emr-6.12.0-java17-latest
-
emr-6.12.0-java17-20230701
-
emr-6.12.0-spark-rapids-java17-最新
-
emr-6.12.0-spark-rapids-java17-20230701
-
notebook-spark/emr-6.12.0-latest
-
notebook-spark/emr-6.12.0-20230701
-
notebook-spark/emr-6.12.0-spark-rapids-latest
-
notebook-spark/emr-6.12.0-spark-rapids-20230701
-
notebook-python/emr-6.12.0-latest
-
notebook-python/emr-6.12.0-20230701
-
notebook-python/emr-6.12.0-spark-rapids-latest
-
notebook-python/emr-6.12.0-spark-rapids-20230701
リリースノート
Amazon on 6.12.0 EKS EMRのリリースノート
-
サポートされているアプリケーション ‐ AWS SDK for Java 1.12.490、Apache Spark 3.4.0-amzn-0、Apache Hudi 0.13.1-amzn-0、Apache Iceberg 1.3.0-amzn-0、Delta 2.4.0、Apache Spark 23RAPIDS.06.0-amzn-0、Jupyter Enterprise Gateway 2.6.0
-
サポートされているコンポーネント -
aws-sagemaker-spark-sdk
、emr-ddb
、emr-goodies
、emr-s3-select
、emrfs
、hadoop-client
、hudi
、hudi-spark
、iceberg
、spark-kubernetes
。 -
サポートされている設定分類
StartJobRun および CreateManagedEndpoint で使用する場合APIs:
分類 説明 core-site
core-site.xml
Hadoop ファイル内の値を変更します。emrfs-site
EMRFS 設定を変更します。
spark-metrics
metrics.properties
Spark ファイル内の値を変更します。spark-defaults
spark-defaults.conf
Spark ファイル内の値を変更します。spark-env
Spark 環境の値を変更します。
spark-hive-site
hive-site.xml
Spark ファイル内の値を変更します。spark-log4j
log4j2.properties
Spark ファイル内の値を変更します。emr-job-submitter
特に CreateManagedEndpoint で使用する場合APIs:
分類 説明 jeg-config
Jupyter Enterprise Gateway
jupyter_enterprise_gateway_config.py
ファイルの値を変更します。jupyter-kernel-overrides
Jupyter カーネル仕様ファイル内のカーネルイメージの値を変更します。
設定分類を使用すると、アプリケーションをカスタマイズできます。これらは、多くの場合、 などのアプリケーションの設定XMLファイルに対応します
spark-hive-site.xml
。詳細については、「アプリケーションの設定」を参照してください。
注目すべき機能
EMR 上の Amazon 6.12 リリースには、以下の機能が含まれていますEKS。
-
Java 17 - Amazon EMR on 6.12 EKS 以降では、Java 17 ランタイムで Spark を起動できます。このためには、
emr-6.12.0-java17-latest
をリリースラベルとして渡します。本番稼働用ワークロードを以前のバージョンの Java イメージから Java 17 イメージに移行する前に、パフォーマンステストを検証して実行することをお勧めします。