Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Halaman ini menjelaskan fungsionalitas baru dan diperbarui untuk Amazon EMR yang khusus untuk EMR Amazon pada penerapan EKS. Untuk detail tentang Amazon EMR yang berjalan di Amazon EC2 dan tentang rilis Amazon EMR 7.6.0 secara umum, lihat Amazon EMR 7.6.0 di Panduan Rilis Amazon EMR.
Amazon EMR pada rilis EKS 7.6
Rilis Amazon EMR 7.6.0 berikut tersedia untuk Amazon EMR di EKS. Pilih rilis EMR-7.6.0-XXXX tertentu untuk melihat detail selengkapnya seperti tag gambar kontainer terkait.
Rilis Amazon EMR 7.6.0 berikut tersedia untuk Amazon EMR di EKS saat Anda menjalankan aplikasi Flink.
Catatan rilis
Catatan rilis untuk Amazon EMR di EKS 7.6.0
-
Aplikasi yang didukung - AWS SDK for Java 2.29.25 and 1.12.779, Apache Spark 3.5.3-amzn-0, Apache Hudi 0.15.0-amzn-3, Apache Iceberg 1.6.1-amzn-2, Delta 3.2.1-amzn-1, Apache Spark RAPIDS 24.10.1-amzn-0, Jupyter Enterprise Gateway 2.6.0, Apache Flink 1.20.0-amzn-0, Flink Operator 1.10.0-amzn-0
-
Komponen yang didukung -
aws-sagemaker-spark-sdkemr-ddb,emr-goodies,,emr-s3-select,emrfs,hadoop-client,hudi,hudi-spark,iceberg,spark-kubernetes. -
Klasifikasi konfigurasi yang didukung
Untuk digunakan dengan StartJobRundan CreateManagedEndpoint APIs:
Klasifikasi Deskripsi core-siteUbah nilai dalam file
core-site.xmlHadoop.emrfs-siteUbah pengaturan EMRFS.
spark-metricsUbah nilai dalam file
metrics.propertiesSpark.spark-defaultsUbah nilai dalam file
spark-defaults.confSpark.spark-envUbah nilai di lingkungan Spark.
spark-hive-siteUbah nilai dalam file
hive-site.xmlSpark.spark-log4j2Ubah nilai dalam file
log4j2.propertiesSpark.emr-job-submitterKonfigurasi untuk pod pengirim pekerjaan.
Untuk digunakan secara khusus dengan CreateManagedEndpoint APIs:
Klasifikasi Deskripsi jeg-configUbah nilai dalam file Jupyter Enterprise Gateway
jupyter_enterprise_gateway_config.py.jupyter-kernel-overridesUbah nilai untuk Gambar Kernel di file Spesifikasi Kernel Jupyter.
Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti
spark-hive-site.xml. Untuk informasi selengkapnya, lihat Mengkonfigurasi Aplikasi.
Fitur penting
Fitur-fitur berikut disertakan dengan rilis 7.6.0 Amazon EMR di EKS:
-
Monitoring Configuration Support untuk Apache Spark Operator - Konfigurasi pemantauan memungkinkan Anda dengan mudah mengatur pengarsipan log aplikasi Spark dan log operator Anda ke Amazon S3 atau ke Amazon. CloudWatch Anda dapat memilih salah satu atau keduanya. Melakukan hal itu menambahkan sespan agen log ke pod operator Spark, driver, dan pod pelaksana Anda, dan selanjutnya meneruskan log komponen ini ke sink yang dikonfigurasi. Untuk informasi selengkapnya, lihat Menggunakan konfigurasi pemantauan untuk memantau operator Spark Kubernetes dan pekerjaan Spark.
Perubahan
Perubahan berikut disertakan dengan rilis 7.6.0 Amazon EMR di EKS:
-
Tidak ada perubahan untuk rilis.
