Amazon EMR 7.5.0 - Catatan rilis Hadoop

Amazon EMR 7.5.0 - Perubahan Hadoop

Tipe	Deskripsi
Perbaikan Bug	Mengomentari fs.file.impl ke nilai kosong.
Backport	HADOOP-19286: Mendukung akses lintas wilayah S3A saat S3 disetel region/endpoint
Peningkatan	Pengaturan konfigurasi wilayah S3 otomatis untuk konektor S3A pada EMR- EC2
Peningkatan	Kurangi jumlah HeadObject panggilan di S3A

Dengan dirilisnya Amazon EMR 7.5, konektor Spark S3A menunjukkan kinerja baca yang sebanding dengan EMRFS, sebagaimana dibuktikan dengan tolok ukur menggunakan dataset parket TPC-DS 3TB.

Amazon EMR 7.5.0 - Fitur Hadoop

• Konfigurasi wilayah S3 fs.s3a.endpoint.region secara otomatis diatur ke wilayah tempat cluster EMR diluncurkan dengan konektor S3A untuk penyebaran EMR. EC2

• Akses wilayah lintas bucket Amazon S3 diaktifkan secara default untuk konektor S3A. Itu dapat dimodifikasi dengan pengaturanfs.s3a.cross.region.access.enabled=true or false.