Amazon EMR 6.7.0 - Catatan rilis Hive - Amazon EMR
Hive berubahMasalah diketahui

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Amazon EMR 6.7.0 - Catatan rilis Hive

Amazon EMR 6.7.0 - Perubahan sarang

Tipe Deskripsi
Fitur Integrasi Amazon EMR Hive dengan LakeFormation.
Fitur Pencatatan audit tambahan untuk komitmen Hive EMRFS Amazon S3 yang dioptimalkan. Konfigurasi sarang:hive.blobstore.output-committer.logging, default:false
Fitur Dihapus direktori target pada insert menimpa dengan kosong pilih hasil untuk partisi tabel unpartitioned/statis untuk berperilaku sama dengan Hive 2.x. Konfigurasi sarang:hive.emr.iow.clean.target.dir, default:false
Bug Tetap kegagalan permintaan intermiten saat menggunakan Hive EMRFS Amazon S3 optimasi committer dengan partisi bucket sorting.
Meningkatkan Versi Hive telah di-upgrade ke 3.1.3. Lihat catatan rilis Apache Hive 3.1.3 untuk lebih jelasnya.
Meningkatkan Upgrade Parket ke 1.12.2.
Backport HIVE-20065: Metastore tidak boleh mengandalkan jackson 1.x
Backport HIVE-20071: Migrasi ke jackson 2.x dan mencegah penggunaan
Backport HIVE-20607: TxnHandler harus digunakan PreparedStatement untuk menjalankan query SQL langsung
Backport HIVE-20740: Hapus kunci global dalam ObjectStore metode.setConf
Backport HIVE-20961: Pensiun implementasi NVL
Backport HIVE-22059: toples sarang-exec tidak mengandung perpustakaan jackson (lebih cepat)
Backport HIVE-22351: Perbaiki ObjectStore penggunaan ulir yang salah TestObjectStore
Backport HIVE-23534: NPE di RetryingMetaStoreClient #invoke saat menangkap MetaException tanpa pesan
Backport HIVE-24048: Harmonisasi komponen Jackson ke versi 2.10.latest - Hive
Backport HIVE-24768: Gunakan jackson-bom di mana-mana untuk penggantian versi
Backport HIVE-24816: Tingkatkan jackson ke 2.10.5.1 atau 2.11.0+ karena CVE-2020-25649
Backport HIVE-25971: Shutdown tugas Tez tertunda karena kumpulan benang cache tidak ditutup
Backport HIVE-26036: NPE disebabkan oleh getMtable () di ObjectStore

Amazon EMR 6.7.0 - Masalah yang diketahui sarang

  • Query dengan fungsi windowing pada kolom yang sama seperti bergabung dapat menyebabkan transformasi yang tidak valid seperti yang dilaporkan dalam HIVE-25278 dan menyebabkan hasil yang salah atau kegagalan query. Solusinya adalah menonaktifkan CBO pada tingkat kueri untuk kueri tersebut. Perbaikan akan tersedia dalam rilis Amazon EMR setelah 6.7.0. Untuk informasi selengkapnya, hubungiAWS support.

  • Dengan Amazon EMR 6.6.0 hingga 6.9.0, kueri INSERT dengan partisi dinamis dan klausa ORDER BY atau SORT BY akan selalu memiliki dua reduksi. Masalah ini disebabkan oleh perubahan OSS HIVE-20703, yang menempatkan optimasi partisi sortir dinamis di bawah keputusan berbasis biaya. Jika beban kerja Anda tidak memerlukan penyortiran partisi dinamis, kami sarankan Anda mengaturhive.optimize.sort.dynamic.partition.threshold properti-1 untuk menonaktifkan fitur baru dan mendapatkan jumlah reduksi yang dihitung dengan benar. Masalah ini diperbaiki di OSS Hive sebagai bagian dari HIVE-22269 dan akan tersedia dalam rilis Amazon EMR mendatang. Untuk informasi selengkapnya, hubungiAWS support.