Amazon EMR 7.6.0 — Hadoop-Versionshinweise

Amazon EMR 7.6.0 — Hadoop-Änderungen

Typ	Beschreibung
Neues Feature	Rahmen von S3A Credential Vending
Neues Feature	S3A Magic Committer-Unterstützung für Hive
Backport	HADOOP-19309: S3A: Der CopyFromLocalFile Vorgang schlägt fehl, wenn die Quelldatei kein Dateischema enthält
Backport	HADOOP-19050 S3A: Unterstützung von S3-Zugriffsberechtigungen
Backport	HADOOP-18708 S3A: Support die clientseitige S3-Verschlüsselung (CSE)

Amazon EMR 7.6.0 — Hadoop-Funktionen

• Die Standardkonfigurationseinstellungen für yarn.scheduler.increment-allocation-mb und yarn.scheduler.minimum-allocation-mb wurden von 32 auf 1 geändert, wodurch die Normalisierung der Container-Ressourcen in YARN effektiv deaktiviert wird.

• Das S3A-Dateisystem in Hadoop wurde erweitert und unterstützt nun den Verkauf von Zugangsdaten auf Anforderungsebene. Mit dieser Funktion verwendet jede Amazon S3 S3-Anfrage eineAwsCredentialsProvider. Dies gewährleistet eine verbesserte Flexibilität und Sicherheit, indem Anmeldeinformationen für jede Anfrage dynamisch bereitgestellt werden.

• Das S3A-Dateisystem in Hadoop unterstützt die clientseitige S3-Verschlüsselung.