Amazon EMR 7.2.0 — Hadoop-Versionshinweise

Amazon EMR 7.2.0 — Hadoop-Änderungen

Typ	Beschreibung
Neues Feature	HADOOP-18850: S3A: Aktivieren Sie die zweischichtige serverseitige Verschlüsselung mit Schlüsseln AWS KMS
Neues Feature	Support S3 Glacier beim Lesen wiederhergestellter Objekte
Verbesserung	Dynamische Skalierung der maximalen S3A-Verbindungen basierend auf den Kernen bei der Ausführung von Spark-Jobs
Verbesserung	HADOOP-18797: Support gleichzeitige Schreibvorgänge mit S3A Magic Committer
Verbesserung	HADOOP-19047: Support das InMemory Tracking von S3A Magic Commits
Verbesserung	Fügen Sie die Methoden „Exportieren“, „Veröffentlichen“ und „" in MagicV2 Committer hinzu AbortPublish
Verbesserung	Implementieren Sie die API ReadFullyIntoBuffers FileSystem in S3A
Fehlerbehebung	HADOOP-18793: S3A StagingCommitter bereinigt das Verzeichnis der Staging-Uploads nicht
Upgrade	HADOOP-19008: S3A: Aktualisieren Sie die AWS-SDK-Version auf 2.21.41
Upgrade	HADOOP-18613 ZooKeeper : Upgrade auf Version 3.8.3

Amazon EMR 7.2.0 — Hadoop-Funktionen

In der folgenden Liste finden Sie neue Hadoop-Funktionen in Amazon EMR 7.2.0.

• S3-Gletscherunterstützung zum Lesen wiederhergestellter Objekte — Mit Amazon EMR Version 7.2.0 und höher können Sie wiederhergestellte Glacier-Objekte vom S3-Speicherort der Tabelle mit dem S3A Protokoll lesen. Bei diesem Lesevorgang werden archivierte Glacier-Dateien ignoriert, wenn sie noch wiederhergestellt werden.

• Support gleichzeitiger Schreibvorgänge mit dem S3A Magic Committer — Amazon EMR 7.2.0 bietet Unterstützung für gleichzeitige Schreibvorgänge mit dem S3A Magic Committer. Diese Funktion wurde der OSS Hadoop-Community als Teil von HADOOP-18797 hinzugefügt.