Amazon EMR 6.6.0 – Hadoop-Versionshinweise

Amazon EMR 6.6.0 – Hadoop-Änderungen

Typ	Beschreibung
Fehler	Es wurden doppelte Datensätze beim Lesen von Textdateien behoben. BZip2
Backport	HADOOP-18136: Überprüfen Sie den FileUtils.unTar()-Umgang mit fehlenden .tar-Dateien
Backport	HADOOP-17627: Backport auf Branch-3.2 HADOOP-17371, HADOOP-17621, HADOOP-17625, um Jetty auf 9.4.39 zu aktualisieren
Backport	HADOOP-17655: Aktualisieren Sie Jetty auf 9.4.40
Backport	HADOOP-17796: Aktualisieren Sie Jetty auf 9.4.43
Backport	HADOOP-17661: mvn versions:set kann pom.xml nicht analysieren
Backport	HADOOP-17236: Erhöhen Sie Snakeyaml auf 1.26, um CVE-2017-18640 abzuschwächen
Backport	HADOOP-16717: Entfernen Sie die IsLog4JLogger-Abhängigkeit von Log4 GenericsUtil jLoggerAdapter
Backport	HADOOP-17633: Erhöhen Sie json-smart aufgrund von auf 2.4.2 und auf 9.8 nimbus-jose-jwt CVEs
Backport	HADOOP-17844: Aktualisieren Sie JSON Smart auf 2.4.7
Backport	HADOOP-17972: Backport HADOOP-17683 (Update commons-io auf 2.8.0) für Branch-3.2
Backport	HADOOP-16555: Commons-Compress auf Version 1.19 aktualisieren
Backport	HADOOP-17370: Aktualisieren Sie commons-compress auf 1.21
Backport	HADOOP-17096: ZStandard Offset des Compressor-Eingangspuffers korrigiert
Backport	HADOOP-17112: Leerzeichen sind in Pfaden nicht erlaubt, wenn Dateien per Committer auf S3A gespeichert werden
Backport	HADOOP-13500: Synchronisieren der Iteration des Objekts mit den Konfigurationseigenschaften
Backport	HDFS-14099: Unbekannter Frame-Deskriptor beim Dekomprimieren mehrerer Frames in Decompressor ZStandard
Backport	HDFS-16410: Unsicheres XML-Parsen in OfflineEditsXmlLoader
Backport	HDFS-14498: LeaseManager kann die Datei, deren Erstellung fehlgeschlagen ist, für immer wiederholen
Backport	HDFS-15290: NPE ist beim Start aktiviert HttpServer NameNode
Backport	HDFS-15293: Lockern Sie die Bedingungen für die Annahme von fsimage beim Empfang eines Checkpoints
Backport	HDFS-12979: sollte nach dem Checkpointing hochgeladen werden StandbyNode FsImage ObserverNode
Backport	YARN-10538: Fügen Sie der Liste der aktualisierten Knoten, die an den AM zurückgegeben wurden, Knoten für die Wiederinbetriebnahme hinzu
Backport	YARN-10472: Backport von YARN-10314 (wird nur bei schattierten Client-Jars ausgelöst) auf Branch-3.2 YarnClient NoClassDefFoundError WebSocketException
Backport	YARN-9968: Public Localizer wird aufgrund von NodeManager in NullPointerException beendet
Backport	YARN-10651: CapacityScheduler mit NPE in AbstractYarnScheduler.updateNodeResource() abgestürzt
Backport	YARN-9339: Die Metrik für ausstehende Anwendungen ist falsch, nachdem die Anwendung in eine neue Warteschlange verschoben wurde
Backport	YARN-10438: Behandeln von Null containerId in ClientRMService#getContainerReport()
Backport	YARN-7266: ATS 1.5 kann nicht gestartet werden, wenn RollingLevelDb-Dateien beschädigt sind oder fehlen
Backport	YARN-9063: ATS 1.5 kann nicht gestartet werden, wenn RollingLevelDb-Dateien beschädigt sind oder fehlen
Backport	YARN-9848: Setzen Sie YARN-4946 zurück (RM sollte eine Anwendung nicht als COMPLETED betrachten, wenn sich die Protokollaggregation nicht in einem Endstatus befindet).