Amazon EMR 6.6.0 - Note sul rilascio di Hadoop - Amazon EMR

Amazon EMR 6.6.0 - Note sul rilascio di Hadoop

Amazon EMR 6.6.0 - Modifiche a Hadoop

Type (Tipo) Descrizione
Bug Corretti i record duplicati durante la lettura di file di testo BZip2.
Backport HADOOP-18136: verifica della gestione FileUtils.unTar() dei file .tar mancanti
Backport HADOOP-17627: esecuzione del backport a branch-3.2 HADOOP-17371, HADOOP-17621, HADOOP-17625 per aggiornare Jetty a 9.4.39
Backport HADOOP-17655: aggiornamento di Jetty a 9.4.40
Backport HADOOP-17796: aggiornamento della versione di Jetty a 9.4.43
Backport HADOOP-17661: mancata esecuzione del parsing di pom.xml da parte di mvn versions:set
Backport HADOOP-17236: passaggio di snakeyaml a 1.26 per mitigare CVE-2017-18640
Backport HADOOP-16717: rimozione della dipendenza isLog4jLogger di GenericsUtil su Log4JLoggerAdapter
Backport HADOOP-17633: passaggio di json-smart a 2.4.2 e nimbus-jose-jwt a 9.8 a causa di CVE
Backport HADOOP-17844: aggiornamento di JSON smart a 2.4.7
Backport HADOOP-17972: eseczione del backport di HADOOP-17683 (aggiornato commons-io a 2.8.0) per branch-3.2
Backport HADOOP-16555: aggiornamento di commons-compress alla 1.19
Backport HADOOP-17370: aggiornamento di commons-compress a 1.21
Backport HADOOP-17096: correzione dell'offset del buffer di ingresso ZStandardCompressor
Backport HADOOP-17112: mancata ammissione degli spazi bianchi nei percorsi durante il salvataggio dei file su s3a tramite committer
Backport HADOOP-13500: Sincronizzazione dell'iterazione dell'oggetto delle proprietà di configurazione
Backport HDFS-14099: mancato riconoscimento del descrittore di frame durante la decompressione di più fotogrammi in ZStandardDecompressor
Backport HDFS-16410: analisi Xml non sicura in OfflineEditSXMLLoader
Backport HDFS-14498: possibilità di esecuzione di un ciclo infinito sul file per il quale la creazione non è riuscita da parte di LeaseManager
Backport HDFS-15290: NPE in HttpServer durante l'avvio di NameNode
Backport HDFS-15293: attenuazione della condizione per accettare un fsimage quando si riceve un checkpoint
Backport HDFS-12979: StandbyNode dovrebbe caricare FSIimage su ObserverNode dopo il checkpoint
Backport YARN-10538: aggiunta di nodi di riattivazione all'elenco dei nodi aggiornati restituiti all'AM
Backport YARN-10472: esecuzione del backport di YARN-10314 (YarnClient avvia NoClassDefFoundError per WebSocketException con solo i jar client schermati) a branch-3.2
Backport YARN-9968: uscita di Public Localizer in NodeManager a causa di NullPointerException
Backport YARN-10651: CapacityScheduler si è bloccato con NPE in AbstractyArnScheduler.updateNodeResource()
Backport YARN-9339: parametro delle app in sospeso non corretto dopo lo spostamento dell'app in una nuova coda
Backport YARN-10438: Gestire null ContainerID in ClientRemService#getContainerReport()
Backport YARN-7266: mancato avvio di ATS 1.5 se i file RollingLevelDB sono danneggiati o mancanti
Backport YARN-9063: mancato avvio di ATS 1.5 se i file RollingLevelDB sono danneggiati o mancanti
Backport YARN-9848: ripristino di YARN-4946 (RM non deve considerare un'applicazione come COMPLETATA quando l'aggregazione del log non è in uno stato terminale).