Novità - Amazon EMR
Amazon EMR 7.2.0Amazon EMR 6.15.0Amazon EMR 5.36.2SigV4 compatibilità

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Novità

Questa pagina descrive le modifiche e le funzionalità disponibili nelle ultime versioni di Amazon EMR 7.x, 6.x e 5.x.

Queste note di rilascio sono disponibili anche nelle pagine Amazon EMR 7.2.0, Amazon EMR 6.15.0 e Amazon EMR 5.36.2, insieme alle versioni delle applicazioni, alle versioni dei componenti e alle classificazioni di configurazione disponibili per ogni versione.

Nota

Le versioni successive di Amazon EMR utilizzano AWS Signature Version 4 (SigV4) per autenticare le richieste verso Amazon S3. Ti consigliamo di utilizzare una EMR versione di Amazon che supporti SigV4 in modo da poter accedere a nuovi bucket S3 ed evitare interruzioni dei carichi di lavoro. Per ulteriori informazioni e per un elenco delle EMR versioni di Amazon che supportano SigV4, consulta Amazon EMR e AWS Signature versione 4.

Amazon EMR 7.2.0 (ultima versione della serie 7.x)

Le nuove EMR versioni di Amazon vengono rese disponibili in diverse regioni nell'arco di diversi giorni, a partire dalla prima regione alla data di rilascio iniziale. La versione più recente potrebbe non essere disponibile nella tua Regione durante questo periodo.

Le seguenti note di rilascio includono informazioni per la EMR versione 7.2.0 di Amazon. Le modifiche sono relative alla versione 7.2.0.

Nuove funzionalità

  • Aggiornamenti delle applicazioni: Amazon EMR 7.2.0 application upgrades include Iceberg 1.5.0-amzn-0 and Delta 3.1.0.

  • Amazon EMR aggiunge il supporto in modo da poter utilizzare altre applicazioni come HBase Flink e Hive con la classe di storage Amazon S3 Express One Zone.

  • Questa versione aggiunge la capacità di leggere gli oggetti ripristinati, in modo da poter leggere gli oggetti Glacier da una posizione S3 con il protocollo. S3A Questa funzionalità funziona con Spark, Flink e Hive.

  • Etichette dei nodi con scalabilità gestita: utilizza le etichette dei nodi con le istanze in base al tipo di mercato o al tipo di nodo per migliorare la scalabilità automatica di Amazon. EMR Per ulteriori informazioni, consulta Using managed scaling in Amazon EMR.

Problemi noti

  • Python 3.11 non è supportato con Studio. EMR

Modifiche, miglioramenti e problemi risolti

  • Questa versione corregge un problema di deadlock che può verificarsi durante le operazioni interne di pulizia dei passaggi. Questa operazione gestisce il ciclo di vita dei passaggi man mano che vengono completati nel cluster. EMR Questo problema riguarda EMR le operazioni critiche di Amazon, come il funzionamento graduale e la scalabilità.

  • Questa versione risolve un problema per cui i cluster personalizzati con custom AMIs che hanno determinati file di log preesistenti possono causare il fallimento del daemon di gestione dei EMR log di Amazon.

  • Amazon EMR 7.2.0 aggiorna il EMR daemon Amazon responsabile della gestione dei cluster e delle attività di monitoraggio dalla AWS SDK v1 alla v2.

  • Quando avvii un cluster con l'ultima versione di patch di Amazon EMR 5.36 o successiva, 6.6 o successiva, o 7.0 o successiva, Amazon EMR utilizza l'ultima versione di Amazon Linux 2023 o Amazon Linux 2 per Amazon Linux 2 come Amazon predefinito. EMR AMI Per ulteriori informazioni, consulta Using the default Amazon Linux AMI for Amazon EMR.

    OsReleaseLabel (versione Amazon Linux) Versione del kernel di Amazon Linux Data di disponibilità Regioni supportate
    2023,5 20240819,0 6.1.102-111.182.amzn2023 20 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia), Asia Pacifico (Hyderabad), Medio Oriente (UAE), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv), Canada occidentale (Calgary)
    2023,5 20240730,0 6,197-104,177.amzn2023 2 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia), Asia Pacifico (Hyderabad), Medio Oriente (UAE), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv), Canada occidentale (Calgary)
    2023,520240722,0 6,197-104,177.amzn2023 24 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia), Asia Pacifico (Hyderabad), Medio Oriente (UAE), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv), Canada occidentale (Calgary)
    2023,5 20240708,0 6,196-102,177.amzn2023 8 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), Canada occidentale (Calgary), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia)

Amazon EMR 6.15.0 (ultima versione della serie 6.x)

Le nuove EMR versioni di Amazon vengono rese disponibili in diverse regioni nell'arco di diversi giorni, a partire dalla prima regione alla data di rilascio iniziale. La versione più recente potrebbe non essere disponibile nella tua Regione durante questo periodo.

Le seguenti note di rilascio includono informazioni per la EMR versione 6.15.0 di Amazon. Le modifiche sono relative alla versione 6.14.0. Per ulteriori informazioni sulla tempistica di pubblicazione, consulta il Log delle modifiche 6.15.0.

Nuove funzionalità

  • Aggiornamenti delle applicazioni: Amazon EMR 6.15.0 application upgrades include Apache Hadoop 3.3.6, Apache Hudi 0.14.0-amzn-0, Iceberg 1.4.0-amzn-0, and Trino 426.

  • Avvio più rapido per EMR i cluster che funzionano su un clusterEC2: ora è fino al 35% più veloce avviare un Amazon EMR on EC2 cluster. Grazie a questo miglioramento, la maggior parte dei clienti può avviare i propri cluster in 5 minuti o meno.

  • CodeWhisperer per EMR Studio: ora puoi usare Amazon CodeWhisperer con Amazon EMR Studio per ricevere consigli in tempo reale durante la scrittura del codice JupyterLab. CodeWhisperer puoi completare i tuoi commenti, completare singole righe di codice, line-by-line formulare consigli e generare funzioni complete.

  • Tempi di riavvio dei processi più rapidi con Flink: con Amazon EMR 6.15.0 e versioni successive, sono disponibili diversi nuovi meccanismi per Apache Flink per migliorare il tempo di riavvio del lavoro durante le operazioni di ripristino delle attività o di scalabilità. Ciò ottimizza la velocità di ripristino e riavvio dei grafici di esecuzione per migliorare la stabilità del lavoro.

  • Controllo degli accessi a livello di tabella e granulare per i formati a tabella aperta: con EMR Amazon 6.15.0 e versioni successive, quando esegui job Spark su Amazon EMR su EC2 cluster che accedono ai dati nel AWS Glue Data Catalog, puoi AWS Lake Formation utilizzare per applicare autorizzazioni a livello di tabella, riga, colonna e cella su tabelle basate su Hudi, Iceberg o Delta Lake.

  • Aggiornamento Hadoop: Amazon EMR 6.15.0 include un aggiornamento di Apache Hadoop alla versione 3.3.6. Hadoop 3.3.6 era l'ultima versione al momento della distribuzione di Amazon EMR 6.15, rilasciata da Apache nel giugno 2023. Le versioni precedenti di Amazon EMR (da 6.9.0 a 6.14.x) utilizzavano Hadoop 3.3.3.

    L'aggiornamento include centinaia di miglioramenti e correzioni e funzionalità che includono parametri di datanode riconfigurabili, l'DFSAdminopzione per avviare operazioni di riconfigurazione in blocco su tutti i datanode attivi e un sistema vettoriale che consente ai lettori con elevato numero di ricerche di specificare più intervalli da leggere. API Hadoop 3.3.6 aggiunge anche il supporto e la semantica per il suo write-ahead log (), in modo che possa essere eseguito su altre implementazioni di sistemi di HDFS APIs storage. WAL HBase Per ulteriori informazioni, consulta i log delle modifiche per le versioni 3.3.4, 3.3.5 e 3.3.6 nella documentazione di Apache Hadoop.

  • Supporto AWS SDK per Java, versione 2 - Le applicazioni Amazon EMR 6.15.0 possono essere utilizzate AWS SDK per le versioni Java 1.12.569 o 2.20.160 se l'applicazione supporta la v2. La versione AWS SDK per Java 2.x è una riscrittura importante del codice base della versione 1.x. È stata sviluppata su base Java 8+ e aggiunge diverse caratteristiche richieste frequentemente. Queste includono il supporto per I/O non bloccanti e la possibilità di collegare un'implementazione diversa in fase di esecuzione. HTTP Per ulteriori informazioni, inclusa una guida alla migrazione da SDK Java v1 a v2, consultate la guida AWS SDKper Java, versione 2.

Modifiche, miglioramenti e problemi risolti

  • Per migliorare i EMR cluster ad alta disponibilità, questa versione abilita la connettività ai EMR daemon Amazon su host locali che utilizzano IPv6 endpoint.

  • Questa versione abilita la versione TLS 1.2 per la comunicazione con ZooKeeper provisioned su tutti i nodi primari del cluster ad alta disponibilità.

  • Questa versione migliora la gestione dei file di registro delle ZooKeeper transazioni mantenuti sui nodi primari per ridurre al minimo gli scenari in cui i file di registro superano i limiti e interrompono le operazioni del cluster.

  • Questa versione rende la comunicazione tra nodi più resiliente per i cluster ad alta disponibilità. EMR Questo miglioramento riduce la possibilità di errori nelle operazioni di bootstrap o di problemi all'avvio del cluster.

  • Tez in Amazon EMR 6.15.0 introduce configurazioni che puoi specificare per aprire in modo asincrono le suddivisioni di input in una suddivisione raggruppata Tez. Ciò si traduce in prestazioni più rapide delle query di lettura quando è presente un gran numero di suddivisioni di input in una singola suddivisione raggruppata di Tez. Per ulteriori informazioni, consulta la pagina relativa all'apertura della suddivisione asincrona Tez.

  • Quando avvii un cluster con l'ultima versione di patch di Amazon EMR 5.36 o successiva, 6.6 o successiva, o 7.0 o successiva, Amazon EMR utilizza l'ultima versione di Amazon Linux 2023 o Amazon Linux 2 per Amazon Linux 2 come Amazon predefinito. EMR AMI Per ulteriori informazioni, consulta Using the default Amazon Linux AMI for Amazon EMR.

    OsReleaseLabel (versione Amazon Linux) Versione del kernel di Amazon Linux Data di disponibilità Regioni supportate
    2.0.20240816,0 4,14,350 21 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    2,0,20240809,0 4,14,349 20 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    2,0,20240719,0 4,14,348 25 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    20,20240709,1 4,14,348 23 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia), Asia Pacifico (Hyderabad), Medio Oriente (UAE), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv), Canada occidentale (Calgary)
    20.20240223.0 4,14,336 8 marzo 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Canada occidentale (Calgary)
    20,20240131,0 4,144336 14 febbraio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Canada occidentale (Calgary)
    2.0.20240124.0 4,14,336 7 febbraio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Canada occidentale (Calgary)
    2,020240109,0 4,1,334 24 gennaio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia), Canada occidentale (Calgary)
    2,020231218,0 4,14,30 2 gennaio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia)
    2.0.20231206,0 4,14,30 22 dicembre 2023 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia)
    2.0.20231116.0 4,14,328 11 dicembre 2023 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia)
    2.0.20231101,0 4,14,327 13 novembre 2023 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Spagna), Europa (Francoforte), Europa (Zurigo), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Hyderabad), Asia Pacifico (Hyderabad), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Asia Pacifico (Melbourne), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrain), Medio Oriente (), Canada (UAE Centrale), Israele (Tel Aviv), AWS GovCloud (Stati Uniti occidentali), AWS GovCloud (Stati Uniti orientali), Cina (Pechino), Cina (Ningxia)

Amazon EMR 5.36.2 (ultima versione della serie 5.x)

Le nuove EMR versioni di Amazon vengono rese disponibili in diverse regioni nell'arco di diversi giorni, a partire dalla prima regione alla data di rilascio iniziale. La versione più recente potrebbe non essere disponibile nella tua Regione durante questo periodo.

Le seguenti note di rilascio includono informazioni per la EMR versione 5.36.2 di Amazon. Le modifiche sono relative alla versione 5.36.1. Per ulteriori informazioni sulla tempistica di rilascio, consulta il log delle modifiche.

Modifiche, miglioramenti e problemi risolti

  • Questa versione migliora la logica di ridimensionamento del cluster in modo che Amazon EMR non riduca i nodi principali al di sotto dell'impostazione del fattore di HDFS replica per il cluster. Questo miglioramento soddisfa i requisiti di ridondanza dei dati e riduce la possibilità che un'operazione di scalabilità si blocchi.

  • Questa versione aggiunge un nuovo meccanismo di riprova al flusso di lavoro di scalabilità del cluster per l'esecuzione di Presto o Trino. Questo miglioramento riduce il rischio che il ridimensionamento del cluster venga eseguito all'infinito a causa di una singola operazione di ridimensionamento non riuscita. Inoltre, migliora l'utilizzo del cluster, poiché quest'ultimo aumenta e riduce le·proprie·dimensioni più rapidamente.

  • Risolve un problema a causa del quale le operazioni di scalabilità verso il basso del cluster potrebbero bloccarsi mentre EMR Amazon disattivava senza problemi un nodo centrale e questo diventava malfunzionante prima che venisse completamente disattivato.

  • Migliora la stabilità di un nodo in un cluster ad alta disponibilità con più nodi primari quando Amazon EMR riavvia un singolo nodo.

  • Ottimizza la gestione dei log con Amazon EMR in esecuzione su AmazonEC2. Di conseguenza, potresti notare una leggera riduzione dei costi di archiviazione per i log del cluster.

  • Migliora la gestione dei file di registro delle ZooKeeper transazioni che vengono mantenuti sui nodi primari per ridurre al minimo gli scenari in cui i file di registro superano i limiti e interrompono le operazioni del cluster.

  • Risolve un bug raro che può causare il fallimento di un cluster ad alta disponibilità con più nodi primari a causa dell'impossibilità di comunicare con Yarn. ResourceManager

  • Quando avvii un cluster con l'ultima versione di patch di Amazon EMR 5.36 o successiva, 6.6 o successiva, o 7.0 o successiva, Amazon EMR utilizza l'ultima versione di Amazon Linux 2023 o Amazon Linux 2 per Amazon Linux 2 come Amazon predefinito. EMR AMI Per ulteriori informazioni, consulta Using the default Amazon Linux AMI for Amazon EMR.

    OsReleaseLabel (Versione Amazon Linux) Versione del kernel di Amazon Linux Data di disponibilità Regioni supportate
    2.0.20240816,0 4,14,350 21 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    2,0,20240809,0 4,14,349 20 agosto 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    2,0,20240719,0 4,14,348 25 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)
    20,20240709,1 4,14,348 23 luglio 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia), Asia Pacifico (Hyderabad), Medio Oriente (UAE), Europa (Spagna), Europa (Zurigo), Asia Pacifico (Melbourne), Israele (Tel Aviv), Canada occidentale (Calgary)
    20.20240503.0 4,14,343 xxxxxx, 2024 Stati Uniti orientali (Virginia settentrionale), Stati Uniti orientali (Ohio), Stati Uniti occidentali (California settentrionale), Stati Uniti occidentali (Oregon), Europa (Stoccolma), Europa (Milano), Europa (Francoforte), Europa (Irlanda), Europa (Londra), Europa (Parigi), Asia Pacifico (Hong Kong), Asia Pacifico (Mumbai), Asia Pacifico (Tokyo), Asia Pacifico (Seoul), Asia Pacifico (Osaka), Asia Pacifico (Singapore), Asia Pacifico (Sydney), Asia Pacifico (Giacarta), Africa (Città del Capo), Sud America (San Paolo), Medio Oriente (Bahrein), Canada (Centrale), (Stati Uniti occidentali), (Stati Uniti orientali), Cina AWS GovCloud (Pechino), Cina AWS GovCloud (Ningxia)

Amazon EMR e AWS Signature versione 4

EMRLe versioni di Amazon utilizzano AWS Signature Version 4 (SigV4) per autenticare le richieste verso Amazon S3. I bucket creati in Amazon S3 dopo il 24 giugno 2020 non supportano le richieste firmate da Signature Version 2 (SigV2). I bucket creati fino al 24 giugno 2020 incluso continueranno a supportare SigV2. Ti consigliamo di migrare a una EMR versione di Amazon che supporti SigV4 in modo da poter accedere a nuovi bucket S3 ed evitare interruzioni dei carichi di lavoro.

Se utilizzi applicazioni incluse in Amazon EMR come Apache Spark, Apache Hive e Presto, non è necessario modificare il codice dell'applicazione da utilizzare SigV4 . Se utilizzi applicazioni personalizzate non incluse in AmazonEMR, potresti dover aggiornare il codice per utilizzarle SigV4. Per ulteriori informazioni, consulta Passare da Signature versione 2 a Signature versione 4 nella Guida per l'utente di Amazon S3.

Le seguenti EMR versioni di Amazon supportano SigV4: emr-4.7.4, emr-4.8.5, emr-4.9.6, emr-4.10.1, emr-5.1.1, emr-5.2.3, emr-5.3.2, emr-5.4.1, emr-5.5.4, emr-5.6.1, emr-5.7.1, emr-5.8.3, emr-5.9.1, emr-5.10.1, emr-5.11.4, emr-5.12.3, emr-5.13.1, emr-5.14.2, emr-5.15.1, emr-5.16.1, emr-5.17.2, emr-5.18.1, emr-5.19.1, emr-5.20.1, emr-5.21.2, and emr-5.22.0 and higher. Supporta tutte le versioni 6.x e 7.x SigV4.