Rilascio 4.9.6 di Amazon EMR

• Versioni delle applicazioni

• Note di rilascio

• Versioni dei componenti

• Classificazioni di configurazione

Versioni delle applicazioni

In questo rilascio sono supportate le seguenti applicazioni: Ganglia, HBase, HCatalog, Hadoop, Hive, Hue, Mahout, Oozie-Sandbox, Phoenix, Pig, Presto-Sandbox, Spark, Sqoop-Sandbox, Tez, Zeppelin-Sandbox e ZooKeeper-Sandbox.

La seguente tabella elenca le versioni dell'applicazione disponibili in questo rilascio di Amazon EMR e quelle nei precedenti tre rilasci di Amazon EMR (quando applicabile).

Per la cronologia completa delle versioni dell'applicazione di ogni rilascio di Amazon EMR, fai riferimento ai seguenti argomenti:

• Versioni dell'applicazione nei rilasci di Amazon EMR 6.x

• Versioni dell'applicazione nei rilasci di Amazon EMR 5.x

• Versioni dell'applicazione nei rilasci di Amazon EMR 4.x

Informazioni sulla versione dell'applicazione
	emr-4.9.6	emr-4.9.5	emr-4.9.4	emr-4.9.3
SDK AWS per Java	1.10.75	1.10.75	1.10.75	1.10.75
Delta	-	-	-	-
Flink	-	-	-	-
Ganglia	3.7.2	3.7.2	3.7.2	3.7.2
HBase	1.2.2	1.2.2	1.2.2	1.2.2
HCatalog	1.0.0	1.0.0	1.0.0	1.0.0
Hadoop	2.7.3	2.7.3	2.7.3	2.7.3
Hive	1.0.0	1.0.0	1.0.0	1.0.0
Hudi	-	-	-	-
Hue	3.7.1	3.7.1	3.7.1	3.7.1
Iceberg	-	-	-	-
JupyterEnterpriseGateway	-	-	-	-
JupyterHub	-	-	-	-
Livy	-	-	-	-
MXNet	-	-	-	-
Mahout	0.12.2	0.12.2	0.12.2	0.12.2
Oozie	-	-	-	-
Oozie-Sandbox	4.2.0	4.2.0	4.2.0	4.2.0
Phoenix	4.7.0	4.7.0	4.7.0	4.7.0
Pig	0.14.0	0.14.0	0.14.0	0.14.0
Presto	-	-	-	-
Presto-Sandbox	0.157.1	0.157.1	0.157.1	0.157.1
Spark	1.6.3	1.6.3	1.6.3	1.6.3
Sqoop	-	-	-	-
Sqoop-Sandbox	1.4.6	1.4.6	1.4.6	1.4.6
TensorFlow	-	-	-	-
Tez	0.8.4	0.8.4	0.8.4	0.8.4
Trino (PrestoSQL)	-	-	-	-
Zeppelin	-	-	-	-
Zeppelin-Sandbox	0.6.1	0.6.1	0.6.1	0.6.1
ZooKeeper	-	-	-	-
ZooKeeper-Sandbox	3.4.9	3.4.9	3.4.9	3.4.9

Note di rilascio

Questa è una versione di patch da aggiungere l'autenticazione AWS Signature Version 4 per le richieste inviate ad Amazon S3. Tutte le applicazioni e i componenti sono gli stessi del rilascio precedente di Amazon EMR.

Importante

In questa versione, Amazon EMR utilizza AWS Signature Version 4 esclusivamente per autenticare le richieste ad Amazon S3. Per ulteriori informazioni, consulta Novità.

Versioni dei componenti

I componenti che Amazon EMR installa con questo rilascio sono elencati di seguito. Alcuni sono installati come parte di pacchetti di applicazione dei big data. Altri sono specifici per Amazon EMR e installati per processi e caratteristiche del sistema. Questi solitamente iniziano con emr o aws. I pacchetti di applicazione sui Big data del rilascio di Amazon EMR più recente sono di solito le versioni più recenti reperibili nella community. Mettiamo a disposizione i rilasci della community in Amazon EMR il più rapidamente possibile.

Alcuni componenti in Amazon EMR differiscono dalle versioni della community. Tali componenti hanno un'etichetta che indica la versione nel modulo CommunityVersion-amzn-EmrVersion. EmrVersion inizia da 0. Ad esempio, se un componente della community open source denominato myapp-component con versione 2.2 è stato modificato tre volte per essere incluso in rilasci diversi di Amazon EMR, tale versione di rilascio si presenta come 2.2-amzn-2.

Componente	Versione	Descrizione
emr-ddb	4.3.0	Connettore di Amazon DynamoDB per le applicazioni dell'ecosistema Hadoop.
emr-goodies	2.2.0	Librerie utili per l'ecosistema Hadoop.
emr-kinesis	3.3.0	Connettore di Amazon Kinesis per le applicazioni dell'ecosistema Hadoop.
emr-s3-dist-cp	2.4.0	Applicazione di copia distribuita ottimizzata per Amazon S3.
emrfs	2.17.0	Connettore di Amazon S3 per le applicazioni dell'ecosistema Hadoop.
ganglia-monitor	3.7.2	Agente Ganglia integrato per le applicazioni dell'ecosistema Hadoop con l'agente di monitoraggio Ganglia.
ganglia-metadata-collector	3.7.2	Raccoglitore di metadati Ganglia per l'aggregazione di parametri degli agenti di monitoraggio Ganglia.
ganglia-web	3.7.1	Applicazione Web per la visualizzazione di parametri raccolti dal raccoglitore di metadati Ganglia.
hadoop-client	2.7.3-amzn-2	Client di riga di comando Hadoop, ad esempio "hdfs", "hadoop" o "yarn".
hadoop-hdfs-datanode	2.7.3-amzn-2	Servizio a livello di nodo HDFS per lo storage di blocchi.
hadoop-hdfs-library	2.7.3-amzn-2	Libreria e client di riga di comando HDFS
hadoop-hdfs-namenode	2.7.3-amzn-2	Servizio HDFS per tenere traccia dei nomi di file e delle posizioni dei blocchi.
hadoop-httpfs-server	2.7.3-amzn-2	Endpoint HTTP per le operazioni HDFS.
hadoop-kms-server	2.7.3-amzn-2	Server di gestione delle chiavi di crittografia basato sull'API KeyProvider di Hadoop.
hadoop-mapred	2.7.3-amzn-2	Librerie del motore di esecuzione MapReduce per l'esecuzione di un'applicazione MapReduce.
hadoop-yarn-nodemanager	2.7.3-amzn-2	Servizio YARN per la gestione di container su un singolo nodo.
hadoop-yarn-resourcemanager	2.7.3-amzn-2	Servizio YARN per l'allocazione e la gestione delle risorse di cluster e delle applicazioni distribuite.
hadoop-yarn-timeline-server	2.7.3-amzn-2	Servizio per il recupero di informazioni correnti e della cronologia per applicazioni YARN.
hbase-hmaster	1.2.2	Servizio per un cluster HBase responsabile del coordinamento delle regioni e dell'esecuzione di comandi amministrativi.
hbase-region-server	1.2.2	Servizio per servire una o più regioni HBase.
hbase-client	1.2.2	Client di riga di comando HBase.
hbase-rest-server	1.2.2	Servizio che fornisce un endpoint RESTful HTTP per HBase.
hbase-thrift-server	1.2.2	Servizio che fornisce un endpoint Thrift a HBase.
hcatalog-client	1.0.0-amzn-9	Client a riga di comando "hcat" per la manipolazione del server hcatalog.
hcatalog-server	1.0.0-amzn-9	Servizio che fornisce HCatalog, un livello di gestione di tabelle e storage per le applicazioni distribuite.
hcatalog-webhcat-server	1.0.0-amzn-9	Endpoint HTTP che fornisce un'interfaccia REST a HCatalog.
hive-client	1.0.0-amzn-9	Client a riga di comando Hive.
hive-metastore-server	1.0.0-amzn-9	Servizio per l'accesso al metastore Hive, un repository semantico per lo storage di metadati per SQL sulle operazioni Hadoop.
hive-server	1.0.0-amzn-9	Servizio per l'accettazione di query Hive come richieste Web.
hue-server	3.7.1-amzn-7	Applicazione Web per l'analisi di dati mediante le applicazioni dell'ecosistema Hadoop
mahout-client	0.12.2	Librerie per machine learning.
mysql-server	5.5.54+	Server di database MySQL.
oozie-client	4.2.0	Client a riga di comando Oozie.
oozie-server	4.2.0	Servizio per l'accettazione delle richieste di flusso di lavoro Oozie.
phoenix-library	4.7.0-HBase-1.2	Le librerie Phoenix per server e client
phoenix-query-server	4.7.0-HBase-1.2	Un server leggero che fornisce accesso JDBC nonché buffer di protocollo e accesso in formato JSON all'API Avatica
presto-coordinator	0.157.1	Servizio per l'accettazione di query e la gestione dell'esecuzione di query di componenti presto-worker.
presto-worker	0.157.1	Servizio per l'esecuzione di parti di una query.
pig-client	0.14.0-amzn-0	Client a riga di comando Pig.
spark-client	1.6.3	Client a riga di comando Spark.
spark-history-server	1.6.3	Interfaccia utente Web per la visualizzazione di eventi registrati per il ciclo di vita di un'applicazione Spark completata.
spark-on-yarn	1.6.3	Motore di esecuzione in memoria per YARN.
spark-yarn-slave	1.6.3	Librerie Apache Spark necessarie per gli slave YARN.
sqoop-client	1.4.6	Client a riga di comando Apache Sqoop.
tez-on-yarn	0.8.4	L'applicazione e le librerie tez YARN.
webserver	2.4.25+	Server Apache HTTP.
zeppelin-server	0.6.1	Notebook basato sul Web che consente l'analisi di dati interattiva.
zookeeper-server	3.4.9	Servizio centralizzato per la manutenzione delle informazioni di configurazione, i servizi di denominazione, la sincronizzazione distribuita e l'erogazione di servizi di gruppo.
zookeeper-client	3.4.9	Client a riga di comando ZooKeeper.

Classificazioni di configurazione

Le classificazioni di configurazione consentono di personalizzare le applicazioni. Esse corrispondono spesso a un file XML di configurazione per l'applicazione, ad esempio hive-site.xml. Per ulteriori informazioni, consulta Configurazione delle applicazioni.

Classificazioni emr-4.9.6
Classificazioni	Descrizione
capacity-scheduler	Modifica i valori nel file capacity-scheduler.xml di Hadoop.
core-site	Modifica i valori nel file core-site.xml di Hadoop.
emrfs-site	Modifica le impostazioni EMRFS.
hadoop-env	Modifica i valori nell'ambiente Hadoop per tutti i componenti Hadoop.
hadoop-log4j	Modifica i valori nel file log4j.properties di Hadoop.
hadoop-ssl-server	Modifica la configurazione server ssl hadoop
hadoop-ssl-client	Modifica la configurazione client ssl hadoop
hbase-env	Modifica i valori nell'ambiente HBase.
hbase-log4j	Modifica i valori nel file hbase-log4j.properties di HBase.
hbase-metrics	Modifica i valori nel file hadoop-metrics2-hbaase.properties di HBase.
hbase-policy	Modifica i valori nel file hbase-policy.xml di HBase.
hbase-site	Modifica i valori nel file hbase-site.xml di HBase.
hdfs-encryption-zones	Configura le zone di crittografia HDFS.
hdfs-site	Modifica i valori nel file hdfs-site.xml di HDFS.
hcatalog-env	Modifica i valori nell'ambiente di HCatalog.
hcatalog-server-jndi	Modifica i valori nel file jndi.properties di HCatalog.
hcatalog-server-proto-hive-site	Modifica i valori nel file proto-hive-site.xml di HCatalog.
hcatalog-webhcat-env	Modifica i valori nell'ambiente di WebHCat HCatalog.
hcatalog-webhcat-log4j	Modifica i valori nel file log4j.properties di WebHCat HCatalog.
hcatalog-webhcat-site	Modifica i valori nel file webhcat-site.xml file di HCatalog WebHCat.
hive-env	Modifica i valori nell'ambiente Hive.
hive-exec-log4j	Modifica i valori nel file hive-exec-log4j.properties di Hive.
hive-log4j	Modifica i valori nel file hive-log4j.properties di Hive.
hive-site	Modifica i valori nel file hive-site.xml di Hive
hiveserver2-site	Modifica i valori nel file hiveserver2-site.xml di Hive Server2
hue-ini	Modifica i valori nel file ini di Hue
httpfs-env	Modifica i valori nell'ambiente HTTPFS.
httpfs-site	Modifica i valori nel file httpfs-site.xml di Hadoop.
hadoop-kms-acls	Modifica i valori nel file kms-acls.xml di Hadoop.
hadoop-kms-env	Modifica i valori nell'ambiente Hadoop KMS.
hadoop-kms-log4j	Modifica i valori nel file kms-log4j.properties di Hadoop.
hadoop-kms-site	Modifica i valori nel file kms-site.xml di Hadoop.
mapred-env	Modifica i valori nell'ambiente MapReduce dell'applicazione MapReduce.
mapred-site	Modifica i valori nel file mapred-site.xml dell'applicazione MapReduce.
oozie-env	Modifica i valori nell'ambiente di Oozie.
oozie-log4j	Modifica i valori nel file oozie-log4j.properties di Oozie.
oozie-site	Modifica i valori nel file oozie-site.xml di Oozie.
phoenix-hbase-metrics	Modifica i valori nel file hadoop-metrics2-hbase.properties di Phoenix.
phoenix-hbase-site	Modifica i valori nel file hbase-site.xml di Phoenix.
phoenix-log4j	Modifica i valori nel file log4j.properties di Phoenix.
phoenix-metrics	Modifica i valori nel file hadoop-metrics2-phoenix.properties di Phoenix.
pig-properties	Modifica i valori nel file pig.properties di Pig.
pig-log4j	Modifica i valori nel file log4j.properties di Pig.
presto-log	Modifica i valori nel file log.properties di Presto.
presto-config	Modifica i valori nel file config.properties di Presto.
presto-connector-blackhole	Modifica i valori nel file blackhole.properties di Presto.
presto-connector-cassandra	Modifica i valori nel file cassandra.properties di Presto.
presto-connector-hive	Modifica i valori nel file hive.properties di Presto.
presto-connector-jmx	Modifica i valori nel file jmx.properties di Presto.
presto-connector-kafka	Modifica i valori nel file kafka.properties di Presto.
presto-connector-localfile	Modifica i valori nel file localfile.properties di Presto.
presto-connector-mongodb	Modifica i valori nel file mongodb.properties di Presto.
presto-connector-mysql	Modifica i valori nel file mysql.properties di Presto.
presto-connector-postgresql	Modifica i valori nel file postgresql.properties di Presto.
presto-connector-raptor	Modifica i valori nel file raptor.properties di Presto.
presto-connector-redis	Modifica i valori nel file redis.properties di Presto.
presto-connector-tpch	Modifica i valori nel file tpch.properties di Presto.
spark	Impostazioni Amazon EMR per Apache Spark.
spark-defaults	Modifica i valori nel file spark-defaults.conf di Spark.
spark-env	Modifica i valori nell'ambiente Spark.
spark-log4j	Modifica i valori nel file log4j.properties di Spark.
spark-metrics	Modifica i valori nel file metrics.properties di Spark.
sqoop-env	Modifica i valori nell'ambiente di Sqoop.
sqoop-oraoop-site	Modifica i valori nel file oraoop-site.xml di Sqoop OraOop.
sqoop-site	Modifica i valori nel file sqoop-site.xml di Sqoop.
tez-site	Modifica i valori nel file tez-site.xml file di Tez.
yarn-env	Modifica i valori nell'ambiente YARN.
yarn-site	Modifica i valori nel file yarn-site.xml di YARN.
zeppelin-env	Modifica i valori nell'ambiente Zeppelin.
zookeeper-config	Modifica i valori nel file zoo.cfg di ZooKeeper.
zookeeper-log4j	Modifica i valori nel file log4j.properties di ZooKeeper.