Console Amazon EMR - Amazon EMR

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Console Amazon EMR

La console offre un'interfaccia aggiornata che offre un modo intuitivo per gestire l'ambiente Amazon EMR e offre un comodo accesso alla documentazione, alle informazioni sui prodotti e ad altre risorse.

Funzionalità della console

La console Amazon EMR è disponibile al seguente URL:

La tabella seguente elenca lo stato dei principali componenti della console Amazon EMR.

Componente della console Amazon EMR Console

EMR Studio

Creazione e gestione dei cluster

Blocco dell'accesso pubblico

Monitora CloudWatch gli eventi Amazon

Configurazioni di sicurezza

Cluster virtuali (Amazon EMR su EKS)

Visualizza e gestisci le sottoreti Amazon Virtual Private Cloud 1

Notebook 2

1 Nella console, puoi visualizzare e gestire le sottoreti Amazon VPC nella sezione Rete quando crei un cluster.

2 Notebooks EMR sono disponibili come aree di lavoro EMR Studio nella console. Il pulsante Crea area di lavoro nella console consente di creare nuovi notebook. Per accedere ai Workspace o crearne di nuovi, gli utenti di Notebook EMR necessitano di ulteriori autorizzazioni per i ruoli IAM. Per ulteriori informazioni, consulta Amazon EMR Notebooks are Amazon EMR Studio Workspace nella console e nella console Amazon EMR.

Riepilogo delle differenze

Questa sezione descrive le funzionalità dell'esperienza della console Amazon EMR. Queste funzionalità rientrano nelle seguenti categorie:

Compatibilità dei cluster nella console

In alcuni casi, un cluster creato potrebbe non essere compatibile con la console. L'elenco seguente descrive i requisiti di compatibilità per la console Amazon EMR.

  • La console supporta i cluster creati nelle versioni 5.20.1 e successive di Amazon EMR.

  • Puoi clonare i cluster che utilizzano il ridimensionamento automatico nella console, ma puoi creare nuovi cluster solo se desideri ridimensionarli manualmente o utilizzare la scalabilità gestita.

Per creare e utilizzare i cluster della versione 5.20.1 e precedenti, puoi utilizzare () o l'SDK. AWS Command Line Interface AWS CLI AWS

Creazione di cluster

Funzionalità Console

Terminologia: tipi di nodi del cluster Amazon EMR

Primario (primary), core (core), attività (task)

Versioni supportate da Amazon EMR 1

Amazon EMR rilascio 5.20.1 e successivi

Avvio rapido di un cluster

Utilizzate il pulsante Crea cluster nel pannello Riepilogo. Il nome del cluster non può contenere i caratteri <, >, $, | o `(backtick).

Configurazione di un timeout di provisioning Spot

Definire un periodo di timeout per il provisioning delle istanze per ogni parco del cluster.

Ruoli di servizio e ruolo di profilo dell'istanza Amazon EC2

La console non crea ruoli predefiniti; devi creare ruoli con la console IAM o selezionare un ruolo IAM già creato

Visibilità del cluster

Dall'interno della console Amazon EMR non è possibile rendere visibile un cluster a tutti gli utenti; è la policy IAM a determinare l'accesso al cluster

Reti: configurazione di sottoreti private

Gli endpoint Amazon S3 e i gateway NAT devono essere configurati dalle rispettive console Amazon S3 e Amazon VPC

Visualizzazione coerente del file system EMR (EMRFS CV)

Con il rilascio di Amazon S3 Strong read-after-write Consistency il 1° dicembre 2020, non è necessario utilizzare EMRFS CV con i cluster EMR.

Debug

È possibile eseguire il debug dei processi utilizzando l'interfaccia utente dell'applicazione nella pagina dei dettagli del cluster

1 Non è possibile creare o modificare cluster utilizzando versioni precedenti ad Amazon EMR 5.20.1 nella console, ma tutti i cluster esistenti creati utilizzando versioni precedenti alla 5.20.1 continueranno a funzionare. Per creare e modificare cluster con versioni di Amazon EMR precedenti alla 5.20.1, utilizza l'API o la CLI. Puoi visualizzare tutti i cluster utilizzando la console, ma le console create prima della 5.20.1 potrebbero non essere compatibili con le nuove funzionalità.

Visualizzazione e ricerca di cluster

La tabella seguente illustra come utilizzare la console Amazon EMR per visualizzare, visualizzare e cercare cluster.

Nota

L'applicazione di un filtro dati all'elenco dei cluster interroga l'intero database. Tuttavia, quando si inserisce una stringa di testo nella casella di ricerca, la ricerca si applica solo ai risultati che l'elenco ha caricato su lato client.

Funzionalità Console

Visualizzazione dei dettagli del cluster

Puoi selezionare il Cluster ID (ID cluster) per visualizzare i dettagli esaustivi del cluster come opzioni di configurazione, interfacce utente persistenti delle applicazioni e log.

Ricerca di cluster

Utilizza un unico campo di ricerca per inserire query di ricerca di testo e per creare e applicare filtri di dati come "Status = Any active status" (Stato = Qualsiasi stato attivo).

Individuazione di cluster falliti

Per cercare i cluster con errori, applica il filtro Status (Stato) = Terminated with errors (Terminato con errori).

Visualizzazione o modifica dei dettagli del cluster

Funzionalità Console

Visualizzazione delle istanze presenti nei gruppi di istanze e nei parchi istanze, oltre alle opzioni di dimensionamento, provisioning, ridimensionamento e terminazione

Visualizza le opzioni e i dettagli delle istanze nella scheda Istanze. Visualizza le opzioni di terminazione nella scheda Proprietà.

Visualizzazione delle interfacce utente, dei log e delle configurazioni delle applicazioni

(Interfaccia utente Apache Spark, servizio di cronologia Spark, interfaccia utente Apache Tez, server della cronologia YARN)

Visualizza le configurazioni del cluster nella scheda Configurazioni. Avvia un'interfaccia utente di applicazione attiva e persistente per visualizzare i log di un'applicazione dalla scheda Applicazioni.

Esportazione di un cluster nella CLI

Opzione disponibile nei menu dei dettagli del cluster e di visualizzazione dell'elenco delle operazioni come "View command for cloning cluster" (Visualizza comando per la clonazione del cluster)

Differenze nell'utilizzo delle configurazioni di sicurezza

Funzionalità Console

Configurazioni di sicurezza della clonazione

Governance federata con Trino e Apache Ranger

Utilizzo di un ruolo di runtime per inviare il lavoro a un cluster1

Autorizzazione per l'accesso ai dati del file system EMR (EMRFS)

Punti di accesso Amazon S3

AWS Lake Formation controlli di accesso

Ruoli di runtime

1 Per trasmettere un ruolo durante l'invio delle fasi, il cluster deve utilizzare una configurazione di sicurezza collegata a una policy di autorizzazione IAM in modo che l'utente IAM possa trasmettere solo i ruoli approvati e i processi possano accedere alle risorse Amazon EMR. Per ulteriori informazioni, consulta Ruoli di runtime per le fasi di Amazon EMR.