Aggiungere passaggi a un cluster con la Amazon EMR Management Console

Utilizza le procedure seguenti per aggiungere fasi a un cluster utilizzando la AWS Management Console. Per informazioni dettagliate su come inviare i passaggi per specifiche applicazioni Big Data, consulta le seguenti sezioni della Amazon EMR Release Guide:

• Invia un JAR passaggio personalizzato

• Invio di una fase di streaming Hadoop

• Invio di una fase Spark

• Invio di una fase Pig

• Esecuzione di un comando o di uno script come fase

• Passaggio di valori in fasi per l'esecuzione di script Hive

Aggiungere fasi durante la creazione del cluster

Da AWS Management Console, puoi aggiungere passaggi quando crei un cluster.

Console

Per aggiungere passaggi quando si crea un cluster con la console

1. Accedi a e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr. AWS Management Console

2. EC2Nel riquadro di navigazione a sinistra, scegli Clusters, quindi scegli Crea cluster. EMR

3. In Steps (Fasi), scegli Add step (Aggiungi fase). Inserisci i valori appropriati nei campi della finestra di dialogo Add step (Aggiungi fase). Per informazioni sulla formattazione degli argomenti delle fasi, consulta Aggiungere argomenti di fase. Le opzioni variano a seconda del tipo di fase. Per aggiungere la fase e chiudere la finestra di dialogo, scegli Aggiungi fase.

4. Scegli qualsiasi altra opzione applicabile al cluster.

5. Per avviare il cluster, scegli Create cluster (Crea cluster).

Aggiungere fasi a un cluster in esecuzione

Con AWS Management Console, puoi aggiungere passaggi a un cluster con l'opzione di terminazione automatica disattivata.

Console

Per aggiungere passaggi a un cluster in esecuzione con la console

1. Accedi a e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr. AWS Management Console

2. EC2Nel riquadro di navigazione a sinistra, scegli Cluster e seleziona il cluster che desideri aggiornare. EMR

3. Nella scheda Steps (Fasi) della pagina dei dettagli del cluster, scegli Add step (Aggiungi fase). Per clonare una fase esistente, scegli il menu a discesa Actions (Operazioni) e seleziona Clone step (Clona fase).

4. Inserisci i valori appropriati nei campi della finestra di dialogo Add step (Aggiungi fase). Le opzioni variano a seconda del tipo di fase. Per aggiungere la fase e uscire dalla finestra di dialogo, scegli Add step (Aggiungi fase).

Modificare il livello di concorrenza delle fasi in un cluster in esecuzione

Con AWS Management Console, puoi modificare il livello di concomitanza dei passaggi in un cluster in esecuzione.

Nota

Puoi eseguire più passaggi solo in parallelo con Amazon EMR versione 5.28.0 e successive.

Console

Per modificare la concomitanza dei passaggi in un cluster in esecuzione con la console

1. Accedi a e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr. AWS Management Console

2. EC2Nel riquadro di navigazione a sinistra, scegli Cluster e seleziona il cluster che desideri aggiornare. EMR Il cluster deve essere in esecuzione per modificare l'attributo di simultaneità.

3. Nella scheda Steps (Fasi) della pagina dei dettagli del cluster, cerca la sezione Attributes (Attributi). Seleziona Edit (Modifica) per modificare la simultaneità. Inserisci un valore compreso tra 1 e 256.

Aggiungere argomenti di fase

Quando usi AWS Management Console per aggiungere un passaggio al cluster, puoi specificare gli argomenti per quel passaggio nel campo Argomenti. È necessario separare gli argomenti con spazi bianchi e circondare gli argomenti di stringa costituiti da caratteri e spazio bianco con virgolette.

Esempio : Argomenti corretti

Gli argomenti di esempio seguenti sono formattati correttamente per l' AWS Management Console argomento stringa finale racchiuso tra virgolette.

bash -c "aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ."

Puoi inoltre inserire ogni argomento su una riga separata per la leggibilità come mostrato nell'esempio seguente.

bash 
-c 
"aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ."

Esempio : Argomenti errati

I seguenti argomenti di esempio sono formattati in modo improprio per la AWS Management Console. Notate che l'argomento finale della stringa, aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ., contiene spazi bianchi e non è circondato da virgolette.

bash -c aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh .