Aggiungere passaggi a un cluster con la Amazon EMR Management Console

Utilizza le seguenti procedure per aggiungere passaggi a un cluster con AWS Management Console. Per informazioni dettagliate su come inviare i passaggi per specifiche applicazioni Big Data, consulta le seguenti sezioni della Amazon EMR Release Guide:

• Invia un JAR passaggio personalizzato

• Invio di una fase di streaming Hadoop

• Invio di una fase Spark

• Invio di una fase Pig

• Esecuzione di un comando o di uno script come fase

• Passaggio di valori in fasi per l'esecuzione di script Hive

Aggiungere fasi durante la creazione del cluster

Dal AWS Management Console, puoi aggiungere passaggi quando crei un cluster.

Console

Per aggiungere passaggi quando si crea un cluster con la console

1. Accedi a AWS Management Console e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr.

2. EC2Nel riquadro di navigazione a sinistra, scegli Cluster, quindi scegli Crea cluster. EMR

3. In Steps (Fasi), scegli Add step (Aggiungi fase). Inserisci i valori appropriati nei campi della finestra di dialogo Add step (Aggiungi fase). Per informazioni sulla formattazione degli argomenti delle fasi, consulta Aggiungere argomenti di fase. Le opzioni variano a seconda del tipo di fase. Per aggiungere la fase e chiudere la finestra di dialogo, scegli Aggiungi fase.

4. Scegli qualsiasi altra opzione applicabile al cluster.

5. Per avviare il cluster, scegli Create cluster (Crea cluster).

Aggiungere fasi a un cluster in esecuzione

Con il plugin AWS Management Console, è possibile aggiungere passaggi a un cluster con l'opzione di terminazione automatica disattivata.

Console

Per aggiungere passaggi a un cluster in esecuzione con la console

1. Accedi a AWS Management Console e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr.

2. EC2Nel riquadro di navigazione a sinistra, scegli Cluster e seleziona il cluster che desideri aggiornare. EMR

3. Nella scheda Steps (Fasi) della pagina dei dettagli del cluster, scegli Add step (Aggiungi fase). Per clonare una fase esistente, scegli il menu a discesa Actions (Operazioni) e seleziona Clone step (Clona fase).

4. Inserisci i valori appropriati nei campi della finestra di dialogo Add step (Aggiungi fase). Le opzioni variano a seconda del tipo di fase. Per aggiungere la fase e uscire dalla finestra di dialogo, scegli Add step (Aggiungi fase).

Modificare il livello di concorrenza delle fasi in un cluster in esecuzione

Con il plugin AWS Management Console, puoi modificare il livello di concorrenza dei passaggi in un cluster in esecuzione.

Nota

Puoi eseguire più passaggi solo in parallelo con Amazon EMR versione 5.28.0 e successive.

Console

Per modificare la concomitanza dei passaggi in un cluster in esecuzione con la console

1. Accedi a AWS Management Console e apri la EMR console Amazon all'indirizzo https://console.aws.amazon.com/emr.

2. EC2Nel riquadro di navigazione a sinistra, scegli Cluster e seleziona il cluster che desideri aggiornare. EMR Il cluster deve essere in esecuzione per modificare l'attributo di simultaneità.

3. Nella scheda Steps (Fasi) della pagina dei dettagli del cluster, cerca la sezione Attributes (Attributi). Seleziona Edit (Modifica) per modificare la simultaneità. Inserisci un valore compreso tra 1 e 256.

Aggiungere argomenti di fase

Quando usi il AWS Management Console per aggiungere un passo al cluster, è possibile specificare gli argomenti per quel passo nel campo Argomenti. È necessario separare gli argomenti con spazi bianchi e circondare gli argomenti di stringa costituiti da caratteri e spazio bianco con virgolette.

Esempio : Argomenti corretti

Gli argomenti di esempio seguenti sono formattati correttamente per AWS Management Console, racchiudendo tra virgolette l'argomento finale della stringa.

bash -c "aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ."

Puoi inoltre inserire ogni argomento su una riga separata per la leggibilità come mostrato nell'esempio seguente.

bash 
-c 
"aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ."

Esempio : Argomenti errati

Gli argomenti di esempio seguenti non sono formattati correttamente per AWS Management Console. Notate che l'argomento finale della stringa,aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh ., contiene spazi bianchi e non è racchiuso tra virgolette.

bash -c aws s3 cp s3://DOC-EXAMPLE-BUCKET/my-script.sh .