Visualizzazione della registrazione continua dei processi AWS Glue

Puoi visualizzare i log in tempo reale utilizzando la AWS Glue console o la CloudWatch console Amazon.

Per visualizzare i log in tempo reale utilizzando la dashboard della console AWS Glue

1. Accedi a AWS Management Console e apri la AWS Glue console all'indirizzo https://console.aws.amazon.com/glue/.

2. Nel riquadro di navigazione scegliere Jobs (Processi).

3. Aggiungere o avviare un processo esistente. Scegliere Action (Operazione), Run job (Esegui processo).

   Quando avvii l'esecuzione di un processo, puoi accedere a una pagina che contiene informazioni sul processo in esecuzione:

   • La scheda Logs (Log) mostra i precedenti log dell'applicazione aggregati.

   • La scheda Continuous logging (Registrazione continua) mostra una barra di avanzamento in tempo reale quando il processo è in esecuzione con glueContext inizializzato.

   • La scheda Registrazione continua contiene anche i registri dei driver, che acquisiscono i log dei driver Apache Spark in tempo reale, e i registri delle applicazioni dallo script registrato utilizzando il logger dell'applicazione quando il AWS Glue lavoro è in esecuzione.

4. Per processi precedenti, è anche possibile visualizzare i log in tempo reale nella vista Job History (Cronologia processi) scegliendo Logs (Log). Questa azione ti porta alla CloudWatch console che mostra tutti i flussi di log del driver Spark, dell'executor e della barra di avanzamento relativi all'esecuzione del job.

Per visualizzare i log in tempo reale utilizzando la dashboard della console CloudWatch

1. Apri la CloudWatch console all'indirizzo https://console.aws.amazon.com/cloudwatch/.

2. Nel riquadro di navigazione selezionare Log.

3. Scegli il gruppo /aws- glue/jobs/error /log.

4. Nella casella Filter (Filtro), incollare l'ID dell'esecuzione del processo.

   È possibile visualizzare i log di driver, i log di executor e la barra di avanzamento (se si utilizza Standard filter (Filtro standard)).