Visualizzazione dei registri per i lavori AWS Glue
Puoi visualizzare i log in tempo reale utilizzando la console AWS Glue o la console Amazon CloudWatch.
Per visualizzare i log in tempo reale tramite il pannello di controllo della console AWS Glue
Accedi alla AWS Management Console, quindi apri la console AWS Glue all'indirizzo https://console.aws.amazon.com/glue/
. -
Nel riquadro di navigazione scegliere Jobs (Processi).
-
Aggiungere o avviare un processo esistente. Scegliere Action (Operazione), Run job (Esegui processo).
Quando avvii l'esecuzione di un processo, puoi accedere a una pagina che contiene informazioni sul processo in esecuzione:
-
La scheda Logs (Log) mostra i precedenti log dell'applicazione aggregati.
-
La scheda Log mostra una barra di avanzamento in tempo reale quando il processo è in esecuzione con
glueContextinizializzato. -
La scheda Log contiene inoltre Driver logs (Log driver), che acquisisce log di driver Apache Spark in tempo reale e log di applicazioni dallo script registrato tramite il logger di applicazione AWS Glue quando il processo è in esecuzione.
-
-
Per processi precedenti, è anche possibile visualizzare i log in tempo reale nella vista Job History (Cronologia processi) scegliendo Logs (Log). Questa operazione porta alla console CloudWatch che mostra tutti i flussi di log di driver Spark, executor e barra di avanzamento l'esecuzione di quel processo.
Per visualizzare i log in tempo reale tramite il pannello di controllo della console CloudWatch
-
Apri la console CloudWatch all'indirizzo https://console.aws.amazon.com/cloudwatch/
. -
Nel riquadro di navigazione selezionare Log.
-
Scegliere il gruppo di log /aws-glue/jobs/error/.
-
Nella casella Filter (Filtro), incollare l'ID dell'esecuzione del processo.
È possibile visualizzare i log di driver, i log di executor e la barra di avanzamento (se si utilizza Standard filter (Filtro standard)).