Visualizzazione della registrazione continua dei processi AWS Glue

Puoi visualizzare i log in tempo reale utilizzando la console AWS Glue o la console Amazon CloudWatch.

Per visualizzare i log in tempo reale tramite il pannello di controllo della console AWS Glue

1. Accedi alla AWS Management Console, quindi apri la console AWS Glue all'indirizzo https://console.aws.amazon.com/glue/.

2. Nel riquadro di navigazione scegliere Jobs (Processi).

3. Aggiungere o avviare un processo esistente. Scegliere Action (Operazione), Run job (Esegui processo).

   Quando avvii l'esecuzione di un processo, puoi accedere a una pagina che contiene informazioni sul processo in esecuzione:

   • La scheda Logs (Log) mostra i precedenti log dell'applicazione aggregati.

   • La scheda Continuous logging (Registrazione continua) mostra una barra di avanzamento in tempo reale quando il processo è in esecuzione con glueContext inizializzato.

   • La scheda Continuous logging (Registrazione continua) contiene inoltre Driver logs (Log driver), che acquisisce log di driver Apache Spark in tempo reale e log di applicazioni dallo script registrato tramite il logger di applicazione AWS Glue quando il processo è in esecuzione.

4. Per processi precedenti, è anche possibile visualizzare i log in tempo reale nella vista Job History (Cronologia processi) scegliendo Logs (Log). Questa operazione porta alla console CloudWatch che mostra tutti i flussi di log di driver Spark, executor e barra di avanzamento l'esecuzione di quel processo.

Per visualizzare i log in tempo reale tramite il pannello di controllo della console CloudWatch

1. Aprire la console CloudWatch all'indirizzo https://console.aws.amazon.com/cloudwatch/.

2. Nel riquadro di navigazione selezionare Log.

3. Scegliere il gruppo di log /aws-glue/jobs/logs-v2/.

4. Nella casella Filter (Filtro), incollare l'ID dell'esecuzione del processo.

   È possibile visualizzare i log di driver, i log di executor e la barra di avanzamento (se si utilizza Standard filter (Filtro standard)).