Afficher les journaux des AWS Glue offres d'emploi

Vous pouvez consulter les journaux en temps réel à l'aide de la AWS Glue console ou de la CloudWatch console Amazon.

Pour consulter les journaux en temps réel à l'aide du tableau de bord de AWS Glue la console

1. Connectez-vous à la AWS Glue console AWS Management Console et ouvrez-la à l'adresse https://console.aws.amazon.com/glue/.

2. Dans le volet de navigation, sélectionnez Tâches.

3. Ajouter ou démarrer une tâche existante. Choisissez Action, Exécuter la tâche.

   Lorsque vous démarrez l'exécution d'une tâche, vous accédez à une page qui contient des informations sur la tâche en cours d'exécution :

   • L'onglet Journaux affiche les journaux des applications agrégés plus anciens.

   • L'onglet Logs affiche une barre de progression en temps réel lorsque le job est en cours d'exécution avec glueContext initialisé.

   • L'onglet Logs contient également les journaux des pilotes, qui capturent les journaux des pilotes Apache Spark en temps réel, et les journaux des applications à partir du script enregistré à l'aide de l'enregistreur d' AWS Glue applications lorsque le job est en cours d'exécution.

4. Pour les anciennes tâches, vous pouvez également afficher les journaux en temps réel sous la vue Job History (Historique des tâches) en choisissant Journaux. Cette action vous amène à la CloudWatch console qui affiche tous les flux de log du pilote Spark, de l'exécuteur et de la barre de progression relatifs à cette tâche exécutée.

Pour consulter les journaux en temps réel à l'aide du tableau de bord de CloudWatch la console

1. Ouvrez la CloudWatch console à l'adresse https://console.aws.amazon.com/cloudwatch/.

2. Dans le volet de navigation, sélectionnez Journaux.

3. Choisissez le groupe de journaux /aws-glue/jobs/error/.

4. Dans la zone Filtre, collez l'ID d'exécution de la tâche

   Vous pouvez afficher les journaux du pilote, les journaux du programme d'exécution et la barre de progression (si vous utilisez le Standard filter (Filtre standard)).