Accès aux interfaces utilisateur web de Spark

Vous pouvez afficher les interfaces utilisateur Web Spark en suivant les procédures de création d'un tunnel SSH ou de création d'un proxy dans la section intitulée Connexion au cluster dans le Guide de gestion Amazon EMR, puis en naviguant vers YARN ResourceManager pour votre cluster. Choisissez le lien sous Tracking UI (UI de suivi) pour votre application. Si votre application est en cours d'exécution, vous voyez ApplicationMaster (ApplicationPrincipale). Vous êtes dirigé vers l'interface utilisateur web du principal de l'application Spark sur le port 20888, quel que soit l'endroit où se trouve le pilote. Le pilote peut être situé sur le nœud primaire du cluster si vous l'exécutez en mode client YARN. Si vous exécutez une application en mode cluster YARN, le pilote se trouve dans ApplicationMaster pour l'application sur le cluster. Si votre application est terminée, vous voyez History (Historique), qui vous dirige vers le port d'interface utilisateur Spark HistoryServer numéro 18080 du nœud primaire du cluster EMR. Ceci s'applique aux applications déjà terminées. Vous pouvez également accéder à l'interface utilisateur de Spark HistoryServer directement à l'adresse http://master-public-dns-name:18080/.

Avec Amazon EMR version 5.25.0 et ultérieure, vous pouvez accéder à l'interface utilisateur du serveur d'historique Spark à partir de la console sans configurer un proxy web via une connexion SSH. Pour plus d'informations, consultez Afficher les interfaces utilisateur d'application persistante.