Accedi alle interfacce utente Web di Spark - Amazon EMR

Accedi alle interfacce utente Web di Spark

È possibile visualizzare le interfacce utente Web di Spark seguendo le procedure per creare un tunnel SSH o un proxy incluse nella sezione Connessione al cluster nella Guida alla gestione di Amazon EMR e quindi accedendo al servizio YARN ResourceManager per il cluster. Scegliere il collegamento per l'applicazione in Tracking UI (Monitoraggio IU). Se l'applicazione è in esecuzione, viene visualizzato ApplicationMaster. Ciò consente di accedere all'interfaccia utente Web dell'applicazione master sulla porta 20888 indipendentemente dalla posizione del driver. Il driver può trovarsi nel nodo primario del cluster se l'esecuzione avviene in modalità client YARN. Se un'applicazione è eseguita in modalità cluster YARN, il driver si trova in ApplicationMaster per l'applicazione nel cluster. Se l'applicazione non è in esecuzione, viene visualizzato History (Cronologia), che consente di accedere all'interfaccia utente Spark HistoryServer sulla porta 18080 del nodo primario del cluster EMR. Ciò vale per le applicazioni già completate. È anche possibile accedere direttamente all'interfaccia utente Spark HistoryServer all'indirizzo http://master-public-dns-name:18080/.

Con Amazon EMR rilascio 5.25.0 o successivi, puoi accedere all'interfaccia utente del server della cronologia Spark dalla console senza configurare un proxy Web tramite una connessione SSH. Per ulteriori informazioni, consulta Visualizzazione delle interfacce utente dell'applicazione persistente.