Akses UI web Spark

Anda dapat melihat UI web Spark dengan mengikuti prosedur untuk membuat terowongan SSH atau membuat proxy di bagian yang disebut Connect to the cluster di Amazon EMR Management Guide dan kemudian menavigasi ke YARN untuk cluster Anda. ResourceManager Pilih tautan di bawah Melacak UI untuk aplikasi Anda. Jika aplikasi Anda berjalan, Anda lihat ApplicationMaster. Ini akan membawa Anda ke UI web master aplikasi di port 20888 dimanapun driver berada. Driver mungkin terletak di node utama cluster jika Anda menjalankan dalam mode klien YARN. Jika Anda menjalankan aplikasi dalam mode cluster YARN, driver terletak di ApplicationMaster untuk aplikasi di cluster. Jika aplikasi Anda telah selesai, Anda melihat History, yang membawa Anda ke nomor port Spark HistoryServer UI di 18080 dari simpul utama klaster EMR. Ini untuk aplikasi yang sudah selesai. Anda juga dapat menavigasi ke HistoryServer UI Spark langsung di http: master-public-dns-name//:18080/.

Dengan Amazon EMR rilis 5.25.0 dan yang lebih baru, Anda dapat mengakses UI server riwayat Spark dari konsol tanpa menyiapkan proxy web melalui koneksi SSH. Untuk informasi lebih lanjut, lihat Melihat antarmuka pengguna aplikasi persisten.