Akses UIS web Spark - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Akses UIS web Spark

Anda dapat melihat UIS web Spark dengan mengikuti prosedur untuk membuat terowongan SSH atau membuat proxy di bagian yang disebut Connect ke kluster di Amazon EMR Management Guide dan kemudian menavigasi ke YARN ResourceManager untuk cluster Anda. Pilih tautan di bawah Melacak UI untuk aplikasi Anda. Jika aplikasi Anda berjalan, Anda lihat ApplicationMaster. Ini akan membawa Anda ke UI web master aplikasi di port 20888 dimanapun driver berada. Driver mungkin berlokasi di simpul utama kluster jika Anda berjalan dalam mode klien YARN. Jika Anda menjalankan aplikasi dalam mode kluster YARN, driver berlokasi di ApplicationMaster untuk aplikasi pada cluster. Jika aplikasi Anda telah selesai, Anda akan melihat Sejarah, yang akan membawa Anda ke nomor port Spark HistoryServer UI pada 18080 dari EMR cluster master node. Ini untuk aplikasi yang sudah selesai. Anda juga dapat menavigasi ke Spark HistoryServer UI langsung di http: //:18080/ master-public-dns-name.

Dengan Amazon EMR versi 5.25.0 atau yang lebih baru, Anda dapat mengakses Spark sejarah server UI dari konsol tanpa menyiapkan proxy web melalui koneksi SSH. Untuk informasi lebih lanjut, lihat Melihat antarmuka pengguna aplikasi persisten.