Akses web Spark UIs - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Akses web Spark UIs

Anda dapat melihat web Spark UIs dengan mengikuti prosedur untuk membuat SSH terowongan atau membuat proxy di bagian yang disebut Connect to the cluster di Amazon EMR Management Guide dan kemudian menavigasi ke untuk klaster Anda. YARN ResourceManager Pilih tautan di bawah Melacak UI untuk aplikasi Anda. Jika aplikasi Anda berjalan, Anda lihat ApplicationMaster. Ini akan membawa Anda ke UI web master aplikasi di port 20888 dimanapun driver berada. Driver mungkin terletak di node utama cluster jika Anda menjalankan dalam mode YARN klien. Jika Anda menjalankan aplikasi dalam mode YARN cluster, driver terletak di ApplicationMaster untuk aplikasi di cluster. Jika aplikasi Anda telah selesai, Anda melihat History, yang membawa Anda ke nomor port Spark HistoryServer UI di 18080 dari node utama EMR cluster. Ini untuk aplikasi yang sudah selesai. Anda juga dapat menavigasi ke HistoryServer UI Spark langsung di http://master-public-dns-name:18080/.

Dengan Amazon EMR rilis 5.25.0 dan yang lebih baru, Anda dapat mengakses UI server riwayat Spark dari konsol tanpa menyiapkan proxy web melalui koneksi. SSH Untuk informasi lebih lanjut, lihat Melihat antarmuka pengguna aplikasi persisten.