Metrik Hadoop dan Spark di Ganglia - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Metrik Hadoop dan Spark di Ganglia

Ganglia melaporkan metrik Hadoop untuk setiap instans. Berbagai jenis metrik diawali dengan kategori: sistem file terdistribusi (dfs.*), mesin virtual Java (jvm.*), MapReduce (mapred.*), dan panggilan prosedur jarak jauh (rpc.*).

Metrik Ganglia berbasis YARN seperti Spark dan Hadoop tidak tersedia untuk versi rilis EMR 4.4.0 dan 4.5.0. Gunakan versi yang lebih baru untuk menggunakan metrik ini.

Metrik Ganglia untuk Spark umumnya memiliki awalan untuk ID aplikasi YARN dan Spark DagScheduler. Jadi prefiks mengikuti formulir ini:

  • DagScheduler.*

  • aplikasi_xxxxxxxx_xxxx.driver.*

  • aplikasi_xxxxxxxx_xxxx.executor.*