Memantau peristiwa EMR Amazon dengan CloudWatch

Amazon EMR melacak peristiwa dan menyimpan informasi tentangnya hingga tujuh hari di konsol EMR Amazon. Amazon EMR merekam peristiwa ketika ada perubahan dalam status cluster, grup instans, armada instans, kebijakan penskalaan otomatis, atau langkah. Peristiwa menangkap tanggal dan waktu peristiwa terjadi, detail tentang elemen yang terpengaruh, dan titik data penting lainnya.

Tabel berikut mencantumkan peristiwa EMR Amazon, bersama dengan perubahan status atau status yang ditunjukkan peristiwa, tingkat keparahan peristiwa, jenis peristiwa, kode peristiwa, dan pesan peristiwa. Amazon EMR mewakili peristiwa sebagai objek JSON dan secara otomatis mengirimkannya ke aliran acara. Objek JSON penting ketika Anda mengatur aturan untuk pemrosesan acara menggunakan CloudWatch Acara karena aturan berusaha untuk mencocokkan pola dalam objek JSON. Untuk informasi selengkapnya, lihat Peristiwa dan pola acara serta peristiwa EMR Amazon di Panduan Pengguna CloudWatch Acara Amazon.

catatan

Untuk memastikan bahwa kami memberi Anda informasi yang paling relevan, kami terus menyempurnakan pesan kesalahan kami. Oleh karena itu, sebaiknya Anda tidak mengurai teks dari pesan untuk memulai tindakan selanjutnya dalam alur kerja Anda.

Acara awal cluster

Status atau perubahan status	Kepelikan	Jenis peristiwa	Kode acara	Pesan
CREATING	WARN	Penyediaan armada instans EMR Amazon	Penyediaan EC2 - Kapasitas Instans Tidak Cukup	Kami tidak dapat membuat klaster EMR Amazon Anda untuk Armada Instans Amazon InstanceFleetID EC2 memiliki kapasitas Spot yang tidak mencukupi ClusterId (ClusterName) untuk jenis Instans dan kapasitas Sesuai Permintaan yang tidak mencukupi untuk [Instancetype1, Instancetype2] jenis Instans di Availability Zone. [Instancetype3, Instancetype4] [AvailabilityZone1, AvaliabilityZone2] Lihat dokumentasi di sini untuk informasi lebih lanjut tentang cara menanggapi acara ini.
CREATING	WARN	Penyediaan grup instans EMR Amazon	Penyediaan EC2 - Kapasitas Instans Tidak Cukup	Kami tidak dapat membuat klaster EMR Amazon Anda untuk Grup Instans Amazon InstancegroupID EC2 memiliki kapasitas yang [Spot or On-Demand] tidak mencukupi ClusterId (ClusterName) untuk Instancetype jenis Instans di Availability Zone. AvailabilityZone Lihat dokumentasi di sini untuk informasi lebih lanjut tentang cara menanggapi acara ini.
STARTING	INFO	Perubahan status cluster EMR	tidak ada	Cluster Amazon EMR ClusterId (ClusterName) diminta Time dan sedang dibuat.
STARTING	INFO	Perubahan status cluster EMR	tidak ada	catatan Hanya berlaku untuk cluster dengan konfigurasi armada instans dan beberapa Availability Zone yang dipilih dalam Amazon EC2. Cluster EMR Amazon ClusterId (ClusterName) sedang dibuat di zone (AvailabilityZoneID), yang dipilih dari opsi Availability Zone yang ditentukan.
STARTING	INFO	Perubahan status cluster EMR	tidak ada	Cluster Amazon EMR ClusterId (ClusterName) mulai menjalankan langkah-langkah di. Time
WAITING	INFO	Perubahan status cluster EMR	tidak ada	Cluster Amazon EMR ClusterId (ClusterName) dibuat di Time dan siap digunakan. - atau - Cluster Amazon EMR ClusterId (ClusterName) selesai menjalankan semua langkah yang tertunda di. Time catatan Sebuah cluster di WAITING negara bagian mungkin masih memproses pekerjaan.

catatan

Peristiwa dengan kode peristiwa muncul EC2 provisioning - Insufficient Instance Capacity secara berkala saat klaster EMR Anda mengalami kesalahan kapasitas yang tidak mencukupi dari Amazon EC2 untuk armada instans atau grup instans Anda selama operasi pembuatan atau pengubahan ukuran klaster. Untuk informasi tentang cara menanggapi peristiwa ini, lihatMenanggapi peristiwa kapasitas instans yang tidak mencukupi pada klaster EMR Amazon.

Peristiwa penghentian klaster

Status atau perubahan status	Kepelikan	Jenis peristiwa	Kode acara	Pesan
TERMINATED	Tingkat kepelikan tergantung pada alasan perubahan status, seperti yang ditunjukkan pada hal berikut: CRITICAL jika klaster diakhiri dengan salah satu alasan perubahan status berikut: INTERNAL_ERROR, VALIDATION_ERROR, INSTANCE_FAILURE, BOOTSTRAP_FAILURE, atau STEP_FAILURE. INFO jika klaster diakhiri dengan salah satu alasan perubahan status berikut: USER_REQUEST atau ALL_STEPS_COMPLETED.	Perubahan status cluster EMR	tidak ada	Amazon EMR Cluster ClusterId (ClusterName) telah dihentikan pada Time dengan alasan. StateChangeReason:Code
TERMINATED_WITH_ERRORS	CRITICAL	Perubahan status cluster EMR	tidak ada	Amazon EMR Cluster ClusterId (ClusterName) telah diakhiri dengan kesalahan di Time dengan alasan. StateChangeReason:Code

Instance peristiwa perubahan negara armada

catatan

Konfigurasi armada instance hanya tersedia di Amazon EMR rilis 4.8.0 dan yang lebih baru, tidak termasuk 5.0.0 dan 5.0.3.

Status atau perubahan status	Kepelikan	Jenis peristiwa	Kode acara	Pesan
Dari PROVISIONING ke WAITING	INFO		tidak ada	Penyediaan misalnya armada di InstanceFleetID klaster EMR Amazon selesai. ClusterId (ClusterName) Penyediaan dimulai pada Time dan memakan Num waktu beberapa menit. Armada instans sekarang memiliki kapasitas On-Demand Num dan kapasitas Spot. Num Kapasitas Target On-Demand adalahNum, dan kapasitas Spot target adalahNum.
Dari WAITING ke RESIZING	INFO		tidak ada	Pengubahan ukuran armada misalnya InstanceFleetID di ClusterId (ClusterName) cluster EMR Amazon dimulai pada. Time Armada instans mengubah ukuran dari kapasitas On-Demand Num ke targetNum, dan dari kapasitas Spot Num ke target. Num
Dari RESIZING ke WAITING	INFO		tidak ada	Operasi pengubahan ukuran untuk armada misalnya InstanceFleetID di ClusterId (ClusterName) cluster EMR Amazon selesai. Pengubahan ukuran dimulai pada Time dan memakan waktu Num beberapa menit. Armada instans sekarang memiliki kapasitas On-Demand Num dan kapasitas Spot. Num Kapasitas Target On-Demand adalah Num dan kapasitas Spot target adalahNum.
Dari RESIZING ke WAITING	INFO		tidak ada	Operasi pengubahan ukuran misalnya armada InstanceFleetID di ClusterId (ClusterName) cluster EMR Amazon telah mencapai batas waktu dan berhenti. Pengubahan ukuran dimulai pada Time dan berhenti setelah Num beberapa menit. Armada instans sekarang memiliki kapasitas On-Demand Num dan kapasitas Spot. Num Kapasitas Target On-Demand adalah Num dan kapasitas Spot target adalahNum.
SUSPENDED	ERROR		tidak ada	Armada instans InstanceFleetID di cluster EMR Amazon ClusterId (ClusterName) ditangkap karena Time alasan berikut:. ReasonDesc
RESIZING	WARNING		tidak ada	Operasi pengubahan ukuran untuk armada misalnya InstanceFleetID di ClusterId (ClusterName) cluster EMR Amazon macet karena alasan berikut:. ReasonDesc
WAITING atau Running	INFO		tidak ada	Operasi pengubahan ukuran misalnya armada InstanceFleetID di ClusterId (ClusterName) klaster EMR Amazon tidak dapat diselesaikan sementara Amazon EMR menambahkan kapasitas Spot di zona ketersediaan. AvailabilityZone Kami telah membatalkan permintaan Anda untuk menyediakan kapasitas Spot tambahan. Untuk tindakan yang disarankan, periksa Praktik terbaik misalnya dan fleksibilitas Availability Zone dan coba lagi.
WAITING atau Running	INFO		tidak ada	Operasi pengubahan ukuran untuk armada misalnya InstanceFleetID di ClusterId (ClusterName) cluster EMR Amazon dimulai Entity oleh at. Time

Acara mengubah ukuran armada instance

Jenis peristiwa	Kepelikan	Kode acara	Pesan
Pengubahan ukuran armada instans EMR Amazon	ERROR	Batas Waktu Penyediaan Spot	Operasi Resize untuk Instance Fleet InstanceFleetID di Amazon EMR ClusterId (ClusterName) cluster tidak dapat diselesaikan saat memperoleh kapasitas Spot di AZ. AvailabilityZone Kami sekarang telah membatalkan permintaan Anda dan berhenti mencoba menyediakan kapasitas Spot tambahan dan Armada Instance telah menyediakan kapasitas Spot sebesar. num Kapasitas Spot Target adalahnum. Untuk informasi lebih lanjut dan tindakan yang disarankan, silakan periksa halaman dokumentasi di sini dan coba lagi.
Pengubahan ukuran armada instans EMR Amazon	ERROR	Batas Waktu Penyediaan Sesuai Permintaan	Operasi Resize untuk Instance Fleet InstanceFleetID di Amazon EMR ClusterId (ClusterName) cluster tidak dapat diselesaikan saat memperoleh kapasitas On-Demand di AZ. AvailabilityZone Kami sekarang telah membatalkan permintaan Anda dan berhenti mencoba menyediakan kapasitas On-Demand tambahan dan Armada Instance telah menyediakan kapasitas On-Demand sebesar. num Kapasitas Target On-Demand adalahnum. Untuk informasi lebih lanjut dan tindakan yang disarankan, silakan periksa halaman dokumentasi di sini dan coba lagi.
Pengubahan ukuran armada instans EMR Amazon	WARNING	Penyediaan EC2 - Kapasitas Instans Tidak Cukup	Kami tidak dapat menyelesaikan operasi pengubahan ukuran untuk Armada Instance InstanceFleetID di ClusterId (ClusterName) klaster EMR karena Amazon EC2 memiliki kapasitas Spot yang tidak mencukupi untuk jenis Instans dan kapasitas Sesuai Permintaan yang tidak mencukupi untuk [Instancetype1, Instancetype2] tipe Instans di Availability Zone. [Instancetype3, Instancetype4] [AvailabilityZone1] Sejauh ini, armada instans telah menyediakan kapasitas On-Demand num dan target kapasitas On-Demand adalah. num Kapasitas Spot yang disediakan adalah num dan kapasitas Spot target adalah. num Lihat dokumentasi di sini untuk informasi lebih lanjut tentang cara menanggapi acara ini.
Pengubahan ukuran armada instans EMR Amazon	WARNING	Batas Waktu Penyediaan Spot - Mengubah Ukuran Terus	Kami masih menyediakan kapasitas Spot untuk operasi pengubahan ukuran Armada Instance yang dimulai pada time misalnya ID armada di cluster EMR InstanceFleetID Amazon untuk di AZ. ClusterId (ClusterName) [Instancetype1, Instancetype2] AvailabilityZone Untuk operasi pengubahan ukuran sebelumnya yang dimulai padatime, periode batas waktu berakhir, sehingga Amazon EMR menghentikan penyediaan kapasitas Spot setelah menambahkan num instans yang diminta ke armada instans Anda. num Untuk informasi lebih lanjut, silakan periksa halaman dokumentasi di sini.
Pengubahan ukuran armada instans EMR Amazon	WARNING	Batas Waktu Penyediaan Sesuai Permintaan - Mengubah Ukuran Terus	Kami masih menyediakan kapasitas Sesuai Permintaan untuk operasi pengubahan ukuran Armada Instance yang dimulai pada misalnya ID armada di time klaster EMR InstanceFleetID Amazon untuk di AZ. ClusterId (ClusterName) [Instancetype1, Instancetype2] AvailabilityZone Untuk operasi pengubahan ukuran sebelumnya yang dimulai padatime, periode batas waktu berakhir, sehingga Amazon EMR berhenti menyediakan kapasitas Sesuai Permintaan setelah menambahkan num instans yang diminta ke armada instans Anda. num Untuk informasi lebih lanjut, silakan periksa halaman dokumentasi di sini.

catatan

Peristiwa batas waktu penyediaan dipancarkan saat Amazon EMR menghentikan penyediaan kapasitas Spot atau On-Demand untuk armada setelah batas waktu berakhir. Untuk informasi tentang cara menanggapi peristiwa ini, lihatMenanggapi peristiwa batas waktu tunggu armada instans cluster EMR Amazon.

Peristiwa grup instans

Jenis peristiwa	Kepelikan	Kode acara	Pesan
Dari RESIZING ke Running	INFO	tidak ada	Operasi pengubahan ukuran untuk grup instans InstanceGroupID di ClusterId (ClusterName) klaster EMR Amazon selesai. Sekarang memiliki hitungan instanceNum. Pengubahan ukuran dimulai pada Time dan membutuhkan waktu Num beberapa menit untuk menyelesaikannya.
Dari RUNNING ke RESIZING	INFO	tidak ada	Pengubahan ukuran untuk grup instans InstanceGroupID di ClusterId (ClusterName) klaster EMR Amazon dimulai pada. Time Ini mengubah ukuran dari hitungan instance Num keNum.
SUSPENDED	ERROR	tidak ada	Grup instans InstanceGroupID di cluster EMR Amazon ClusterId (ClusterName) ditangkap karena Time alasan berikut:. ReasonDesc
RESIZING	WARNING	tidak ada	Operasi pengubahan ukuran untuk grup instans InstanceGroupID di ClusterId (ClusterName) klaster EMR Amazon macet karena alasan berikut:. ReasonDesc
Ubah ukuran grup instans EMR Amazon	WARNING	Penyediaan EC2 - Kapasitas Instans Tidak Cukup	Kami tidak dapat menyelesaikan operasi pengubahan ukuran yang dimulai pada Grup Instance di ClusterId (ClusterName) klaster EMR time karena Amazon EC2 Spot/On Demand tidak memiliki kapasitas yang cukup untuk jenis Instans InstanceGroupID [Instancetype] di Availability Zone. [AvailabilityZone1] Sejauh ini, grup instance memiliki jumlah instance yang berjalan num dan jumlah instance yang diminta adalahnum. Lihat dokumentasi di sini untuk informasi lebih lanjut tentang cara menanggapi acara ini.
Dari RUNNING ke RESIZING	INFO	tidak ada	Pengubahan ukuran untuk grup instans InstanceGroupID di ClusterId (ClusterName) klaster EMR Amazon dimulai Entity oleh at. Time

catatan

Dengan Amazon EMR versi 5.21.0 dan yang lebih baru, Anda dapat mengganti konfigurasi klaster dan menentukan klasifikasi konfigurasi tambahan untuk setiap grup instans dalam klaster berjalan. Anda melakukannya dengan menggunakan konsol EMR Amazon, AWS Command Line Interface (AWS CLI), atau SDK AWS . Untuk informasi lebih lanjut, lihat Menyediakan Konfigurasi untuk Grup Instans dalam Klaster Berjalan.

Tabel berikut mencantumkan peristiwa Amazon EMR, untuk operasi konfigurasi ulang, bersama dengan status atau perubahan status yang ditunjukkan oleh peristiwa tersebut, kepelikan peristiwa, dan pesan peristiwa.

Status atau perubahan status	Kepelikan	Pesan
RUNNING	INFO	Konfigurasi ulang untuk grup instans InstanceGroupID di ClusterId (ClusterName) kluster EMR Amazon dimulai oleh pengguna di. Time Versi konfigurasi yang diminta adalahNum.
Dari RECONFIGURING ke Running	INFO	Operasi konfigurasi ulang untuk grup instans InstanceGroupID di ClusterId (ClusterName) kluster EMR Amazon selesai. Konfigurasi ulang dimulai pada Time dan membutuhkan waktu Num beberapa menit untuk menyelesaikannya. Versi konfigurasi saat ini adalahNum.
Dari RUNNING ke RECONFIGURING in	INFO	Konfigurasi ulang untuk grup instans InstanceGroupID di ClusterId (ClusterName) kluster EMR Amazon dimulai pada. Time Ini mengkonfigurasi dari nomor versi Num ke nomor Num versi.
RESIZING	INFO	Mengkonfigurasi ulang operasi ke versi konfigurasi Num untuk grup instans InstanceGroupID di kluster ClusterId (ClusterName) EMR Amazon diblokir sementara Time karena grup instans masuk. State
RECONFIGURING	INFO	Mengubah ukuran operasi menuju jumlah instans Num untuk grup instans InstanceGroupID di ClusterId (ClusterName) klaster EMR Amazon diblokir Time sementara karena grup instans masuk. State
RECONFIGURING	WARNING	Operasi konfigurasi ulang untuk grup instans InstanceGroupID di ClusterId (ClusterName) kluster EMR Amazon gagal Time dan Num membutuhkan waktu beberapa menit untuk gagal. Versi konfigurasi yang gagal adalahNum.
RECONFIGURING	INFO	Konfigurasi kembali ke nomor versi sukses sebelumnya Num untuk grup instans InstanceGroupID di cluster EMR Amazon di. ClusterId (ClusterName) Time Versi konfigurasi baru adalahNum.
Dari RECONFIGURING ke Running	INFO	Konfigurasi berhasil dikembalikan ke versi sukses sebelumnya Num untuk grup instans InstanceGroupID di cluster EMR Amazon di. ClusterId (ClusterName) Time Versi konfigurasi baru adalahNum.
Dari RECONFIGURING ke SUSPENDED	CRITICAL	Gagal mengembalikan ke versi sukses sebelumnya Num untuk grup Instans InstanceGroupID di klaster EMR ClusterId (ClusterName) Amazon di. Time

Peristiwa kebijakan penskalaan otomatis

Status atau perubahan status	Kepelikan	Pesan
PENDING	INFO	Kebijakan Auto Scaling ditambahkan ke grup instans di klaster EMR InstanceGroupID Amazon di. ClusterId (ClusterName) Time Kebijakan ini lampiran tertunda. - atau - Kebijakan Auto Scaling untuk grup instans di klaster ClusterId (ClusterName) EMR InstanceGroupID Amazon telah diperbarui di. Time Kebijakan ini lampiran tertunda.
ATTACHED	INFO	Kebijakan Auto Scaling untuk grup instans di klaster ClusterId (ClusterName) EMR InstanceGroupID Amazon dilampirkan pada. Time
DETACHED	INFO	Kebijakan Auto Scaling untuk grup instans di kluster ClusterId (ClusterName) EMR InstanceGroupID Amazon terlepas di. Time
FAILED	ERROR	Kebijakan Auto Scaling untuk grup instans di klaster EMR InstanceGroupID Amazon tidak ClusterId (ClusterName) dapat dilampirkan dan gagal di. Time - atau - Kebijakan Auto Scaling untuk grup instans di klaster EMR InstanceGroupID Amazon tidak ClusterId (ClusterName) dapat dilepas dan gagal. Time

Peristiwa langkah

Status atau perubahan status	Kepelikan	Pesan
PENDING	INFO	Langkah StepID (StepName) telah ditambahkan ke Amazon EMR cluster ClusterId (ClusterName) di Time dan sedang menunggu eksekusi.
CANCEL_PENDING	WARN	Langkah StepID (StepName) di Amazon EMR cluster dibatalkan pada Time dan ClusterId (ClusterName) sedang menunggu pembatalan.
RUNNING	INFO	Langkah StepID (StepName) di Amazon EMR cluster ClusterId (ClusterName) mulai berjalan di. Time
COMPLETED	INFO	Langkah StepID (StepName) di Amazon EMR cluster ClusterId (ClusterName) menyelesaikan eksekusi di. Time Langkah mulai berjalan Time dan membutuhkan waktu Num beberapa menit untuk menyelesaikannya.
CANCELLED	WARN	Permintaan pembatalan telah berhasil untuk langkah klaster di klaster EMR StepID (StepName) Amazon ClusterId (ClusterName) diTime, dan langkahnya sekarang dibatalkan.
FAILED	ERROR	Langkah StepID (StepName) di Amazon EMR cluster ClusterId (ClusterName) gagal di. Time

Peristiwa penggantian simpul yang tidak sehat

Jenis peristiwa	Kepelikan	Kode acara	Pesan
Amazon EMR penggantian simpul yang tidak sehat	INFO	Node inti yang tidak sehat terdeteksi	Amazon EMR telah mengidentifikasi bahwa instance inti [instanceID (InstanceName)] InstanceGroup/Fleet dalam cluster EMR Amazon adalah. clusterID (ClusterName) UNHEALTHY Amazon EMR akan mencoba memulihkan atau mengganti instans dengan anggun. UNHEALTHY
Amazon EMR penggantian simpul yang tidak sehat	INFO	Node inti tidak sehat - penggantian dinonaktifkan	Amazon EMR telah mengidentifikasi bahwa instance inti [instanceID (InstanceName)] InstanceGroup/Fleet dalam cluster EMR Amazon adalah. {clusterID} (ClusterName) UNHEALTHY Aktifkan penggantian node inti yang tidak sehat dan anggun di klaster Anda untuk memungkinkan Amazon EMR mengganti UNHEALTHY instans dengan baik jika instans tidak dapat dipulihkan.
Amazon EMR penggantian simpul yang tidak sehat	WARN	Node inti yang tidak sehat tidak diganti	Amazon EMR tidak dapat mengganti instans UNHEALTHY inti Anda [instanceID (InstanceName)] InstanceGroup/Fleet di klaster clusterID (ClusterName) EMR Amazon karena alasan. catatan Alasan mengapa Amazon EMR tidak dapat menggantikan node inti Anda berbeda tergantung pada skenario Anda. Misalnya, salah satu alasan mengapa Amazon EMR tidak dapat menghapus node adalah karena cluster tidak akan memiliki node inti yang tersisa.
Amazon EMR penggantian simpul yang tidak sehat	INFO	Node inti yang tidak sehat pulih	Amazon EMR telah memulihkan instans UNHEALTHY inti Anda [instanceID (InstanceName)] di InstanceGroup/Fleet klaster EMR Amazon clusterID (ClusterName)

Untuk informasi selengkapnya tentang penggantian node yang tidak sehat, lihat Mengganti node yang tidak sehat.

Melihat acara dengan konsol EMR Amazon

Untuk setiap klaster, Anda dapat melihat daftar sederhana dari peristiwa di panel detail, yang berisi daftar peristiwa dalam urutan kejadian. Anda juga dapat melihat semua peristiwa untuk semua klaster dalam suatu wilayah dalam urutan kejadian.

Jika Anda tidak ingin pengguna melihat semua peristiwa klaster untuk suatu wilayah, tambahkan pernyataan yang menolak izin ("Effect": "Deny") untuk tindakan elasticmapreduce:ViewEventsFromAllClustersInConsole ke kebijakan yang melekat pada pengguna tersebut.

catatan

Kami telah mendesain ulang konsol EMR Amazon agar lebih mudah digunakan. Lihat Konsol Amazon EMR untuk mempelajari tentang perbedaan antara pengalaman konsol lama dan baru.

New console

Untuk melihat peristiwa untuk semua cluster di Wilayah dengan konsol baru

1. Masuk ke AWS Management Console, dan buka konsol EMR Amazon di https://console.aws.amazon.com/emr.

2. Di bawah EMR pada EC2 di panel navigasi kiri, pilih Acara.

Untuk melihat peristiwa untuk klaster tertentu dengan konsol baru

1. Masuk ke AWS Management Console, dan buka konsol EMR Amazon di https://console.aws.amazon.com/emr.

2. Di bawah EMR pada EC2 di panel navigasi kiri, pilih Clusters, lalu pilih cluster.

3. Untuk melihat semua acara Anda, pilih tab Acara di halaman detail cluster.

Old console

Untuk melihat peristiwa untuk semua cluster di Wilayah dengan konsol lama

1. Buka konsol Amazon EMR di https://console.aws.amazon.com/elasticmapreduce/.

2. Pilih Peristiwa.

Untuk melihat peristiwa untuk cluster tertentu dengan konsol lama

1. Buka konsol Amazon EMR di https://console.aws.amazon.com/elasticmapreduce/.

2. Pilih Daftar Klaster, pilih klaster, lalu pilih Lihat detail.

3. Pilih Peristiwa di panel detail klaster.