Kirim pekerjaan ke sebuah klaster - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Kirim pekerjaan ke sebuah klaster

Bagian ini menjelaskan metode yang dapat Anda gunakan untuk mengirimkan karya ke klaster EMR Amazon. Untuk mengirimkan pekerjaan, Anda dapat menambahkan langkah-langkah, atau Anda dapat secara interaktif mengirimkan pekerjaan Hadoop ke node utama.

Pertimbangkan aturan perilaku langkah berikut saat Anda mengirimkan langkah ke klaster:

  • ID langkah dapat berisi hingga 256 karakter.

  • Anda dapat memiliki hingga 256 langkah PENDING dan RUNNING dalam sebuah cluster.

  • Bahkan jika Anda memiliki 256 langkah aktif yang berjalan di cluster, Anda dapat secara interaktif mengirimkan pekerjaan ke node utama. Anda dapat mengirimkan jumlah langkah yang tidak terbatas selama usia klaster yang berjalan lama, tetapi hanya 256 langkah dapat BERJALAN atau TERTUNDA pada satu waktu tertentu.

  • Dengan Amazon EMR versi 4.8.0 dan yang lebih baru, kecuali versi 5.0.0, Anda dapat membatalkan langkah-langkah yang tertunda. Untuk informasi selengkapnya, lihat Membatalkan langkah.

  • Dengan Amazon EMR versi 5.28.0 dan yang lebih baru, Anda dapat membatalkan langkah-langkah tertunda dan berjalan. Anda juga dapat memilih untuk menjalankan beberapa langkah secara paralel untuk meningkatkan pemanfaatan klaster dan menghemat biaya. Untuk informasi selengkapnya, lihat Pertimbangan untuk menjalankan beberapa langkah secara paralel.

catatan

Untuk kinerja terbaik, kami menyarankan Anda menyimpan tindakan bootstrap kustom, skrip, dan file lain yang ingin Anda gunakan dengan Amazon EMR di bucket Amazon S3 yang sama dengan cluster Anda. Wilayah AWS