Membangun AWS Glue pekerjaan dengan sesi interaktif

Insinyur data dapat menulis AWS Glue pekerjaan lebih cepat dan lebih mudah daripada sebelum menggunakan sesi interaktif di AWS Glue.

Topik

• Ikhtisar AWS Glue sesi interaktif
• Memulai dengan AWS Glue sesi interaktif
• Melakukan konfigurasi AWS Glue sesi interaktif untuk Jupyter dan AWS Glue Studio buku catatan
• Memulai sesi interaktif AWS Glue untuk Ray (pratinjau)
• Mengubah skrip atau buku catatan menjadi pekerjaan AWS Glue
• Bekerja dengan operasi streaming dalam sesi AWS Glue interaktif
• Mengembangkan dan menguji AWS Glue skrip pekerjaan secara lokal
• Titik akhir pengembangan

Ikhtisar AWS Glue sesi interaktif

Dengan AWS Glue sesi interaktif, Anda dapat dengan cepat membangun, menguji, dan menjalankan persiapan data dan aplikasi analitik. Sesi interaktif menyediakan antarmuka terprogram dan visual untuk membangun dan menguji skrip ekstrak, transformasi, dan memuat (ETL) untuk persiapan data. Sesi interaktif menjalankan aplikasi analitik Apache Spark dan menyediakan akses sesuai permintaan ke lingkungan runtime Spark jarak jauh. AWS Glue mengelola Spark tanpa server secara transparan untuk sesi interaktif ini.

Sesi interaktif fleksibel, sehingga Anda membangun dan menguji aplikasi Anda dari lingkungan pilihan Anda. Anda dapat membuat dan bekerja dengan sesi interaktif melalui AWS Command Line Interface danAPI. Anda dapat menggunakan notebook yang kompatibel dengan Jupyter untuk menulis secara visual dan menguji skrip notebook Anda. Sesi interaktif menyediakan kernel Jupyter open-source yang terintegrasi hampir di mana saja yang dilakukan Jupyter, termasuk mengintegrasikan dengan IDEs seperti, IntelliJ PyCharm, dan VS Code. Ini memungkinkan Anda untuk membuat kode di lingkungan lokal Anda dan menjalankannya dengan mulus di backend sesi interaktif.

Dengan menggunakan sesi interaktifAPI, pelanggan dapat menjalankan aplikasi secara terprogram yang menggunakan analitik Apache Spark tanpa harus mengelola infrastruktur Spark. Anda dapat menjalankan satu atau lebih pernyataan Spark dalam satu sesi interaktif.

Oleh karena itu, sesi interaktif menyediakan cara yang lebih cepat, lebih murah, dan lebih fleksibel untuk membangun dan menjalankan persiapan data dan aplikasi analitik. Untuk mempelajari cara menggunakan sesi interaktif, lihat dokumentasi di bagian ini. Sihir didukung oleh AWS Glue

Batasan

• Bookmark Job tidak didukung dalam sesi interaktif.

• Membuat pekerjaan notebook menggunakan AWS Command Line Interface tidak didukung.

• AWS Glue Studio notebook tidak mendukung Scala.