Menggunakan integrasi Amazon Redshift untuk Apache Spark dengan Amazon EMR

Dengan Amazon EMR rilis 6.4.0 dan yang lebih baru, setiap gambar rilis menyertakan konektor antara Apache Spark dan Amazon Redshift. Dengan konektor ini, Anda dapat menggunakan Spark di Amazon EMR untuk memproses data yang disimpan di Amazon Redshift. Untuk Amazon EMR rilis 6.4.0 hingga 6.8.0, integrasi didasarkan pada konektor open-source. spark-redshift Untuk Amazon EMR rilis 6.9.0 dan yang lebih baru, integrasi Amazon Redshift untuk Apache Spark telah dimigrasikan dari versi komunitas ke integrasi asli.

Topik

• Meluncurkan aplikasi Spark menggunakan integrasi Amazon Redshift untuk Apache Spark
• Mengautentikasi dengan integrasi Amazon Redshift untuk Apache Spark
• Membaca dan menulis dari dan ke Amazon Redshift
• Pertimbangan dan batasan saat menggunakan konektor Spark