Memecahkan masalah koneksi di AWS Glue

Saat crawler AWS Glue atau tugas menggunakan properti koneksi untuk mengakses penyimpanan data, Anda mungkin mengalami kesalahan saat mencoba connect. AWS Glue menggunakan alamat IP privat di subnet saat membuat antarmuka jaringan elastis di virtual private cloud (VPC) dan subnet yang ditentukan. Grup keamanan yang ditentukan dalam koneksi digunakan pada setiap antara muka jaringan elastis. Periksa untuk melihat apakah grup keamanan memungkinkan akses keluar dan apakah mengizinkan konektivitas ke klaster basis data.

Selain itu, Apache Spark membutuhkan konektivitas dua arah antara node driver dan executor. Salah satu grup keamanan perlu untuk mengizinkan masuknya aturan ingress pada semua port TCP. Anda dapat mencegahnya terbuka ke seluruh dunia dengan membatasi sumber grup keamanan itu sendiri dengan grup keamanan referensi mandiri.

Berikut adalah beberapa tindakan umum yang dapat dilakukan untuk memecahkan masalah pada koneksi:

• Periksa alamat port koneksi Anda.

• Periksa nama pengguna dan string kata sandi di koneksi atau rahasia Anda.

• Untuk menyimpan data JDBC, verifikasi apakah hal itu memungkinkan koneksi masuk.

• Verifikasi apakah penyimpanan data Anda dapat diakses dalam VPC Anda.

• Jika Anda menyimpan kredenal koneksi Anda menggunakanAWS Secrets Manager, pastikan bahwa peran IAM Anda AWS Glue memiliki izin untuk mengakses rahasia Anda. Untuk informasi selengkapnya, lihat Contoh: Izin untuk mengambil nilai rahasia di Panduan AWS Secrets Manager Pengguna. Bergantung pada pengaturan jaringan Anda, Anda mungkin juga perlu membuat titik akhir VPC untuk membuat koneksi pribadi antara VPC dan Secrets Manager. Untuk informasi selengkapnya, lihat Menggunakan titik AWS Secrets Manager akhir VPC.