Menentukan opsi konfigurasi untuk penyimpanan data Delta Lake - AWS Glue

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Menentukan opsi konfigurasi untuk penyimpanan data Delta Lake

Saat Anda mengonfigurasi crawler untuk penyimpanan data Delta Lake, Anda menentukan parameter konfigurasi ini:

Koneksi

Secara opsional pilih atau tambahkan koneksi Jaringan untuk digunakan dengan target Amazon S3 ini. Untuk informasi tentang koneksi, lihat Menghubungkan ke data.

Buat tabel untuk kueri

Pilih bagaimana Anda ingin membuat tabel Delta Lake:

  • Buat tabel Native: Izinkan integrasi dengan mesin kueri yang mendukung kueri log transaksi Delta secara langsung.

  • Buat tabel Symlink: Buat folder manifes symlink dengan file manifes yang dipartisi oleh kunci partisi, berdasarkan parameter konfigurasi yang ditentukan.

Aktifkan manifes tulis (hanya dapat dikonfigurasi yang telah Anda pilih untuk Membuat tabel Symlink untuk sumber Delta Lake

Pilih apakah akan mendeteksi metadata tabel atau perubahan skema di log transaksi Delta Lake; itu meregenerasi file manifes. Anda tidak boleh memilih opsi ini jika Anda mengonfigurasi pembaruan manifes otomatis dengan Delta LakeSET TBLPROPERTIES.

Sertakan jalur meja danau delta

Tentukan satu atau beberapa jalur Amazon S3 ke tabel Delta sebagai s3://bucket/prefix/object.

Menentukan perayapan penyimpanan data Delta Lake.