Pekerjaan untuk mengekspor data dari Amazon S3 menggunakan perangkat Snowball Edge - AWS Snowball Edge Panduan Pengembang

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pekerjaan untuk mengekspor data dari Amazon S3 menggunakan perangkat Snowball Edge

catatan

Tag dan metadata NOT saat ini didukung, dengan kata lain, semua tag dan metadata akan dihapus saat mengekspor objek dari ember S3.

Sumber data Anda untuk tugas ekspor adalah satu atau lebih bucket Amazon S3. Setelah data untuk bagian pekerjaan dipindahkan dari Amazon S3 ke AWS Snowball Edge perangkat, Anda dapat mengunduh laporan pekerjaan. Laporan ini akan memberitahu Anda untuk setiap objek yang menggagalkan transfer ke perangkat. Anda dapat menemukan informasi lebih lanjut dalam log keberhasilan dan kegagalan tugas Anda.

Anda dapat mengekspor sejumlah objek untuk setiap tugas ekspor, menggunakan perangkat sebanyak yang diperlukan untuk menyelesaikan transfer. Setiap AWS Snowball Edge perangkat untuk bagian pekerjaan ekspor dikirim satu demi satu, dengan perangkat berikutnya dikirimkan kepada Anda setelah bagian pekerjaan sebelumnya memasuki AWS status Dalam perjalanan ke.

Saat Anda menyalin objek ke tujuan data lokal dari perangkat menggunakan adaptor Amazon S3 atau NFS titik pemasangan, objek tersebut akan disimpan sebagai file. Jika Anda menyalin objek ke lokasi yang sudah menyimpan file, file yang ada dengan nama yang sama akan ditimpa. Jenis tugas ekspor juga mampu melakukan fungsi penyimpanan lokal dan komputasi. Fungsionalitas ini menggunakan antarmuka file atau adaptor Amazon S3 untuk membaca dan menulis data, dan memicu fungsi Lambda berdasarkan tindakan API objek Amazon S3 yang berjalan secara lokal di PUT perangkat. AWS Snowball Edge

Saat AWS menerima perangkat yang dikembalikan, kami menghapusnya sepenuhnya, mengikuti standar NIST 800-88.

penting

Data yang ingin Anda ekspor ke perangkat Snow harus di Amazon S3. Data apa pun Amazon S3 Glacier yang Anda rencanakan untuk diekspor ke perangkat Snow harus dicairkan atau dipindahkan ke kelas penyimpanan S3 sebelum dapat diekspor. Lakukan ini sebelum membuat pekerjaan ekspor Salju.

Jangan mengubah, memperbarui, atau menghapus objek Amazon S3 yang diekspor sampai Anda dapat memverifikasi bahwa semua konten untuk seluruh tugas telah disalin ke tujuan data on-premise Anda.

Saat Anda membuat tugas ekspor di, Anda dapat mengekspor seluruh bucket Amazon S3 atau rentang kunci objek tertentu.

Menggunakan kunci objek Amazon S3 saat mengekspor data ke perangkat Snowball Edge

Saat membuat pekerjaan ekspor di Konsol Manajemen AWS Snow Familyatau dengan manajemen pekerjaanAPI, Anda dapat mengekspor seluruh bucket Amazon S3 atau rentang kunci objek tertentu. Nama kunci objek secara unik mengidentifikasi objek dalam bucket. Jika Anda mengekspor rentang, Anda menentukan panjang rentang dengan menyediakan awal rentang inklusif, akhir rentang inklusif, atau keduanya.

Rentang adalah UTF -8 biner diurutkan. UTF-8 data biner diurutkan dengan cara berikut:

  • Angka 0–9 muncul huruf besar dan huruf kecil dalam karakter Bahasa Inggris.

  • Karakter bahasa Inggris huruf besar muncul sebelum semua karakter bahasa Inggris huruf kecil.

  • Karakter Bahasa Inggris huruf kecil berada di urutan terakhir saat diurutkan berdasarkan huruf besar dan angka karakter Bahasa Inggris.

  • Karakter khusus diurutkan di antara set karakter lainnya.

Untuk informasi lebih lanjut tentang spesifikasi UTF -8, lihat UTF-8 di Wikipedia.

Contoh menggunakan kunci objek Amazon S3 saat mengekspor data ke perangkat Snowball Edge

Asumsikan bahwa Anda memiliki ember yang berisi objek dan awalan berikut, diurutkan dalam urutan biner UTF -8:

  • 01

  • Aardvark

  • Aardwolf

  • Aasvogel/apple

  • AASVOGEL/Panah/Object1

  • AASVOGEL/Panah/Object2

  • Aasvogel/banana

  • AASVOGEL/Banker/Object1

  • AASVOGEL/Banker/Object2

  • Aasvogel/cherry

  • Banana

  • Car

Awal rentang yang ditentukan Akhir rentang yang ditentukan Objek dalam rentang yang akan diekspor
(tidak ada) (tidak ada) Semua objek di bucket Anda
(tidak ada) Aasvogel

01

Aardvark

Aardwolf

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/cherry

(tidak ada) Aasvogel/banana

01

Aardvark

Aardwolf

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

Aasvogel (tidak ada)

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/cherry

Banana

Car

Aardwolf (tidak ada)

Aardwolf

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/cherry

Banana

Car

Aar (tidak ada)

Aardvark

Aardwolf

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/cherry

Banana

Car

car (tidak ada)

Tidak ada objek yang diekspor, dan Anda mendapatkan pesan kesalahan saat Anda mencoba membuat tugas. Perhatikan bahwa mobil diurutkan di bawah Mobil menurut UTF -8 nilai biner.

Aar Aarrr

Aardvark

Aardwolf

Aasvogel/Panah

AASVOGEL/Arrox

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/apple Aasvogel/banana

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

Aasvogel/apple AASVOGEL/Bankir

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/apple Aasvogel/cherry

Aasvogel/apple

AASVOGEL/Panah/Object1

AASVOGEL/Panah/Object2

Aasvogel/banana

AASVOGEL/Banker/Object1

AASVOGEL/Banker/Object2

Aasvogel/cherry

Asumsikan Anda memiliki tiga ember ini dan ingin menyalin semua objek dari folder2.

  • s3://bucket/folder1/

  • s3://bucket/folder2/

  • s3://bucket/folder3/

Awal rentang yang ditentukan Akhir rentang yang ditentukan Objek dalam rentang yang akan diekspor
folder2/ folder2/ Semua objek dalam folder bucket 2.

Praktik terbaik untuk pekerjaan yang mengekspor data dari Amazon S3 ke perangkat Snowball Edge

  • Pastikan data ada di Amazon S3, batch file kecil sebelum memesan pekerjaan

  • Pastikan rentang kunci ditentukan dalam definisi pekerjaan ekspor jika Anda memiliki jutaan objek di bucket Anda

  • Perbarui tombol objek untuk menghapus garis miring dalam nama sebagai objek dengan garis miring di belakang namanya (/atau\) tidak ditransfer ke Snowball Edge

  • Untuk bucket S3, batasan panjang objek adalah 255 karakter.

  • Untuk bucket S3 yang diaktifkan versi, hanya versi objek saat ini yang diekspor.

  • Hapus spidol tidak diekspor.