Mengkonfigurasi SageMaker Debugger untuk menyimpan tensor

Tensor adalah kumpulan data parameter yang diperbarui dari pass mundur dan maju dari setiap iterasi pelatihan. SageMaker Debugger mengumpulkan tensor keluaran untuk menganalisis keadaan pekerjaan pelatihan. SageMaker Operasi debugger CollectionConfigdan DebuggerHookConfigAPI menyediakan metode untuk mengelompokkan tensor ke dalam koleksi dan menyimpannya ke bucket S3 target. Topik berikut menunjukkan cara menggunakan operasi CollectionConfig dan DebuggerHookConfig API, diikuti dengan contoh cara menggunakan kait Debugger untuk menyimpan, mengakses, dan memvisualisasikan tensor keluaran.

Saat membuat estimator SageMaker AI, aktifkan SageMaker Debugger dengan menentukan parameter. debugger_hook_config Topik berikut mencakup contoh cara mengatur operasi debugger_hook_config menggunakan CollectionConfig dan DebuggerHookConfig API untuk menarik tensor keluar dari pekerjaan pelatihan Anda dan menyimpannya.

catatan

Setelah dikonfigurasi dan diaktifkan dengan benar, SageMaker Debugger menyimpan tensor keluaran dalam bucket S3 default, kecuali ditentukan lain. Format URI bucket S3 default adalahs3://amzn-s3-demo-bucket-sagemaker-<region>-<12digit_account_id>/<training-job-name>/debug-output/.

Topik

• Konfigurasikan koleksi tensor menggunakan API CollectionConfig

• Konfigurasikan DebuggerHookConfig API untuk menyimpan tensor

• Contoh notebook dan contoh kode untuk mengonfigurasi kait Debugger