Amazon SageMaker Debugger

Model debug mengeluarkan tensor dari pekerjaan pelatihan pembelajaran mesin secara real time dan mendeteksi masalah non-konvergen menggunakan Amazon Debugger. SageMaker

Fitur Amazon SageMaker Debugger

Pekerjaan pelatihan pembelajaran mesin (ML) dapat memiliki masalah seperti overfitting, fungsi aktivasi jenuh, dan gradien menghilang, yang dapat membahayakan kinerja model.

SageMaker Debugger menyediakan alat untuk men-debug pekerjaan pelatihan dan menyelesaikan masalah tersebut untuk meningkatkan kinerja model Anda. Debugger juga menawarkan alat untuk mengirim peringatan ketika anomali pelatihan ditemukan, mengambil tindakan terhadap masalah, dan mengidentifikasi akar penyebabnya dengan memvisualisasikan metrik dan tensor yang dikumpulkan.

SageMaker Debugger mendukung ApacheMXNet,, PyTorch TensorFlow, dan kerangka kerja. XGBoost Untuk informasi selengkapnya tentang kerangka kerja dan versi yang tersedia yang didukung oleh SageMaker Debugger, lihat. Kerangka kerja dan algoritma yang didukung

Alur kerja Debugger tingkat tinggi adalah sebagai berikut:

1. Ubah skrip pelatihan Anda dengan sagemaker-debugger Python SDK jika diperlukan.

2. Konfigurasikan pekerjaan SageMaker pelatihan dengan SageMaker Debugger.

   • Konfigurasikan menggunakan SageMaker Estimator API (untuk SDK Python).

   • Konfigurasikan menggunakan SageMaker CreateTrainingJobpermintaan (untuk Boto3 atauCLI).

   • Konfigurasikan wadah pelatihan khusus dengan SageMaker Debugger.

3. Mulai pekerjaan pelatihan dan pantau masalah pelatihan secara real time.

   • Daftar aturan bawaan Debugger.

4. Dapatkan peringatan dan ambil tindakan segera terhadap masalah pelatihan.

   • Terima teks dan email dan hentikan pekerjaan pelatihan saat masalah pelatihan ditemukan menggunakanGunakan tindakan bawaan Debugger untuk aturan.

   • Siapkan tindakan Anda sendiri menggunakan Amazon CloudWatch Events dan AWS Lambda.

5. Jelajahi analisis mendalam tentang masalah pelatihan.

   • Untuk men-debug tensor keluaran model, lihat. Visualisasikan Tensor Output Debugger di TensorBoard

6. Perbaiki masalah, pertimbangkan saran yang diberikan oleh Debugger, dan ulangi langkah 1—5 hingga Anda mengoptimalkan model dan mencapai akurasi target.

Panduan pengembang SageMaker Debugger memandu Anda melalui topik-topik berikut.

Topik

• Kerangka kerja dan algoritma yang didukung
• Arsitektur Amazon SageMaker Debugger
• Tutorial debugger
• Pekerjaan pelatihan debugging menggunakan Amazon SageMaker Debugger
• Daftar aturan bawaan Debugger
• Membuat aturan kustom menggunakan pustaka klien Debugger
• Gunakan Debugger dengan wadah pelatihan khusus
• Konfigurasikan Debugger menggunakan SageMaker API
• Referensi Amazon SageMaker Debugger