Buat SageMaker HyperPod cluster

Lihat petunjuk berikut tentang membuat SageMaker HyperPod cluster baru menggunakan UI SageMaker HyperPod konsol.

1. Buka konsol Amazon SageMaker AI di https://console.aws.amazon.com/sagemaker/.

2. Pilih HyperPod cluster di panel navigasi kiri.

3. Di SageMaker HyperPod landing page, pilih Create HyperPod cluster.

4. Dari menu drop-down Create HyperPod cluster, pilih Orchestrated by Amazon EKS.

5. Dari daftar klaster Amazon EKS, pilih cluster EKS yang ingin Anda konfigurasi HyperPod cluster baru.

   1. Jika Anda perlu membuat cluster EKS baru, pilih Create EKS cluster. Anda dapat membuatnya dari halaman daftar cluster EKS tanpa harus membuka konsol Amazon EKS.

      catatan

      Subnet VPC yang Anda pilih HyperPod harus bersifat pribadi.

   2. Setelah mengirimkan permintaan pembuatan klaster EKS baru, tunggu hingga kluster EKS menjadi Aktif.

   3. Instal bagan Helm seperti yang diinstruksikan dalam. Instal paket di kluster Amazon EKS menggunakan Helm

   4. Setelah pembuatan cluster EKS selesai, pilih Create HyperPod cluster dan kemudian Orchestrated by EKS lagi. Anda harus dapat menemukan dan memilih cluster EKS baru. Untuk melanjutkan, pilih Pilih.

6. Pada halaman Configure a new HyperPod cluster, atur informasi dasar untuk cluster seperti name, opsi untuk mengaktifkan fitur ketahanan HyperPod cluster, dan tag.

7. Untuk nama Cluster, tentukan nama untuk cluster baru.

8. Untuk ketahanan Cluster - pemulihan node, tentukan Automatic untuk mengaktifkan pemulihan node otomatis. SageMaker HyperPodmenggantikan atau me-reboot instance (node) ketika masalah ditemukan oleh agen pemantauan kesehatan.

9. Untuk Tag, tambahkan pasangan kunci dan nilai ke cluster baru dan kelola cluster sebagai AWS sumber daya. Untuk mempelajari lebih lanjut, lihat Menandai AWS sumber daya Anda.

10. Pada Langkah 2: Konfigurasikan grup instance, pilih Buat grup instance. Setiap grup instans dapat dikonfigurasi secara berbeda, dan Anda dapat membuat klaster heterogen yang terdiri dari beberapa grup instans dengan berbagai jenis instance. Di jendela pop-up Create an instance group configuration, isi informasi konfigurasi grup instance.

    Buat halaman pop-up grup instance, konfigurasikan grup instans baru mengikuti panduan UI.

    1. Untuk nama grup Instance, tentukan nama untuk grup instance.

    2. Untuk jenis instance Select, pilih instance untuk grup instance.

    3. Untuk Kuantitas, tentukan bilangan bulat yang tidak melebihi kuota instance untuk penggunaan klaster.

    4. Siapkan skrip konfigurasi siklus hidup dan unggah ke bucket Amazon S3, seperti. s3://amzn-s3-demo-bucket-sagemaker>/<lifecycle-script-directory>/src/

       Untuk memulai dengan cepat, unduh skrip sampel on_create.shdari GitHub repositori Pelatihan Terdistribusi AWS ome, dan unggah ke bucket S3. Skrip ini menyiapkan file logging yang /var/log/provision/provisioning.log diperlukan CloudWatch untuk mengumpulkan log dari kontainer Pod. Anda juga dapat menyertakan instruksi penyiapan tambahan, serangkaian skrip penyiapan, atau perintah yang akan dijalankan selama tahap penyediaan HyperPod klaster.

    5. Untuk URI bucket S3 untuk skrip siklus hidup, masukkan jalur Amazon S3 tempat skrip siklus hidup disimpan.

    6. Untuk jalur Direktori ke skrip titik masuk di jalur Amazon S3 dasar, masukkan nama file skrip siklus hidup di bawah jalur Amazon S3 ke file skrip siklus hidup. Jika Anda menggunakan skrip sampel yang disediakan, masukkanon_create.sh.

    7. Untuk peran IAM, pilih peran IAM yang telah Anda buat untuk SageMaker HyperPod sumber daya, mengikuti bagian tersebut. Peran IAM untuk SageMaker HyperPod

    8. Di bawah Konfigurasi lanjutan, Anda dapat mengatur konfigurasi opsional berikut.

       1. (Opsional) Untuk Thread per core, tentukan 1 untuk menonaktifkan multi-threading dan 2 untuk mengaktifkan multi-threading. Untuk mengetahui jenis instans mana yang mendukung multi-threading, lihat tabel referensi inti CPU dan utas per inti CPU per jenis instans di EC2 Panduan Pengguna Amazon.

       2. (Opsional) Untuk konfigurasi penyimpanan instance tambahan, tentukan bilangan bulat antara 1 dan 16384 untuk mengatur ukuran volume Elastic Block Store (EBS) tambahan dalam gigabyte (GB). Volume EBS dilampirkan ke setiap instance dari grup instance. Jalur pemasangan default untuk volume EBS tambahan adalah/opt/sagemaker. Setelah cluster berhasil dibuat, Anda dapat SSH ke instance cluster (node) dan memverifikasi apakah volume EBS dipasang dengan benar dengan menjalankan perintah. df -h Melampirkan volume EBS tambahan menyediakan penyimpanan yang stabil, off-instance, dan bertahan secara independen, seperti yang dijelaskan di bagian volume Amazon EBS di Panduan Pengguna Amazon Elastic Block Store.

11. Untuk pemeriksaan kesehatan mendalam, pilih pemeriksaan kesehatan lanjutan yang ingin Anda jalankan pada instans. Untuk mempelajari selengkapnya, lihat Pemeriksaan kesehatan yang mendalam.

12. Pada Langkah 3: Konfigurasi lanjutan, konfigurasikan pengaturan jaringan dalam cluster dan in-and-out cluster. Untuk orkestrasi cluster SageMaker HyperPod dengan Amazon EKS, VPC secara otomatis diatur ke yang dikonfigurasi dengan kluster EKS yang Anda pilih.

13. Pada Langkah 4: Tinjau dan buat, tinjau konfigurasi yang telah Anda tetapkan dari Langkah 1 hingga Langkah 3 dan selesaikan pengiriman permintaan pembuatan cluster.

14. Setelah status cluster berubahInService, Anda dapat mulai masuk ke node cluster. Untuk mengakses node cluster dan mulai menjalankan beban kerja ML, lihatPekerjaan di SageMaker HyperPod cluster.