Creazione di un cluster SageMaker HyperPod

Consulta le seguenti istruzioni sulla creazione di un nuovo SageMaker HyperPod cluster utilizzando l'interfaccia utente della SageMaker HyperPod console.

1. Apri la console Amazon SageMaker AI all'indirizzo https://console.aws.amazon.com/sagemaker/.

2. Scegli HyperPod i cluster nel riquadro di navigazione a sinistra.

3. Nella pagina di SageMaker HyperPod destinazione, scegli Crea HyperPod cluster.

4. Dal menu a discesa di Crea HyperPod cluster, scegli Orchestrated by Amazon EKS.

5. Dall'elenco dei cluster Amazon EKS, scegli il cluster EKS con cui desideri configurare il nuovo HyperPod cluster.

   1. Se devi creare un nuovo cluster EKS, scegli Crea cluster EKS. Puoi crearlo dalla pagina dell'elenco dei cluster EKS senza dover aprire la console Amazon EKS.

      Nota

      La sottorete VPC scelta HyperPod deve essere privata.

   2. Dopo aver inviato una nuova richiesta di creazione di un cluster EKS, attendi che il cluster EKS diventi attivo.

   3. Installa il diagramma Helm come indicato in. Installa pacchetti sul cluster Amazon EKS utilizzando Helm

   4. Una volta completata la creazione del cluster EKS, scegli Crea HyperPod cluster e quindi di nuovo Orchestrated by EKS. Dovresti essere in grado di trovare e selezionare il nuovo cluster EKS. Per procedere, scegli Seleziona.

6. Nella pagina Configura un nuovo HyperPod cluster, imposta le informazioni di base per il cluster, come il nome, le opzioni per abilitare le funzionalità di resilienza del HyperPod cluster e i tag.

7. Per Nome cluster, specifica un nome per il nuovo cluster.

8. Per Resilienza del cluster: ripristino dei nodi, specificare Automatic di abilitare il ripristino automatico dei nodi. SageMaker HyperPodsostituisce o riavvia le istanze (nodi) quando l'agente di monitoraggio dello stato rileva problemi.

9. Per i tag, aggiungi coppie di chiavi e valori al nuovo cluster e gestisci il cluster come risorsa. AWS Per ulteriori informazioni, consulta Taggare le AWS risorse.

10. Nel passaggio 2: Configurazione dei gruppi di istanze, scegli Crea gruppo di istanze. Ogni gruppo di istanze può essere configurato in modo diverso ed è possibile creare un cluster eterogeneo composto da più gruppi di istanze con vari tipi di istanze. Nella finestra pop-up Crea una configurazione di gruppo di istanze, inserisci le informazioni di configurazione del gruppo di istanze.

    Crea una pagina pop-up per il gruppo di istanze, configura un nuovo gruppo di istanze seguendo le indicazioni dell'interfaccia utente.

    1. Per il nome del gruppo di istanze, specifica un nome per il gruppo di istanze.

    2. Per Seleziona il tipo di istanza, scegliete l'istanza per il gruppo di istanze.

    3. Per Quantità, specificate un numero intero che non superi la quota di istanza per l'utilizzo del cluster.

    4. Prepara uno script di configurazione del ciclo di vita e caricalo su un bucket Amazon S3, ad esempio. s3://amzn-s3-demo-bucket-sagemaker>/<lifecycle-script-directory>/src/

       Per iniziare rapidamente, scarica lo script di esempio on_create.shdall' GitHub archivio AWS Home Distributed Training e caricalo nel bucket S3. Questo script configura il file di registrazione /var/log/provision/provisioning.log necessario per raccogliere i log dai CloudWatch contenitori Pod. È inoltre possibile includere istruzioni di configurazione aggiuntive, una serie di script di configurazione o comandi da eseguire durante la fase di provisioning del HyperPod cluster.

    5. Per l'URI del bucket S3 per gli script del ciclo di vita, inserisci il percorso Amazon S3 in cui sono archiviati gli script del ciclo di vita.

    6. Per Directory path to entry point script nel percorso Amazon S3 di base, inserisci il nome del file dello script del ciclo di vita in Amazon S3 path to lifecycle script files. Se utilizzi lo script di esempio fornito, inserisci. on_create.sh

    7. Per il ruolo IAM, scegli il ruolo IAM che hai creato per SageMaker HyperPod le risorse, seguendo la sezioneRuolo IAM per SageMaker HyperPod.

    8. In Configurazione avanzata, puoi configurare le seguenti configurazioni opzionali.

       1. (Facoltativo) Per Thread per core, specificate se disabilitare 1 il multithreading e abilitare il multithreading. 2 Per scoprire quale tipo di istanza supporta il multithreading, consulta la tabella di riferimento dei core e dei thread della CPU per core di CPU per tipo di istanza nella Amazon User Guide. EC2

       2. (Facoltativo) Per le configurazioni di storage di istanze aggiuntive, specifica un numero intero compreso tra 1 e 16384 per impostare la dimensione di un volume Elastic Block Store (EBS) aggiuntivo in gigabyte (GB). Il volume EBS è collegato a ciascuna istanza del gruppo di istanze. Il percorso di montaggio predefinito per il volume EBS aggiuntivo è. /opt/sagemaker Dopo aver creato correttamente il cluster, è possibile accedere tramite SSH alle istanze del cluster (nodi) e verificare se il volume EBS è montato correttamente eseguendo il comando. df -h Il collegamento di un volume EBS aggiuntivo fornisce uno storage stabile, fuori istanza e persistente in modo indipendente, come descritto nella sezione Volumi Amazon EBS della Amazon Elastic Block Store User Guide.

11. Per un controllo approfondito dello stato, seleziona i controlli di integrità avanzati che desideri eseguire sulle istanze. Per ulteriori informazioni, consulta Controlli sanitari approfonditi.

12. Nel passaggio 3: Configurazione avanzata, configura le impostazioni di rete all'interno del cluster e in-and-out del cluster. Per l'orchestrazione del SageMaker HyperPod cluster con Amazon EKS, il VPC viene impostato automaticamente su quello configurato con il cluster EKS selezionato.

13. Nella fase 4: rivedi e crea, rivedi la configurazione che hai impostato dalla Fase 1 alla Fase 3 e completa l'invio della richiesta di creazione del cluster.

14. Dopo che lo stato del cluster diventaInService, puoi iniziare ad accedere ai nodi del cluster. Per accedere ai nodi del cluster e iniziare a eseguire carichi di lavoro ML, consulta. Offerte di lavoro sui SageMaker HyperPod cluster