SageMaker HyperPod Guía de inicio rápido de Amazon

Esta guía de inicio rápido le guiará a través de la creación de su primer HyperPod clúster con las orquestaciones de Slurm y Amazon EKS (EKS). Para empezar, elija la organización que mejor se adapte a sus necesidades de infraestructura. SageMaker HyperPod

Cree un clúster orquestado por SLURM SageMaker HyperPod

Siga estos pasos para crear su primer SageMaker HyperPod clúster con la orquestación de Slurm.

1. Abre la consola Amazon SageMaker AI en https://console.aws.amazon.com/sagemaker/.

2. Seleccione HyperPod Clusters en el panel de navegación izquierdo y, a continuación, Cluster Management.

3. En la página SageMaker HyperPod Clústeres, elija Crear HyperPod clúster.

4. En el menú desplegable Crear HyperPod clúster, selecciona Orchestrated by Slurm.

5. En la página de creación del clúster, selecciona Configuración rápida. Con esta opción, puede empezar inmediatamente con la configuración predeterminada. SageMaker La IA creará nuevos recursos, como VPC, subredes, grupos de seguridad, un bucket de Amazon S3, una función de IAM y Lustre, FSx durante el proceso de creación del clúster.

6. En la configuración general, especifique un nombre para el nuevo clúster. No puede cambiar el nombre después de crear el clúster.

7. En los grupos de instancias, selecciona Añadir grupo. Cada grupo de instancias se puede configurar de una forma diferente y se puede crear un clúster heterogéneo que conste de varios grupos de instancias con diversos tipos de instancias. Para implementar un clúster, debes agregar al menos un grupo de instancias. Puedes añadir un grupo de instancias a la vez. Para crear varios grupos de instancias, repite el proceso para cada grupo de instancias.

   Sigue estos pasos para añadir un grupo de instancias.

   1. En el tipo de grupo de instancias, elige un tipo para tu grupo de instancias. Para esta guía de inicio rápido, selecciona Controller (head) paramy-controller-group, Login para my-login-group y Compute (worker) paraworker-group-1.

   2. En Nombre, especifica un nombre para el grupo de instancias. Para esta guía de inicio rápido, crea tres grupos de instancias llamados my-controller-groupmy-login-group, yworker-group-1.

   3. En el caso de la capacidad de instancia, elige la capacidad bajo demanda o un plan de formación para reservar tus recursos informáticos.

   4. En Tipo de instancia, elige la instancia para el grupo de instancias. Para esta guía de inicio rápido, selecciona ml.c5.xlarge for my-controller-groupmy-login-group, ml.m5.4xlarge for y ml.trn1.32xlarge forworker-group-1.

      Asegúrese de elegir el tipo de instancia con cuotas suficientes en su cuenta o solicite cuotas adicionales siguiendo las instrucciones que se indican enSageMaker HyperPod cuotas.

   5. En Cantidad de instancias, especifique un número entero que no exceda la cuota de instancias para el uso del clúster. Para esta guía de inicio rápido, ingresa 1 para los tres grupos.

   6. En la zona de disponibilidad de destino, elija la zona de disponibilidad en la que se aprovisionarán las instancias. La zona de disponibilidad debe corresponder a la ubicación de su capacidad informática acelerada.

   7. En Volumen de almacenamiento adicional por instancia (GB) (opcional), especifique un número entero entre 1 y 16384 para establecer el tamaño de un volumen adicional de Elastic Block Store (EBS) en gigabytes (GB). El volumen de EBS está asociado a cada instancia del grupo de instancias. La ruta de montaje predeterminada para el volumen de EBS adicional es /opt/sagemaker. Una vez que el clúster se haya creado correctamente, puede utilizar SSH en las instancias del clúster (nodos) y verificar si el volumen de EBS está montado correctamente ejecutando el comando df -h. La conexión de un volumen de EBS adicional proporciona un almacenamiento estable, fuera de la instancia y persistente de forma independiente, tal y como se describe en la sección Amazon EBS volumes de la Guía del usuario de Amazon Elastic Block Store.

   8. Elija Agregar grupo de instancias.

8. En los valores predeterminados de configuración rápida, revise los valores predeterminados. En esta sección se enumeran todos los ajustes predeterminados para la creación del clúster, incluidos todos los AWS recursos nuevos que se crearán durante el proceso de creación del clúster.

9. Elija Enviar.

Para obtener más información, consulte Cómo empezar a SageMaker HyperPod usar la consola de SageMaker IA.

Cree un clúster orquestado por EKS SageMaker HyperPod

Siga estos pasos para crear su primer SageMaker HyperPod clúster con la orquestación de Amazon EKS.

1. Abre la consola Amazon SageMaker AI en https://console.aws.amazon.com/sagemaker/.

2. Seleccione HyperPod Clusters en el panel de navegación izquierdo y, a continuación, Cluster Management.

3. En la página SageMaker HyperPod Clústeres, elija Crear HyperPod clúster.

4. En el menú desplegable Crear HyperPod clúster, elija Orchestrated by Amazon EKS.

5. En la página de creación del clúster, seleccione Configuración rápida. Con esta opción, puede empezar inmediatamente con la configuración predeterminada. SageMaker La IA creará nuevos recursos, como VPC, subredes, grupos de seguridad, un bucket de Amazon S3, una función de IAM y Lustre, FSx durante el proceso de creación del clúster.

6. En la configuración general, especifique un nombre para el nuevo clúster. No puede cambiar el nombre después de crear el clúster.

7. En los grupos de instancias, selecciona Añadir grupo. Cada grupo de instancias se puede configurar de una forma diferente y se puede crear un clúster heterogéneo que conste de varios grupos de instancias con diversos tipos de instancias. Para implementar un clúster, debes agregar al menos un grupo de instancias. Puedes añadir un grupo de instancias a la vez. Para crear varios grupos de instancias, repite el proceso para cada grupo de instancias.

   Sigue estos pasos para añadir un grupo de instancias.

   1. Para el tipo de grupo de instancias, selecciona Grupo de instancias estándar o restringido (RIG). Por lo general, elegirá el estándar, que proporciona un entorno informático de uso general sin restricciones de seguridad adicionales. El grupo de instancias restringido (RIG) es un entorno especializado para la personalización de modelos fundamentales, como Amazon Nova. Para obtener más información sobre la configuración de RIG para la personalización de modelos de Amazon Nova, consultePersonalización de Amazon Nova en Amazon SageMaker HyperPod.

   2. En Nombre, especifica un nombre para el grupo de instancias.

   3. En el caso de la capacidad de las instancias, elige la capacidad bajo demanda o un plan de formación para reservar tus recursos informáticos.

   4. En Tipo de instancia, elige la instancia para el grupo de instancias. Asegúrese de elegir el tipo de instancia con cuotas suficientes en su cuenta o solicite cuotas adicionales accediendo a SageMaker HyperPod cuotas.

   5. En Cantidad de instancias, especifica un número entero que no exceda la cuota de instancias para el uso del clúster. Para esta guía de inicio rápido, ingresa 1 para los tres grupos.

   6. En la zona de disponibilidad de destino, elija la zona de disponibilidad en la que se aprovisionarán las instancias. La zona de disponibilidad debe corresponder a la ubicación de su capacidad informática acelerada.

   7. En Volumen de almacenamiento adicional por instancia (GB) (opcional), especifique un número entero entre 1 y 16384 para establecer el tamaño de un volumen adicional de Elastic Block Store (EBS) en gigabytes (GB). El volumen de EBS está asociado a cada instancia del grupo de instancias. La ruta de montaje predeterminada para el volumen de EBS adicional es /opt/sagemaker. Una vez que el clúster se haya creado correctamente, puede utilizar SSH en las instancias del clúster (nodos) y verificar si el volumen de EBS está montado correctamente ejecutando el comando df -h. La conexión de un volumen de EBS adicional proporciona un almacenamiento estable, fuera de la instancia y persistente de forma independiente, tal y como se describe en la sección Amazon EBS volumes de la Guía del usuario de Amazon Elastic Block Store.

   8. Para las comprobaciones de estado exhaustivas de Instance, elija su opción. Los controles de estado exhaustivos supervisan el estado de las instancias durante la creación y después de las actualizaciones de software, y recuperan automáticamente las instancias defectuosas mediante reinicios o sustituciones cuando están activadas.

   9. Selecciona Añadir grupo de instancias.

8. En los valores predeterminados de configuración rápida, revise los valores predeterminados. En esta sección se enumeran todos los ajustes predeterminados para la creación del clúster, incluidos todos los AWS recursos nuevos que se crearán durante el proceso de creación del clúster.

9. Elija Enviar.

Para obtener más información, consulte Creación de un SageMaker HyperPod clúster con la orquestación de Amazon EKS.

Envíe las cargas de trabajo

Siga estos tutoriales del taller para enviar ejemplos de cargas de trabajo.

• Amazon SageMaker HyperPod para Slurm

• Amazon SageMaker HyperPod para Amazon EKS