Crear un clúster con contabilidad Slurm

Obtenga información sobre cómo configurar y crear un clúster de contabilidad Slurm. Para obtener más información, consulte Slurmcontabilidad con AWS ParallelCluster.

Al utilizar la interfaz de línea de AWS ParallelCluster comandos (CLI) o la API, solo paga por los AWS recursos que se crean al crear o actualizar AWS ParallelCluster imágenes y clústeres. Para obtener más información, consulte AWS servicios utilizados por AWS ParallelCluster.

La AWS ParallelCluster interfaz de usuario se basa en una arquitectura sin servidor y, en la mayoría de los casos, se puede utilizar en la categoría de capa AWS gratuita. Para obtener más información, consulte Costes de la interfaz de usuario de AWS ParallelCluster.

En este tutorial, utilizará una plantilla de creación CloudFormation rápida (us-east-1) para crear una base de datos sin servidor para MySQL. Amazon Aurora La plantilla indica CloudFormation que se creen todos los componentes necesarios para implementar una base de datos Amazon Aurora sin servidor en la misma VPC que el clúster. La plantilla también crea una configuración básica de red y seguridad para la conexión entre el clúster y la base de datos.

nota

A partir de la versión 3.3.0, AWS ParallelCluster admite la Slurm contabilidad con el parámetro de configuración del clúster/Base de datos. SlurmSettings

nota

La plantilla de creación rápida sirve de ejemplo. Esta plantilla no cubre todos los casos de uso posibles de un servidor de base de datos de contabilidad Slurm. Es su responsabilidad crear un servidor de base de datos con la configuración y la capacidad adecuadas para sus cargas de trabajo de producción.

Requisitos previos:

• AWS ParallelCluster está instalado.

• AWS CLI está instalado y configurado.

• Tiene un par de claves Amazon EC2.

• Tiene un rol de IAM con los permisos necesarios para ejecutar el CLI pcluster.

• La región en la que implemente la plantilla de creación rápida es compatible con Amazon Aurora MySQL Serverless v2. Para obtener más información, consulte Aurora Serverless v2 con Aurora MySQL.

Paso 1: Crear la VPC y las subredes para AWS ParallelCluster

Para usar la CloudFormation plantilla proporcionada para la base de datos de Slurm cuentas, debe tener lista la VPC del clúster. Puede hacerlo manualmente o como parte del procedimiento Configure y cree un clúster con la interfaz de línea de AWS ParallelCluster comandos. Si ya ha utilizado AWS ParallelCluster, es posible que tenga una VPC lista para la implementación del clúster y el servidor de base de datos.

Paso 2: Crear la pila de la base de datos

Utilice la plantilla de creación CloudFormation rápida (us-east-1) para crear una pila de bases de datos para la contabilidad. Slurm La plantilla requiere las siguientes entradas:

• Credenciales del servidor de base de datos, específicamente el nombre de usuario y la contraseña de administrador.

• Dimensionamiento del clúster sin servidor. Amazon Aurora Esto depende de la carga prevista del clúster.

• Parámetros de red, específicamente la VPC de destino y las subredes o bloques CIDR para la creación de las subredes.

Seleccione las credenciales y el tamaño adecuados para el servidor de base de datos. Para las opciones de red, debe usar la misma VPC en la que se implementa el clúster AWS ParallelCluster . Puede crear las subredes de la base de datos y pasarlas como entrada a la plantilla. O bien, proporcione dos bloques CIDR separados para las dos subredes y deje que la CloudFormation plantilla cree las dos subredes para los bloques CIDR. Asegúrese de que los bloques CIDR no se superpongan con las subredes existentes. Si los bloques CIDR se superponen con las subredes existentes, no se puede crear la pila.

La creación del servidor de base de datos tarda varios minutos.

Paso 3: Crear un clúster con la contabilidad Slurm habilitada

La CloudFormation plantilla proporcionada genera una CloudFormation pila con algunos resultados definidos. Desde AWS Management Console, puede ver las salidas en la pestaña Salidas de la vista de CloudFormation pila. Para habilitar la contabilidad Slurm, algunas de estas salidas deben usarse en el archivo de configuración del clúster AWS ParallelCluster :

• DatabaseHost: Se utiliza para el parámetro de configuración del clúster SlurmSettings / Database / Uri.

• DatabaseAdminUser: se utiliza para el valor del parámetro de configuración del clúster de SlurmSettings/Database/UserName.

• DatabaseSecretArn: Se utiliza para el parámetro de configuración del clúster SlurmSettings / Database / PasswordSecretArn.

• DatabaseClientSecurityGroup: Este es el grupo de seguridad que está conectado al nodo principal del clúster que se define en el parámetro de configuración HeadNode / Networking / SecurityGroups

Actualice los parámetros Database del archivo de configuración del clúster con los valores de salida. Utilice la CLI pcluster para crear el clúster.

$ pcluster create-cluster -n cluster-3.x -c path/to/cluster-config.yaml

Una vez creado el clúster, puede empezar a utilizar comandos de contabilidad Slurm como sacctmgr o sacct.