Almacenamiento compartido - AWS ParallelCluster

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Almacenamiento compartido

AWS ParallelClusteradmite el uso de Amazon EBS, FSx para ONTAP y FSx para los volúmenes de almacenamiento compartido de OpenZFS o Amazon EFS y FSx para los sistemas de archivos de almacenamiento compartido Lustre. Le recomendamos que siga las directrices del pilar de confiabilidadAWS del marco bien diseñado y haga copias de seguridad de sus volúmenes y sistemas de archivos.

Seleccione un sistema de almacenamiento que cumpla con los requisitos de E/S de sus aplicaciones de HPC. Puede optimizar cada sistema de archivos en función de su caso de uso específico. Para obtener más información, consulte Información general sobre las opciones de almacenamiento.

Los volúmenes de Amazon EBS se adjuntan al nodo principal y se comparten con los nodos de procesamiento a través de NFS. Esta opción puede ser rentable, pero el rendimiento depende de los recursos del nodo principal a medida que aumentan las necesidades de almacenamiento. Esto puede convertirse en un obstáculo a medida que se agregan más nodos de procesamiento al clúster y aumenta la demanda de rendimiento.

Los sistemas de archivos Amazon EFS escalan a medida que cambian las necesidades de almacenamiento. Puede configurar estos sistemas de archivos para una variedad de casos de uso. Utilice los sistemas de archivos Amazon EFS para ejecutar aplicaciones paralelizadas y sensibles a la latencia en su clúster.

Los sistemas de archivos FSx for Lustre pueden procesar conjuntos de datos masivos con un rendimiento de hasta cientos de gigabytes por segundo, millones de IOPS y latencias de menos de un milisegundo. Utilice FSx para sistemas de archivos Lustre para entornos informáticos exigentes de alto rendimiento.

En elSección SharedStorage, puede definir el almacenamiento externo oAWS ParallelCluster administrado:

  • El almacenamiento externo hace referencia a un volumen o sistema de archivos existente que usted administra. AWS ParallelClusterno crea ni elimina este almacenamiento.

  • El almacenamiento administrado hace referencia a un volumen o sistema de archivos que seAWS ParallelCluster crea y se puede eliminar.

Almacenamiento externo

Puede configurarloAWS ParallelCluster para adjuntar almacenamiento externo al clúster cuando se cree o actualice el clúster. Del mismo modo, puede configurarlo para separar el almacenamiento externo del clúster cuando el clúster se elimine o actualice. Sus datos se conservan y puede usarlos como almacenamiento compartido permanente a largo plazo fuera del ciclo de vida del clúster.

AWS ParallelClusteralmacenamiento gestionado

AWS ParallelClusterel almacenamiento administrado depende del ciclo de vida del clúster de forma predeterminada en la configuración. El parámetroSharedStorageDeletionPolicy de configuración está establecido en formaDelete predeterminada.

De forma predeterminada, un sistema de archivos o un volumenAWS ParallelCluster gestionados y sus datos se eliminan si se cumple alguna de las siguientes condiciones.

  • Se elimina el clúster.

  • Usted cambia la configuración del almacenamiento compartido administradoName.

  • Quita el almacenamiento compartido administrado de la configuración.

DeletionPolicyRetainConfigúralo para que conserven el sistema de archivos o el volumen y los datos compartidos gestionados. Le recomendamos que haga copias de seguridad de sus datos con regularidad para evitar la pérdida de datos. Puede usarlo AWS Backuppara administrar de forma centralizada las copias de seguridad de todas sus opciones de almacenamiento.

Puede eliminar la dependencia del ciclo de vida con los ajustes de configuración. Para obtener más información, consulte Convierta el almacenamientoAWS ParallelCluster administrado en almacenamiento externo.

Para obtener información sobre las cuotas de almacenamiento compartido, consulteCuotas de almacenamiento compartido.

Para obtener más información sobre el almacenamiento compartido y el cambio a nuevasAWS ParallelCluster versiones, consulteMejores prácticas: mover un clúster a una nueva versiónAWS ParallelCluster secundaria o de parche.

Puede configurarloAWS ParallelCluster para adjuntar almacenamiento externo al clúster cuando se cree o actualice el clúster. Del mismo modo, puede configurarlo para separar el almacenamiento externo del clúster cuando el clúster se elimine o actualice. Sus datos se conservan y puede usarlos para soluciones de almacenamiento compartido permanente a largo plazo que son independientes del ciclo de vida del clúster.

De forma predeterminada, el almacenamiento administrado depende del ciclo de vida del clúster. Puede eliminar la dependencia con los ajustes de configuración que se describen enConvierta el almacenamientoAWS ParallelCluster administrado en almacenamiento externo.

Con configuraciones específicas, puede optimizar cada una de las soluciones de almacenamiento compatibles para sus casos de uso.

Para conocer las cuotas de almacenamiento compartido, consulteCuotas de almacenamiento compartido.

Para obtener más información sobre el almacenamiento compartido y el cambio a nuevasAWS ParallelCluster versiones, consulteMejores prácticas: mover un clúster a una nueva versiónAWS ParallelCluster secundaria o de parche.