本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
共享存储
AWS ParallelCluster支持使用任一方法亚马逊 EBS,适用于 ONTAP 的 FSx,以及适用于 OpenZFS 的 fsX共享存储卷,亚马逊 EFS和fsX for Lustre共享存储文件系统,或文件缓存。我们建议您按照AWS架构良好的框架可靠性支柱指导并备份您的卷和文件系统。
选择符合 HPC 应用程序 I/O 要求的存储系统。您可以根据自己的特定用例优化每个文件系统。有关更多信息,请参阅存储选项概述。
亚马逊 EBS 交易量连接到头节点,并通过 NFS 与计算节点共享。此选项可能具有成本效益,但是随着存储需求的扩展,性能取决于头节点资源。随着向集群中添加更多计算节点以及吞吐量需求的增加,这可能会成为瓶颈。
亚马逊 EFS 文件系统随着存储需求的变化而扩展。您可以为各种用例配置这些文件系统。使用 Amazon EFS 文件系统在集群上运行并行化且对延迟敏感的应用程序。
适用于 Lustre 文件系统的 fsX可以以高达每秒数百 GB 的吞吐量、数百万的 IOPS 和亚毫秒的延迟处理海量数据集。将 FSx for Lustre 文件系统用于要求苛刻的高性能计算环境。
在SharedStorage 部分,你可以定义外部或AWS ParallelCluster托管存储:
-
外部存储是指您管理的现有卷或文件系统。AWS ParallelCluster不会创建或删除此存储空间。
-
托管存储指的是一个卷或文件系统AWS ParallelCluster已创建并且可以删除。
外部存储
你可以配置AWS ParallelCluster在创建或更新集群时将外部存储连接到集群。同样,您可以将其配置为在集群被删除或更新时从集群中分离外部存储。您的数据将被保留,您可以在集群生命周期之外将其用于长期永久共享存储。
AWS ParallelCluster托管存储
AWS ParallelCluster默认情况下,在配置中,托管存储取决于集群的生命周期。的SharedStorage
DeletionPolicy
配置参数设置为Delete
默认情况下。
默认情况下,AWS ParallelCluster如果满足以下条件之一,则会删除托管文件系统或卷及其数据。
-
您删除集群。
-
您可以更改托管共享存储配置
Name
。 -
您可以从配置中删除托管共享存储。
SetDeletionPolicy
到Retain
以保留您的托管共享文件系统或卷和数据。我们建议您定期备份数据,以避免数据丢失。你可以用AWS Backup集中管理所有存储选项的备份。
您可以使用配置设置移除生命周期依赖关系。有关更多信息,请参阅转换AWS ParallelCluster托管存储到外部存储:
有关共享存储配额的信息,请参阅共享存储空间的配额。
有关共享存储空间和切换到新存储空间的更多信息AWS ParallelCluster版本,请参阅最佳实践:将集群移至新的AWS ParallelCluster次要版本或补丁版本。
你可以配置AWS ParallelCluster在创建或更新集群时将外部存储连接到集群。同样,您可以将其配置为在集群删除或更新时从集群中分离外部存储。您的数据会得到保留,您可以将其用于独立于集群生命周期的长期永久共享存储解决方案。
默认情况下,托管存储取决于集群的生命周期。您可以使用中描述的配置设置来移除依赖关系转换AWS ParallelCluster托管存储到外部存储。
通过特定的设置,您可以针对自己的用例优化每种支持的存储解决方案。
有关共享存储配额,请参阅共享存储空间的配额。
有关共享存储空间和切换到新存储空间的更多信息AWS ParallelCluster版本,请参阅最佳实践:将集群移至新的AWS ParallelCluster次要版本或补丁版本。