本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
共享存储
AWS ParallelCluster要么支持在 ONTAP 上使用 Amazon EB S、FS x 用于 OpenZFS 共享存储卷,要么在 Lustre 共享存储文件系统上使用 Amazon EFS 和 FSx。我们建议您遵循AWS架构完善的框架可靠性支柱指南,备份您的卷和文件系统。
选择满足您的 HPC 应用程序 I/O 要求的存储系统。您可以根据具体使用案例优化每个文件系统。有关更多信息,请参阅存储选项概述。
Amazon EBS 卷连接到头节点并通过 NFS 与计算节点共享。此选项可能具有成本效益,但随着存储需求的扩展,性能取决于头节点资源。随着向集群中添加更多计算节点以及吞吐量需求的增加,这可能会成为瓶颈。
Amazon EFS 文件系统会随着存储需求的变化而扩展。您可以为各种用例配置这些文件系统。使用 Amazon EFS 文件系统在集群上运行并行化和延迟敏感型应用程序。
FSx for Lustre 文件系统可以以高达每秒数百千兆字节的吞吐量、数百万次 IOPS 和亚毫秒延迟处理海量数据集。将 FSx for Lustre 文件系统用于要求苛刻的高性能计算环境。
在中SharedStorage 部分,您可以定义外部存储或AWS ParallelCluster托管存储:
-
外部存储是指您管理的现有卷或文件系统。 AWS ParallelCluster不会创建或删除此存储。
-
托管存储是指AWS ParallelCluster创建并可以删除的卷或文件系统。
外部存储
您可以配置AWS ParallelCluster为在创建或更新集群时将外部存储连接到集群。同样,您可以将其配置为在删除或更新集群时从集群中分离外部存储。您的数据会被保留,您可以将其用于集群生命周期之外的长期永久共享存储。
AWS ParallelCluster托管存储
AWS ParallelCluster默认情况下,在配置中,托管存储依赖于集群的生命周期。默认情况下,SharedStorage
DeletionPolicy
配置参数设置Delete
为。
默认情况下,如果满足以下条件之一,则会删除AWS ParallelCluster托管文件系统或卷及其数据。
-
请删除集群。
-
您可以更改托管共享存储配置
Name
。 -
您从配置中移除托管共享存储。
设置为DeletionPolicy
Retain
以保留您的托管共享文件系统或卷和数据。我们建议您定期备份数据,以免丢失数据。您可以使用AWS Backup来集中管理所有存储选项的备份。
您可以使用配置设置删除生命周期依赖关系。有关更多信息,请参阅将AWS ParallelCluster托管存储转换为外部存储:
有关共享存储配额的信息,请参阅共享存储的配额。
有关共享存储和切换到新AWS ParallelCluster版本的更多信息,请参阅最佳实践:将集群移至新的AWS ParallelCluster次要版本或补丁版本。
您可以配置AWS ParallelCluster为在创建或更新集群时将外部存储连接到集群。同样,您可以将其配置为在删除或更新集群时从集群中分离外部存储。您的数据会被保留,您可以将其用于独立于集群生命周期的长期永久共享存储解决方案。
默认情况下,托管存储依赖于集群的生命周期。您可以使用中所述的配置设置删除依赖关系将AWS ParallelCluster托管存储转换为外部存储。
通过特定设置,您可以针对您的用例优化每种支持的存储解决方案。
有关共享存储配额,请参阅共享存储的配额。
有关共享存储和切换到新AWS ParallelCluster版本的更多信息,请参阅最佳实践:将集群移至新的AWS ParallelCluster次要版本或补丁版本。