计划和配置主节点 - Amazon EMR

计划和配置主节点

启动 Amazon EMR 集群时,可以选择在集群中设置一个或三个主节点。只有 Amazon EMR 版本 5.23.0 及更高版本支持启动具有三个主节点的集群。Amazon EMR 可以利用 EC2 置放群组确保将主节点放置在不同的基础硬件上,从而进一步提高集群可用性。有关更多信息,请参阅Amazon EMR 与 EC2 置放群组的集成

具有多个主节点的 Amazon EMR 集群提供以下主要优势:

  • 主节点不再发生单点故障。如果其中一个主节点发生故障,集群将使用其他两个主节点,不会中断运行。同时,Amazon EMR 会自动使用预置了相同配置和引导操作的新主节点替换发生故障的主节点。

  • Amazon EMR 启用 HDFS NameNode 和 YARN ResourceManager 的 Hadoop 高可用性功能,并支持其他一些开源应用程序的高可用性。

    有关具有多个主节点的 Amazon EMR 集群如何支持开源应用程序和其他 Amazon EMR 功能的详细信息,请参阅 支持的应用程序和功能

注意

集群只能驻留在一个可用区或子网中。

本部分提供有关具有多个主节点的 Amazon EMR 集群支持的应用程序和功能的信息,以及启动集群的配置详细信息、最佳实践和注意事项。