计划和配置主节点 - Amazon EMR

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

计划和配置主节点

启动 Amazon EMR 集群时,您可以选择在集群中包含一个或三个主节点。亚马逊EMR版本 5.36.1、5.36.2、6.8.1、6.9.1、6.10.1、6.11.1、6.11.1、6.12.0 及更高版本支持实例队列的高可用性。对于实例组,Amazon 5.23.0 及更高EMR版本支持高可用性。为了进一步提高集群可用性,Amazon EMR 可以使用 Amazon EC2 置放群组来确保将主节点放置在不同的底层硬件上。有关更多信息,请参阅 Amazon 与EC2置放群组EMR集成

具有多个主节点的 Amazon EMR 集群具有以下好处:

  • 主节点不再发生单点故障。如果其中一个主节点发生故障,集群将使用其他两个主节点,不会中断运行。同时,Amazon EMR 会自动将出现故障的主节点替换为使用相同配置和引导操作配置的新节点。

  • Amazon EMR 支持其他一些开源应用程序的 Hadoop 高可用性功能,HDFS NameNode YARNResourceManager 并支持其他一些开源应用程序的高可用性。

    有关具有多个主节点的 Amazon EMR 集群如何支持开源应用程序和其他 Amazon EMR 功能的更多信息,请参阅支持的应用程序和功能

注意

集群只能驻留在一个可用区或子网中。

本节提供有关支持应用程序和具有多个主节点的 Amazon EMR 集群功能的信息,以及启动集群的配置详情、最佳实践和注意事项。