Utilice el escalado de EMR clústeres de Amazon para adaptarse a las cargas de trabajo cambiantes

Puedes ajustar el número de EC2 instancias de Amazon disponibles en un EMR clúster de Amazon de forma automática o manual en respuesta a cargas de trabajo que tengan diferentes demandas. Para utilizar el escalado automático, tiene dos opciones. Puedes activar el escalado EMR gestionado por Amazon o crear una política de escalado automático personalizada. En la siguiente tabla se describen las diferencias entre las dos opciones.

	EMREscalado gestionado por Amazon	Escalado automático personalizado
Políticas y reglas de escalado	No se requiere ninguna política. Amazon EMR gestiona la actividad de escalado automático mediante la evaluación continua de las métricas del clúster y la toma de decisiones de escalado optimizadas.	Debe definir y administrar las políticas y reglas de escalado automático, como las condiciones específicas que desencadenan actividades de escalado, periodos de evaluación, periodos de recuperación, etc.
EMRVersiones de Amazon compatibles	Amazon EMR versión 5.30.0 y superior (excepto Amazon EMR versión 6.0.0)	Amazon EMR versión 4.0.0 y superior
Composición del clúster admitida	Grupos de instancias o flotas de instancias	Solo grupos de instancias
Configuración de límites de escalado	Los límites de escalado se configuran para todo el clúster.	Los límites de escalado solo se pueden configurar para cada grupo de instancias.
Frecuencia de evaluación de las métricas	Cada 5-10 segundos Una evaluación más frecuente de las métricas permite EMR a Amazon tomar decisiones de escalado más precisas.	Puede definir los periodos de evaluación solo en incrementos de cinco minutos.
Aplicaciones compatibles	Solo se admiten YARN aplicaciones, como Spark, Hadoop, Hive y Flink. El escalado EMR administrado por Amazon no admite aplicaciones que no estén basadas enYARN, como Presto oHBase.	Puede elegir qué aplicaciones se admiten cuando defina las reglas de escalado automático.

Consideraciones

• Un EMR clúster de Amazon siempre consta de uno o tres nodos principales. Una vez que haya configurado inicialmente el clúster, solo podrá escalar los nodos principales y de tareas. No puede escalar el número de nodos principales del clúster.

• En el caso de los grupos de instancias, las operaciones de reconfiguración y cambio de tamaño se realizan de forma consecutiva y no simultánea. Si inicia una reconfiguración mientras se está cambiando el tamaño de un grupo de instancias, la reconfiguración comienza una vez que el grupo de instancias complete el cambio de tamaño en curso. Por el contrario, si inicia una operación de cambio de tamaño mientras se está reconfigurando un grupo de instancias, se cambiará el tamaño en el momento.