Consola Amazon EMR - Amazon EMR

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Consola Amazon EMR

La consola ofrece una interfaz actualizada que le proporciona una forma intuitiva de administrar su entorno Amazon EMR y le brinda un cómodo acceso a la documentación, la información del producto y otros recursos.

Capacidades de la consola

La consola Amazon EMR está disponible en la siguiente URL:

En la siguiente tabla se muestra el estado de los principales componentes de la consola Amazon EMR.

Componente de la consola de Amazon EMR Consola

EMR Studio

Crear y administrar clústeres

Bloqueo del acceso público

Supervise los CloudWatch eventos de Amazon

Configuraciones de seguridad

Clústeres virtuales (Amazon EMR en EKS)

Ver y gestionar las subredes de Amazon Virtual Private Cloud 1

Cuadernos 2

1 En la consola, puedes ver y gestionar tus subredes de Amazon VPC en la sección Redes al crear un clúster.

Hay 2 Notebooks EMR disponibles como espacios de trabajo de EMR Studio en la consola. El botón Crear espacio de trabajo de la consola permite crear nuevos cuadernos. Para crear espacios de trabajo o acceder a ellos, los usuarios de Cuadernos de EMR necesitan permisos de rol de IAM adicionales. Para obtener más información, consulte Amazon EMR Notebooks, Amazon EMR Studio Workspaces en la consola y la consola Amazon EMR.

Resumen de las diferencias

En esta sección se describen las capacidades de la experiencia de la consola Amazon EMR. Estas capacidades se clasifican en las siguientes categorías:

Compatibilidad de clústeres en la consola

En algunos casos, es posible que un clúster que haya creado no sea compatible con la consola. En la siguiente lista se describen los requisitos de compatibilidad de la consola Amazon EMR.

  • La consola admite clústeres creados en las versiones 5.20.1 y posteriores de Amazon EMR.

  • Puede clonar clústeres que utilizan el escalado automático en la consola, pero solo puede crear nuevos clústeres si desea escalarlos manualmente o utilizar el escalado administrado.

Para crear clústeres de la versión 5.20.1 y anteriores y trabajar con ellos, puedes usar AWS Command Line Interface (AWS CLI) o el AWS SDK.

Creación de clústeres

Capability Consola

Terminología: tipos de nodos de clústeres de Amazon EMR

Principal, secundario, tarea

Versiones compatibles con Amazon EMR1

Amazon EMR 5.20.1 y versiones posteriores

Lanzamiento rápido de un clúster

Usa el botón Crear clúster situado en el panel de resumen. El nombre del clúster no puede contener los caracteres <, >, $, | o `(barra invertida).

Configuración de un tiempo de espera de aprovisionamiento de spot

Defina un periodo de tiempo de espera para aprovisionar instancias para cada flota en el clúster.

Roles de servicio y rol de perfil de instancia de Amazon EC2

La consola no crea funciones predeterminadas; debe crearlas con la consola de IAM o seleccionar una función de IAM ya creada

Visibilidad del clúster

Desde la consola de Amazon EMR, no puede hacer que un clúster sea visible para todos los usuarios; su política de IAM determina el acceso al clúster

Redes: configurar subredes privadas

Debe configurar los puntos de conexión de Amazon S3 y las puertas de enlace NAT desde sus respectivas consolas Amazon S3 y Amazon VPC

Vista coherente del sistema de archivos de EMR (EMRFS CV)

Con el lanzamiento de Amazon S3 de gran read-after-write consistencia el 1 de diciembre de 2020, no necesita usar EMRFS CV con sus clústeres de EMR.

Debugging

Puede depurar los trabajos mediante la interfaz de usuario de la aplicación en la página de detalles del clúster

1 No puede crear ni editar clústeres con versiones anteriores a Amazon EMR 5.20.1 en la consola, pero los clústeres existentes creados con versiones anteriores a la 5.20.1 seguirán funcionando. Para crear y editar clústeres con versiones de Amazon EMR anteriores a la 5.20.1, utilice la API o la CLI. Puede ver todos los clústeres mediante la consola, pero es posible que las consolas creadas con versiones anteriores a la 5.20.1 no sean compatibles con las funciones más recientes.

Visualización y búsqueda de clústeres

La siguiente tabla muestra cómo puede utilizar la consola Amazon EMR para ver, ver y buscar clústeres.

nota

Al aplicar un filtro de datos a la lista de clústeres, se consulta toda la base de datos. Sin embargo, al ingresar una cadena de texto en el cuadro de búsqueda, la búsqueda solo se aplica a los resultados que la lista haya cargado en el cliente.

Capability Consola

Ver detalles del clúster

Puede seleccionar el ID del clúster para ver detalles exhaustivos del clúster, como las opciones de configuración, las interfaces de usuario de las aplicaciones persistentes y los registros.

Búsqueda de clústeres

Utilice un único campo de búsqueda para ingresar consultas de búsqueda de texto y para crear y aplicar filtros de datos como “Estado = Cualquier estado activo”.

Búsqueda de clústeres con errores

Para buscar clústeres con errores, aplique el filtro Estado = Terminado con errores.

Visualización o edición de los detalles del clúster

Capability Consola

Ver las instancias de sus grupos de instancias y flotas de instancias, junto con las opciones de escalado, aprovisionamiento, redimensionamiento y terminación

Consulte las opciones y los detalles de las instancias en la pestaña Instancias. Consulte las opciones de terminación en la pestaña Propiedades.

Visualización de las interfaces de usuario, los registros y las configuraciones

(interfaz de usuario de Apache Spark, servicio Spark History, interfaz de usuario de Apache Tez, servidor de cronología YARN)

Vea las configuraciones del clúster en la pestaña Configuraciones. Inicie una interfaz de usuario de aplicación persistente y activa para ver los registros de una aplicación desde la pestaña Aplicaciones.

Exportación de un clúster a la CLI

La opción está disponible en los menús de acciones de la vista de lista y de detalles del clúster, como “Ver el comando para clonar un clúster”

Diferencias al trabajar con configuraciones de seguridad

Capability Consola

Clonación de configuraciones de seguridad

Gobernanza federada mediante Trino y Apache Ranger

Uso de un rol de tiempo de ejecución para enviar el trabajo a un clúster1

Autorización del acceso a los datos del sistema de archivos EMR (EMRFS)

Puntos de acceso de Amazon S3

AWS Lake Formation controles de acceso

Roles de tiempo de ejecución

1 Para transferir un rol durante el envío de pasos, el clúster debe usar una configuración de seguridad con una política de permisos de IAM adjunta para que el usuario pueda transferir solo los roles aprobados y sus trabajos puedan acceder a los recursos de Amazon EMR. Para obtener más información, consulte Funciones de tiempo de ejecución para Amazon EMR Steps.