Habilitación de la interfaz de usuario web de Apache Spark para puntos de conexión de desarrollo

Utilice la interfaz de usuario web de Apache Spark para monitorizar y depurar aplicaciones de Spark que se ejecutan en puntos de enlace de desarrollo AWS Glue. Puede configurar los puntos de enlace de desarrollo con la interfaz de usuario web de Spark mediante la consola de AWS Glue o la AWS Command Line Interface (AWS CLI).

Habilitación de la interfaz de usuario de Spark (consola)

Siga estos pasos para configurar la interfaz de usuario de Spark mediante la AWS Management Console.

Crear un punto de enlace de desarrollo con la interfaz de usuario de Spark habilitada

1. Inicie sesión en AWS Management Console y abra la consola de AWS Glue en https://console.aws.amazon.com/glue/.

2. En el panel de navegación, elija Dev Endpoints (Puntos de enlace de desarrollo).

3. Seleccione Add endpoint (Añadir punto de enlace).

4. En Configuration (Configuración), abra las opciones de Spark UI(IU de Spark).

5. En la pestaña Spark UI (IU de Spark), elija Enable (Habilitar).

6. Especifique una ruta de Amazon S3 para almacenar los registros de eventos de Spark.

Habilitación de la interfaz de usuario de Spark (AWS CLI)

Para crear un punto de enlace de desarrollo con la interfaz de usuario de Spark habilitada mediante la AWS CLI, pase los siguientes argumentos en sintaxis JSON.

{
    "EndpointName": "Name",
    "RoleArn": "role_ARN",
    "PublicKey": "public_key_contents",
    "NumberOfNodes": 2,
    "Arguments": {
        "--enable-spark-ui": "true",
        "--spark-event-logs-path": "s3://s3-event-log-path"
    }
}