Creación AWS Glue de trabajos con sesiones interactivas

Los ingenieros de datos pueden crear trabajos de AWS Glue de forma más rápida y sencilla que antes mediante el uso de las sesiones interactivas en AWS Glue.

Temas

• Información general sobre las sesiones interactivas de AWS Glue
• Introducción a las sesiones interactivas de AWS Glue
• Configuración de las sesiones interactivas de AWS Glue para cuadernos de Jupyter y AWS Glue Studio
• Introducción a las sesiones interactivas de AWS Glue For Ray (versión preliminar)
• Convertir un guion o un cuaderno en un AWS Glue trabajo
• Trabajar con operaciones de streaming en sesiones AWS Glue interactivas
• Desarrollo y prueba de scripts de trabajos de AWS Glue a nivel local
• Puntos de conexión de desarrollo

Información general sobre las sesiones interactivas de AWS Glue

Con las sesiones interactivas de AWS Glue, puede crear, probar y ejecutar rápidamente aplicaciones de análisis y preparación de datos. Las sesiones interactivas proporcionan una interfaz visual y programática para crear y probar scripts de extracción, transformación y carga (ETL) para la preparación de datos. Las sesiones interactivas ejecutan aplicaciones de análisis de Apache Spark y proporcionan acceso bajo demanda a un entorno en tiempo de ejecución remoto de Spark. AWS Glue administra de forma transparente Spark sin servidor para estas sesiones interactivas.

Dado que las sesiones interactivas son flexibles, puede crear y probar aplicaciones desde el entorno que elija. Puede crear sesiones interactivas y trabajar con ellas a través de AWS Command Line Interface y. API Puede utilizar los cuadernos compatibles con Jupyter para crear y probar los scripts de su cuaderno en forma visual. Las sesiones interactivas proporcionan un núcleo de Jupyter de código abierto que se integra prácticamente en cualquier lugar donde se encuentre Jupyter, incluida la integración con IDEs PyCharm IntelliJ y VS Code. Esto le permite crear código en su entorno local y ejecutarlo sin problemas en el backend de sesiones interactivas.

Con las sesiones interactivasAPI, los clientes pueden ejecutar mediante programación aplicaciones que utilizan el análisis de Apache Spark sin tener que gestionar la infraestructura de Spark. Puede ejecutar una o varias instrucciones de Spark en una única sesión interactiva.

Por lo tanto, las sesiones interactivas proporcionan una forma más rápida, económica y flexible de crear y ejecutar aplicaciones de análisis y preparación de datos. Para aprender a utilizar las sesiones interactivas, consulte la documentación de esta sección. Comandos mágicos admitidos por AWS Glue

Limitaciones

• Los marcadores de trabajo no se admiten en las sesiones interactivas.

• No se admite la creación de trabajos de bloc de notas con el AWS Command Line Interface .