Creazione AWS Glue di posti di lavoro con sessioni interattive

Grazie alle sessioni interattive in AWS Glue, i data engineer possono creare processi AWS Glue con una velocità e una semplicità mai viste prima.

Argomenti

• Panoramica delle sessioni interattive in AWS Glue
• Nozioni di base sulle sessioni interattive AWS Glue
• Configurazione delle sessioni interattive di AWS Glue per Jupyter e notebook AWS Glue Studio
• Guida introduttiva alle AWS Glue sessioni interattive di For Ray (anteprima)
• Convertire uno script o un taccuino in un lavoro AWS Glue
• Utilizzo delle operazioni di streaming in sessioni AWS Glue interattive
• Sviluppo e test di script di processo AWS Glue in locale
• Endpoint di sviluppo

Panoramica delle sessioni interattive in AWS Glue

Con le sessioni interattive di AWS Glue, puoi creare, testare ed eseguire rapidamente applicazioni di preparazione e analisi dei dati. Le sessioni interattive forniscono un'interfaccia programmatica e visiva per creare e testare script di estrazione, trasformazione e caricamento (ETL) per la preparazione dei dati. Le sessioni interattive eseguono applicazioni di analisi dei dati Apache Spark e forniscono accesso on demand a un ambiente di runtime Spark remoto. AWS Glue gestisce in modo trasparente Spark serverless per queste sessioni interattive.

Le sessioni interattive sono flessibili, pertanto ti permettono di creare e testare le applicazioni dall'ambiente che preferisci. È possibile creare e lavorare con sessioni interattive tramite AWS Command Line Interface and the. API Puoi utilizzare i notebook compatibili con Jupyter per creare e testare visivamente gli script. Le sessioni interattive forniscono un kernel Jupyter open source che si integra quasi ovunque funzioni Jupyter, inclusa l'integrazione con IntelliJ e VS Code. IDEs PyCharm Ciò consente di creare codice nell'ambiente locale ed eseguirlo senza problemi sul backend delle sessioni interattive.

Utilizzando le sessioni interattiveAPI, i clienti possono eseguire in modo programmatico applicazioni che utilizzano l'analisi di Apache Spark senza dover gestire l'infrastruttura Spark. È possibile eseguire una o più istruzioni Spark in una singola sessione interattiva.

Le sessioni interattive forniscono quindi un modo più rapido, economico e flessibile per creare ed eseguire applicazioni di preparazione e analisi dei dati. Per informazioni sull'utilizzo di sessioni interattive, consulta la documentazione in questa sezione. Magic supportati da AWS Glue

Limitazioni

• I segnalibri del processo non sono supportati nelle sessioni interattive.

• La creazione di lavori su notebook utilizzando il non è supportata. AWS Command Line Interface