Utilizzo dei DAG su Amazon MWAA - Amazon Managed Workflows for Apache Airflow
Panoramica dei bucket Amazon S3

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Utilizzo dei DAG su Amazon MWAA

Per eseguire Directed Acyclic Graphs (DAG) in un ambiente Amazon Managed Workflows for Apache Airflow, copia i file nel bucket di storage Amazon S3 collegato al tuo ambiente, quindi comunica ad Amazon MWAA dove si trovano i tuoi DAG e i file di supporto sulla console Amazon MWAA. Amazon MWAA si occupa della sincronizzazione dei DAG tra lavoratori, pianificatori e server Web. Questa guida descrive come aggiungere o aggiornare i DAG e installare plugin personalizzati e dipendenze Python in un ambiente Amazon MWAA.

Argomenti

Panoramica dei bucket Amazon S3

Un bucket Amazon S3 per un ambiente Amazon MWAA deve avere l'accesso pubblico bloccato. Per impostazione predefinita, tutte le risorse Amazon S3 (bucket, oggetti e risorse secondarie correlate (ad esempio, la configurazione del ciclo di vita) sono private.

  • Solo il proprietario della risorsa, l'AWSaccount che ha creato il bucket, può accedere alla risorsa. Il proprietario della risorsa (ad esempio l'amministratore) può concedere le autorizzazioni di accesso ad altri scrivendo una politica di controllo degli accessi.

  • La politica di accesso che configuri deve avere l'autorizzazione per aggiungere DAG, plug-in personalizzati plugins.zip e dipendenze Python nel tuo requirements.txt bucket Amazon S3. Per un esempio di politica che contiene le autorizzazioni richieste, consulta AmazonMWAA. FullConsoleAccess

Un bucket Amazon S3 per un ambiente Amazon MWAA deve avere il controllo delle versioni abilitato. Quando il controllo delle versioni del bucket Amazon S3 è abilitato, ogni volta che viene creata una nuova versione, viene creata una nuova copia.

  • Il controllo delle versioni è abilitato per i plug-in personalizzati in a e le dipendenze Python in un plugins.zip bucket requirements.txt Amazon S3.

  • È necessario specificare la versione di plugins.zip e requirements.txt sulla console Amazon MWAA ogni volta che questi file vengono aggiornati sul bucket Amazon S3.