Exemplos de código para o Amazon Managed Workflows for Apache Airflow

Este guia contém exemplos de código, incluindo DAGs plug-ins personalizados, que você pode usar em um ambiente Amazon Managed Workflows for Apache Airflow. Para obter mais exemplos de uso do Apache Airflow com AWS serviços, consulte o dagsdiretório no repositório do Apache Airflow. GitHub

Amostras

• Usando a DAG para importar variáveis no CLI
• Criando uma SSH conexão usando o SSHOperator
• Usando uma chave secreta AWS Secrets Manager para uma conexão do Apache Airflow Snowflake
• Usando a DAG para escrever métricas personalizadas em CloudWatch
• Limpeza do SQL banco de dados Aurora Postgre em um ambiente Amazon MWAA
• Exportação de metadados do ambiente para CSV arquivos no Amazon S3
• Usando uma chave secreta AWS Secrets Manager para uma variável do Apache Airflow
• Usando uma chave secreta AWS Secrets Manager para uma conexão Apache Airflow
• Como criar um plugin personalizado com a Oracle
• Criar um plug-in personalizado que gera variáveis de ambiente de runtime
• Alterando o fuso horário DAG de um na Amazon MWAA
• Atualizando um token CodeArtifact
• Como criar de um plug-in personalizado com o Apache Hive e o Hadoop
• Criação de um plug-in personalizado para o Apache Airflow PythonVirtualenvOperator
• Invocando DAGs com uma função Lambda
• Invocando DAGs em diferentes ambientes da Amazon MWAA
• Usando a Amazon MWAA com a Amazon RDS para Microsoft SQL Server
• Como usar o Amazon MWAA com o Amazon EMR
• Usando a Amazon MWAA com a Amazon EKS
• Conectando-se à Amazon ECS usando o ECSOperator
• Usando dbt com a Amazon MWAA
• AWS blogs e tutoriais

AWS blogs e tutoriais

• Trabalhando com a Amazon EKS e a Amazon MWAA para o Apache Airflow v2.x