Histórico de documentos do Amazon MWAA - Amazon Managed Workflows for Apache Airflow

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Histórico de documentos do Amazon MWAA

A tabela a seguir descreve adições importantes feitas na documentação do serviço do Amazon MWAA, a partir de novembro de 2020. Para receber notificações sobre atualizações dessa documentação, inscreva-se no feed RSS.

AlteraçãoDescriçãoData

Foi adicionada uma nova classe de ambiente: mw1.micro

O Amazon MWAA agora fornece uma nova classe de ambiente: mw1.micro.

19 de novembro de 2024

Suporte para um método mais simples de acesso à API REST do Apache Airflow

O Amazon MWAA agora fornece uma abordagem simplificada para interagir com a API REST do Apache Airflow usando credenciais. AWS

23 de outubro de 2024

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.10.1. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.10.1 no Amazon MWAA.

26 de setembro de 2024

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.9.2. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.9.2 no Amazon MWAA.

9 de julho de 2024

O Amazon MWAA oferece suporte à configuração de nomes de domínio de um servidor Web personalizado

O Amazon MWAA oferece suporte à configuração de nomes de domínio de um servidor Web personalizado para ambientes privados sem acesso à Internet. Essa atualização inclui o novo tópico a seguir, que descreve como configurar um novo domínio personalizado.

18 de junho de 2024

O Amazon MWAA oferece suporte ao ajuste de escala automático de servidores Web e à API REST do Apache Airflow

O Amazon MWAA agora oferece suporte ao ajuste de escala automático de servidores Web, bem como à capacidade de acessar e usar a API REST do Apache Airflow.

16 de maio de 2024

Descrição aprimorada do comportamento de ajuste de escala automático

O tópico a seguir foi atualizado para refletir o novo comportamento de ajuste de escala automático do Amazon MWAA quando os trabalhadores assumem novas tarefas à medida que os trabalhadores do Fargate reduzem a escala.

10 de maio de 2024

Suporte para instância em tamanhos maiores

O Amazon MWAA agora oferece suporte a duas opções de instância em tamanhos maiores para workloads maiores: mw1.xlarge e mw1.2xlarge

16 de abril de 2024

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.8.1. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.8.1 no Amazon MWAA.

22 de fevereiro de 2024

Suporte à Amazon VPC compartilhada

O Amazon MWAA oferece suporte à criação de ambientes entre contas para organizações que usam o Amazon OpenSearch Service para gerenciar recursos do Amazon MWAA usando uma Amazon VPC central compartilhada em uma conta de proprietário. Como parte desse lançamento, o Amazon MWAA permite que você escolha criar e gerenciar seus próprios endpoints da VPC do Amazon.

15 de novembro de 2023

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.7.2. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.7.2 no Amazon MWAA.

6 de novembro de 2023

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.6.3. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.6.3 no Amazon MWAA.

9 de agosto de 2023

Informações sobre descontinuação de versões

Atualizado o tópico sobre a descontinuação da versão para incluir avisos de descontinuação e cronogramas para o Apache Airflow v2.0.2 e o Apache Airflow v2.2.2.

31 de julho de 2023

Novos tópicos e casos de uso

O Amazon MWAA é compatível com atualizações de versões anteriores. Essas atualizações incluem o seguinte novo tópico que descreve como atualizar o ambiente e garantir que seus recursos de fluxo de trabalho sejam compatíveis com a versão do Apache Airflow para a qual você está atualizando:

5 de junho de 2023

Tópico atualizado

Atualizadas as políticas do IAM gerenciadas pelo cliente que concedem ao usuário acesso completo ao console e à API do Amazon MWAA. A atualização descreve por que você deve fornecer permissão para iam:PassRole para permitir que um usuário transfira perfis para o Amazon MWAA. O Amazon MWAA usa essas permissões para realizar ações em nome do usuário.

12 de abril de 2023

Nova orientação

Tópico atualizado sobre a configuração AWS Secrets Manager como back-end do Amazon MWAA para fornecer orientação sobre o uso de padrões de pesquisa. O uso de padrões de pesquisa restringe os segredos que o Apache Airflow pesquisa e reduz o número de chamadas de API que o Amazon MWAA faz ao Secrets Manager para recuperar conexões e variáveis. Isso reduz os custos associados ao uso do Secrets Manager como back-end.

12 de abril de 2023

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.5.1. Essa atualização inclui informações sobre pacotes de provedores atualizados e detalhes sobre o uso do Apache Airflow v2.5.1 no Amazon MWAA.

11 de abril de 2023

Novos tópicos e casos de uso

Adicionado um novo tópico sobre o uso de um script de startup com um ambiente do Amazon MWAA. Este tópico descreve como configurar um script de startup para um ambiente existente, usando-o para instalar runtimes do Linux e definir variáveis de ambiente.

3 de abril de 2023

Atualizada a seção sobre acesso a servidores web privados

Atualizado o seguinte tópico sobre acesso a servidores web privados. A atualização esclarece que, em ambientes com acesso privado ao servidor web, você deve usar um repositório wheel do Python (.whl) para empacotar e instalar dependências.

24 de fevereiro de 2023

Adicionadas informações sobre versões obsoletas do Apache Airflow

Atualizado o tópico Versões com novas informações sobre como o Amazon MWAA gerenciou versões obsoletas do Apache Airflow. Removida seção sobre a atualização para uma versão mais recente do Apache Airflow e seção que descrevia as mudanças entre o Apache Airflow v1 e o Apache Airflow v2. Para obter mais informações sobre a migração para uma nova versão do Apache Airflow, consulte o Guia de migração do Amazon MWAA.

17 de fevereiro de 2023

Correções nas métricas de contêiner do Amazon MWAA

Atualizado o tópico de métricas de contêiner e removido um conjunto de métricas erradas que não existiam na dimensão Cluster. Adicionada uma seção adicional que descreve como você pode avaliar o número de operadores adicionais que um ambiente está utilizando em um determinado momento ao representar graficamente a métrica CPUUtilization ou a MemoryUtilization do componente AdditionalWorker e definir o tipo de estatística como Sample Count.

20 de janeiro de 2023

Nova versão do Apache Airflow

O Amazon MWAA agora oferece suporte ao Apache Airflow v2.4.3. Essa atualização inclui informações sobre pacotes de fornecedores atualizados, detalhes sobre o uso do Apache Airflow v2.4.3 no Amazon MWAA e informações consolidadas sobre quais recursos são compatíveis com cada versão do Apache Airflow no Amazon MWAA.

5 de janeiro de 2023

Tópico atualizado sobre perfil vinculado a serviços

Informações atualizadas sobre a função vinculada ao serviço que a Amazon MWAA usa para criar e gerenciar AWS recursos em seu nome, incluindo informações sobre como você pode excluir a função vinculada ao serviço quando não precisar mais dela. Isso inclui uma política atualizada de permissão de função vinculada ao serviço que permite que a Amazon MWAA publique métricas adicionais CloudWatch sob o namespace. AWS/MWAA

18 de novembro de 2022

Novo tópico sobre métricas de serviço

Adicionado um novo tópico que descreve as métricas de serviço emitidas pelo Amazon MWAA no namespace AWS/MWAA. São incluídos agendadores, operadores e servidores web de métricas de cluster do Amazon ECS, métricas do Amazon SQS para as filas que permitem ao Amazon MWAA separar agendadores e operadores, bem como métricas do Amazon RDS para o banco de dados de metadados.

18 de novembro de 2022

Novo tópico

Adicionadas novas orientações sobre a modificação de um arquivo de restrições para especificar novas versões dos pacotes do provedor para usar com seu ambiente Amazon MWAA.

18 de novembro de 2022

Entrada de perguntas frequentes atualizada

Atualizadas as informações relacionadas à elegibilidade do Amazon MWAA para a HIPAA.

15 de novembro de 2022

Novo tópico

Adicionado um novo tópico sobre o uso de chaves de contexto de condição global aws:SourceArn e aws:SourceAccount em uma política de confiança di perfil de execução do Amazon MWAA, a fim de evitar a confusão entre serviços.

21 de outubro de 2022

Novo código de exemplo

Foram adicionadas instruções atualizadas e um exemplo de código DAG que grava métricas personalizadas no nível do sistema operacional em. CloudWatch

13 de setembro de 2022

Novo código de exemplo

Foram adicionadas instruções atualizadas e um novo exemplo de código AWS Lambda Python que recupera um token CLI do Apache Airflow e, em seguida, invoca um DAG em um ambiente específico do Amazon MWAA.

12 de setembro de 2022

Novos diagramas arquitetônicos

Adicionados novos diagramas de arquitetura que demonstram um ambiente Amazon MWAA com um servidor web público e privado.

12 de setembro de 2022

Novo código de exemplo

Adicionadas instruções atualizadas e um novo exemplo de código do DAG que recupera um token CLI do Apache Airflow e, em seguida, invoca outro DAG em um ambiente diferente do Amazon MWAA.

16 de agosto de 2022

Novo código de exemplo

Adicionadas instruções atualizadas e um novo DAG que consulta o Aurora PostgreSQL de um ambiente para obter informações de metadados, grava o resultado em arquivos CSV e armazena os arquivos no Amazon S3.

12 de agosto de 2022

Novo código de exemplo

Foram adicionadas instruções atualizadas e um novo DAG que atualiza um AWS CodeArtifact token em tempo de execução e armazena o resultado no Amazon S3.

3 de agosto de 2022

Novo código de exemplo

Adicionadas instruções atualizadas e exemplo de código DAG para uso de ECSOperator no Amazon MWAA.

26 de julho de 2022

Novo código de exemplo

Adicionadas instruções atualizadas e exemplo de código DAG para uso de SSHOperator no Amazon MWAA.

15 de julho de 2022

Novo código de exemplo

Adicionadas novas instruções e exemplo de código DAG para usar o dbt Postgres com o Amazon MWAA.

17 de junho de 2022

Novos tópicos e casos de uso

Adicionadas novas instruções e um exemplo de código do DAG para instalar dependências usando arquivos wheel do Python para ambientes Amazon MWAA com acesso público e privado.

13 de maio de 2022

Novos tópicos e casos de uso

Foram adicionadas novas orientações sobre como escolher para quais métricas do Apache Airflow o Amazon MWAA envia. CloudWatch

19 de abril de 2022

Novos guias

O Amazon MWAA oferece um guia de migração para migrar fluxos de trabalho do Apache Airflow de implantações autogerenciadas, bem como de ambientes Amazon MWAA existentes.

7 de março de 2022

Novos tópicos e casos de uso

Adicionadas novas práticas recomendadas de segurança para trabalhar com o Apache Airflow, incluindo uma solução para detectar alterações nos privilégios de usuário do Apache Airflow.

18 de fevereiro de 2022

Novo código de exemplo

Foi adicionada uma nova amostra de código para criar reconhecimento de fuso horário DAGs usando o Pendulum e esclareceu como usar um plug-in personalizado para alterar o fuso horário no qual os registros do Apache Airflow são criados.

11 de fevereiro de 2022

Lançamento do Apache Airflow v2.2.2

O Amazon Managed Workflows para Apache Airflow agora oferece suporte ao Apache Airflow v2.2.2. A partir da versão 2.2, o Amazon MWAA instalará pacotes e plug-ins personalizados do Python diretamente no servidor web Apache Airflow, permitindo maior flexibilidade para gerenciar seus ambientes. Para obter mais informações, consulte.

27 de janeiro de 2022

Novos tutoriais

Foi adicionado um novo tutorial que demonstra a criação de uma nova função personalizada do Apache Airflow e a atribuição da função a um usuário do Apache Airflow mapeado a partir do IAM para limitar o acesso do usuário a um subconjunto especificado. DAGs

8 de dezembro de 2021

Correções

Corrigida uma recomendação de melhores práticas para definir o valor de scheduler.min_file_process_interval para otimizar o uso da CPU. Adicionado um exemplo de política do IAM concedendo acesso aos recursos do Secrets Manager no perfil de execução. Adicionado tópico de solução de problemas sobre o uso das chaves de condição do Secrets Manager.

22 de novembro de 2021

Novo código de exemplo

O novo exemplo de código a seguir foi adicionado para modificar o fuso horário no qual DAGs são processados usando um plug-in personalizado e um novo tópico de solução de problemas para invocar o comando CLI do dags backfill Apache Airflow de dentro de um operador bash.

1º de novembro de 2023

Correções

Corrigiu problemas na amostra de código do operador do Amazon ECS e esclareceu as permissões adicionais necessárias na função de execução do Amazon MWAA para permitir que o ambiente acesse o grupo de registros de tarefas do Amazon ECS em Logs. CloudWatch

26 de outubro de 2021

Novo código de exemplo

Adicionado novo exemplo de código que consulta o banco de dados PostgreSQL do Aurora em busca de informações relevantes às execuções do DAG e grava os resultados em um arquivo CSV armazenado no Amazon S3.

1.º de outubro de 2021

Correções

Corrigidas as informações sobre como o Amazon MWAA sincroniza automaticamente objetos novos e alterados do seu bucket de destino do Amazon S3 com seus agendadores e operadores.

1.º de outubro de 2021

Atual compatibilidade

O Amazon MWAA agora oferece suporte a pacotes de fornecedores adicionais para o Apache Airflow 2.0+. Para saber mais sobre os pacotes com suporte, consulte:

24 de setembro de 2021

Novos comandos e procedimentos

Foram adicionados mais exemplos de orientação e AWS CLI comando para criar um endpoint de gateway Amazon S3 ao usar uma Amazon VPC sem acesso à Internet:

24 de setembro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

19 de setembro de 2021

Nova região compatível

O Amazon MWAA já está disponível nas seguintes regiões:

  • Ásia-Pacífico (Mumbai): ap-south-1

  • Ásia-Pacífico (Seul): ap-northeast-2

  • Europa (Londres): eu-west-2

  • Europa (Paris): eu-west-3

  • Canadá (Central): ca-central-1

  • América do Sul (São Paulo): sa-east-1

Para obter mais informações sobre endpoints de serviços e disponibilidade de região, consulte:

31 de agosto de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

  • Atualizadas as políticas de amostra para permitir que o Amazon MWAA busque as configurações do Amazon S3 em nível de conta (s3:GetAccountPublicAccessBlock) em Perfil de execução do Amazon MWAA.

27 de agosto de 2021

Correções

Adicionadas as seguintes alterações:

27 de agosto de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

20 de agosto de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

13 de agosto de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

13 de agosto de 2021

Correções

Adicionadas as seguintes alterações:

13 de agosto de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

6 de agosto de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

6 de agosto de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

29 de julho de 2021

Correções

Adicionadas as seguintes alterações:

29 de julho de 2021

Tópicos removidos ou movidos

Adicionadas as seguintes alterações:

23 de julho de 2021

Novos guias

Adicionadas as seguintes alterações:

23 de julho de 2021

Correções

Adicionadas as seguintes alterações:

23 de julho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

16 de julho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

9 de julho de 2021

Novos guias

Adicionadas as seguintes alterações:

9 de julho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

2 de julho de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

2 de julho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

25 de junho de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

25 de junho de 2021

Novos guias

Adicionadas as seguintes alterações:

25 de junho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

18 de junho de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

18 de junho de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

2 de junho de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

2 de junho de 2021

Novos guias

Adicionadas as seguintes alterações:

2 de junho de 2021

Correções

Adicionadas as seguintes alterações:

  • Foram adicionados endpoints VPC Apache Airflow ao AWS CloudFormation modelo na Opção três: criar uma rede VPC sem acesso à Internet a. Criar a rede VPC

2 de junho de 2021

Lançamento do Apache Airflow v2.0.2

Lançamento da disponibilidade geral do Apache Airflow v2.0.2.

26 de maio de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

14 de maio de 2021

Correções

Adicionadas as seguintes alterações:

12 de maio de 2021

Tópicos removidos ou movidos

Adicionadas as seguintes alterações:

10 de maio de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

10 de maio de 2021

Tópicos removidos ou movidos

Adicionadas as seguintes alterações:

7 de maio de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

7 de maio de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

30 de abril de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

30 de abril de 2021

Novos guias

Adicionadas as seguintes alterações:

30 de abril de 2021

Correções

Adicionadas as seguintes alterações:

30 de abril de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

23 de abril de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

23 de abril de 2021

Novos guias

Adicionadas as seguintes alterações:

23 de abril de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

16 de abril de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

16 de abril de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

9 de abril de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

9 de abril de 2021

Correções

Adicionadas as seguintes alterações:

31 de março de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

26 de março de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

19 de março de 2021

Novos guias

Adicionadas as seguintes alterações:

19 de março de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

12 de março de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

12 de março de 2021

Novos guias

Adicionadas as seguintes alterações:

12 de março de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

5 de março de 2021

Atual compatibilidade

Adicionadas as seguintes alterações:

4 de março de 2021

Correções

Adicionadas as seguintes alterações:

4 de março de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

26 de fevereiro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

25 de fevereiro de 2021

Novos tutoriais

Adicionadas as seguintes alterações:

22 de fevereiro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

22 de fevereiro de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

22 de fevereiro de 2021

Novos comandos e procedimentos

Adicionadas as seguintes alterações:

22 de fevereiro de 2021

Novo código de exemplo

Adicionadas as seguintes alterações:

17 de fevereiro de 2021

Novos comandos e procedimentos

Adicionadas as seguintes alterações:

  • AWS CLI Comandos adicionados às Trabalhando com o DAGs Amazon MWAA páginas.

  • O Apache Airflow não oferece suporte a comandos serializados na DAGs CLI. Como a CLI é executada no servidor web, que não tem plug-ins ou requisitos por motivos de segurança, qualquer ambiente MWAA com plugins.zip ou requirements.txt não suportará esses comandos. Movido os comandos list_dags e backfill do Apache Airflow para comandos não compatíveis em Como acessar o Apache Airflow.

17 de fevereiro de 2021

GitHub lançar

Os documentos do guia do usuário agora são de código aberto em. GitHub Escolha “Editar esta página em GitHub” em qualquer página.

17 de fevereiro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

12 de fevereiro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

5 de fevereiro de 2021

Tópicos removidos ou movidos

Adicionadas as seguintes alterações:

4 de fevereiro de 2021

Amazon MAA CloudFormation

Atualize os parâmetros para criar um ambiente no Amazon MWAA CloudFormation.

  • Remover SubnetList.

  • Remover TagList.

  • Adicionar NetworkConfiguration.

  • Adicionar TagMap.

  • Adicionar exemplos de solicitação de criação de ambiente.

4 de fevereiro de 2021

Novos tópicos e casos de uso

Adicionadas as seguintes alterações:

29 de janeiro de 2021

Lançamento do Amazon MWAA

Lançamento da disponibilidade geral do Amazon Managed Workflows for Apache Airflow.

  • Documentação do guia do usuário

  • AWS CloudFormation documentação

24 de novembro de 2020