기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
Amazon Managed Workflows for Apache Airflow용 코드 예제
이 가이드에는 Amazon Managed Workflows for Apache Airflow 환경에서 사용할 수 있는 DAG 및 사용자 지정 플러그인을 비롯한 코드 샘플이 포함되어 있습니다. AWS 서비스에서 Apache Airflow를 사용하는 더 많은 예제는 Apache Airflow GitHub 리포지토리의 dags
샘플
- DAG를 사용하여 CLI에서 변수 가져오기
- SSHOperator을(를) 사용하여 SSH 연결 생성
- Apache Airflow Snowflake 연결에 AWS Secrets Manager의 암호 키 사용
- CloudWatch에서 DAG를 사용하여 사용자 지정 지표 작성
- Amazon MWAA 환경에서 Aurora PostgreSQL 데이터베이스 정리
- Amazon S3의 CSV 파일로 환경 메타데이터 내보내기
- Apache Airflow 변수에 AWS Secrets Manager 암호 키 사용
- Apache Airflow 연결 AWS Secrets Manager 에의 보안 키 사용
- Oracle을 이용한 사용자 지정 플러그인 생성
- 런타임 환경 변수를 생성하는 사용자 지정 플러그인 생성
- Amazon MWAA에서 DAG 시간대 변경
- CodeArtifact 토큰 새로고침
- Apache Hive 및 Hadoop을 사용하여 사용자 지정 플러그인 생성
- Apache Airflow PythonVirtualenvOperator용 사용자 지정 플러그인 생성
- Lambda 함수를 사용한 DAG 호출
- 여러 Amazon MWAA 환경에서 DAG 호출
- Amazon RDS for Microsoft SQL Server와 함께 Amazon MWAA 사용
- Amazon MWAA와 Amazon EMR 사용
- Amazon EKS에서 Amazon MWAA 사용
- ECSOperator를 사용하여 Amazon ECS에 연결
- Amazon MWAA에서 dbt 사용
- AWS블로그 및 튜토리얼