기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
Step Functions 및 Amazon Redshift API를 사용하여 ETL/ELT 워크플로 실행
이 샘플 프로젝트에서는 Step Functions 및 Amazon Redshift Data API를 사용하여 Amazon Redshift 데이터 웨어하우스로 데이터를 로드하는 ETL/ELT 워크플로를 실행하는 방법을 보여줍니다.
이 프로젝트에서 Step Functions는 AWS Lambda 함수와 Amazon Redshift Data API를 사용하여 필요한 데이터베이스 객체를 생성하고 예제 데이터 세트를 생성한 다음 차원 테이블 로드와 팩트 테이블을 수행하는 두 작업을 병렬로 실행합니다. 두 차원 로드 작업 모두 성공적으로 종료되면 Step Functions는 팩트 테이블에 대한 로드 작업을 실행하고 검증 작업을 실행한 다음 Amazon Redshift 클러스터를 일시 중지합니다.
참고
ETL 로직을 수정하여 Amazon S3와 같은 다른 소스에서 데이터를 받을 수 있으므로 COPY 명령을 사용하여 Amazon S3에서 Amazon Redshift 테이블로 데이터를 복사할 수 있습니다.
Amazon Redshift 및 Step Functions 서비스 통합에 대한 자세한 내용은 다음 가이드를 참조하세요.
Lambda 및 Amazon Redshift의 IAM 정책에 대한 자세한 내용은 다음 가이드를 참조하세요.
참고
이 샘플 프로젝트를 사용할 때 요금이 발생할 수 있습니다.
신규 AWS 사용자의 경우 무료 사용 티어를 사용할 수 있습니다. 이 계층에서 특정 사용 수준 미만의 서비스는 무료입니다. AWS
비용 및 프리 티어에 대한 자세한 내용은 AWS Step Functions 요금
1단계: 상태 시스템 만들기
-
Step Functions 콘솔
을 열고 상태 시스템 생성을 선택합니다. -
템플릿에서 생성을 선택하고 관련 스타터 템플릿을 찾습니다. 다음을 선택하여 계속 진행합니다.
-
템플릿 사용 방법을 선택합니다.
-
데모 실행 - 읽기 전용 상태 시스템을 생성합니다. 검토 후 워크플로와 모든 관련 리소스를 생성할 수 있습니다.
-
빌드 기반 -는 자체 리소스를 사용하여 검토, 사용자 지정 및 배포할 수 있는 편집 가능한 워크플로 정의를 제공합니다. (함수 또는 대기열과 같은 관련 리소스는 자동으로 생성되지 않습니다.)
-
-
템플릿 사용을 선택하여 계속 선택합니다.
참고
계정에 배포된 서비스에 표준 요금이 적용됩니다.
2단계: 데모 상태 시스템 실행
데모 실행 옵션을 선택한 경우 모든 관련 리소스가 배포되고 실행할 준비가 됩니다. 빌드 옵션을 선택한 경우 사용자 지정 워크플로를 실행하기 전에 자리 표시자 값을 설정하고 추가 리소스를 생성해야 할 수 있습니다.
배포 및 실행을 선택합니다.
AWS CloudFormation 스택이 배포될 때까지 기다립니다. 이 프로세스는 최대 10분이 걸릴 수 있습니다.
실행 시작 옵션이 나타나면 입력을 검토하고 실행 시작을 선택합니다.
축하합니다!
이제 상태 시스템의 데모가 실행 중이어야 합니다. 그래프 보기에서 상태를 선택하여 입력, 출력, 변수, 정의 및 이벤트를 검토할 수 있습니다.
