AWS 데이터 파이프라인을 사용하여 데이터 내보내기 - AWS 규범적 지침

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

AWS 데이터 파이프라인을 사용하여 데이터 내보내기

AWS 데이터 파이프라인은 데이터 기반 워크플로를 위한 웹 서비스입니다. 데이터 파이프라인을 사용하여 MySQL용 Amazon RDS에서 Amazon S3로 데이터를 자동으로 이동할 수 있습니다. 데이터 파이프라인은 일련의 작업 또는 작업을 순차적으로 실행하고 데이터를 Amazon S3에.csv 파일로 내보냅니다.

파이프라인은 다음 방법 중 하나로 생성할 수 있습니다.

  • 콘솔에서 템플릿을 선택합니다.RDS MySQL 테이블 전체를 S3로 복사소스에 대한 값을 제공하고 매개 변수의 값을 제공합니다.

  • AWS CLI에서 데이터 파이프라인 객체를 JSON으로 정의하고, 파이프라인을 생성하고, 업로드하고, 활성화합니다.

Data Pipeline을 사용하면 내보내기 작업을 예약하고 모니터링할 수 있다는 이점이 있습니다. 또한 더 큰 테이블의 경우 Amazon EC2 대신 Amazon EMR을 사용할 수 있습니다. 자세한 내용 및 예제는 다음을 참조하십시오.AWS 데이터 파이프라인 설명서.

참고:S3 객체를 비용을 절감하는 스토리지 계층으로 전환하려면 구성하는 것이 좋습니다.아마존 S3 라이프사이클데이터 내보내기가 수행되는 S3 버킷의 규칙