AWS CloudTrail소스에서 데이터 레이크 생성

이 자습서에서는 AWS CloudTrail 소스에서 첫 번째 데이터 레이크를 생성하고 로드하기 위해 Lake Formation 콘솔에서 수행할 수 있는 작업을 안내합니다.

데이터 레이크를 만들기 위한 고수준 단계

1. Amazon S3 Simple Storage Service (Amazon S3) 경로를 데이터 레이크로 등록합니다.

2. Lake Formation Formation에 데이터 카탈로그와 데이터 레이크의 Amazon S3 위치에 쓸 수 있는 권한을 부여합니다.

3. 데이터베이스를 생성하여 Data Catalog의 메타데이터 테이블을 구성합니다.

4. 블루프린트를 사용하여 워크플로를 만드세요. 워크플로를 실행하여 데이터 원본에서 데이터를 수집합니다.

5. 다른 사람들이 데이터 카탈로그와 데이터 레이크의 데이터를 관리할 수 있도록 Lake Formation 권한을 설정하십시오.

6. Amazon S3 데이터 레이크에 가져온 데이터를 쿼리하도록 Amazon Athenake를 설정합니다.

7. 일부 데이터 스토어 유형의 경우 Amazon S3 데이터 레이크로 가져온 데이터를 쿼리하도록 Amazon Redshift Spectrum을 설정합니다.

주제

• 수강 대상
• 필수 조건
• 1단계: 데이터 분석가 사용자 생성
• 2단계: 워크플로 역할에 AWS CloudTrail 로그 읽기 권한 추가
• 3단계: 데이터 레이크용 Amazon S3 버킷 생성
• 4단계: Amazon S3 경로 등록
• 5단계: 데이터 위치 권한 부여
• 6단계: 데이터 카탈로그에 데이터베이스 생성
• 7단계: 데이터 권한 부여
• 8단계: 블루프린트를 사용하여 워크플로우 만들기
• 9단계: 워크플로 실행
• 10단계: 테이블에 SELECT 부여
• 11단계: 다음을 사용하여 데이터 레이크를 쿼리합니다. Amazon Athena