AWS Glue FAQ의 서버리스 ETL

이 섹션에서는 AWS Glue의 서버리스 ETL에 대해 자주 묻는 질문에 답변합니다.

작업에 Apache Spark 대신 Python 셸을 AWS Glue 사용해야 하는 경우는 언제인가요?

Apache Spark의 분산 컴퓨팅 기능이 필요하지 않은 기본 ETL 작업 또는 소규모 데이터 세트가 있는 경우 Python 쉘을 사용합니다. 더 복잡한 ETL 작업이나 Spark가 처리하도록 최적화된 높은 처리 능력이 필요한 대규모 데이터 세트에 Apache Spark를 사용하십시오.

프로젝트에 권장되는 AWS Glue 버전은 무엇입니까?

일반적으로의 최신 버전을 사용하는 것이 좋습니다 AWS Glue. AWS Glue 버전 페이지에는 다양한 Python 및 Spark 버전과의 호환성과 함께 버전 간의 차이점이 나열되어 있습니다.