Amazon EMR Spark 작업에서 수직 오토스케일링 사용

Amazon EMR on EKS vertical autoscaling은 Amazon EMR Spark 애플리케이션에 제공하는 워크로드의 요구 사항에 맞게 메모리와 CPU 리소스를 자동으로 조정합니다. 이 기능은 리소스 관리를 간소화합니다.

Amazon EMR Spark 애플리케이션의 실시간 및 과거 리소스 사용률을 추적하기 위해 수직 Autoscaling은 Kubernetes Vertical Pod Autoscaler(VPA)를 활용합니다. 수직 오토스케일링 기능은 가 VPA 수집하는 데이터를 사용하여 Spark 애플리케이션에 할당된 메모리와 CPU 리소스를 자동으로 조정합니다. 이렇게 간소화된 프로세스는 안정성을 높이고 비용을 최적화합니다.

주제

• 설정
• 시작하기
• 구성
• 권장 사항 모니터링
• 설치 제거