를 사용하여 Amazon EMR 메트릭을 모니터링합니다. CloudWatch - Amazon EMR
Amazon EMR 지표를 사용하려면 어떻게 해야 하나요?Amazon EMR에 대한 액세스 CloudWatch 메트릭Amazon EMR에서 보고한 지표 CloudWatch

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

를 사용하여 Amazon EMR 메트릭을 모니터링합니다. CloudWatch

지표는 5분마다 업데이트되며 자동으로 수집되어 모든 Amazon EMR CloudWatch 클러스터에 푸시됩니다. 이 간격은 구성할 수 없습니다. 에서 보고된 Amazon EMR 지표에는 요금이 부과되지 않습니다. CloudWatch 이 5분의 데이터 포인트 지표는 63일 동안 아카이브되며, 그 이후에는 데이터가 삭제됩니다.

Amazon EMR 지표를 사용하려면 어떻게 해야 하나요?

다음 테이블에는 Amazon EMR이 보고하는 지표의 일반적인 용도가 나와 있습니다. 모든 사용 사례를 망라한 것은 아니지만 시작하는 데 참고가 될 것입니다. Amazon EMR에서 보고하는 전체 지표 목록은 Amazon EMR에서 보고한 지표 CloudWatch 섹션을 참조하세요.

방법 관련 지표
내 클러스터의 진행 상황을 추적 RunningMapTasks, RemainingMapTasks, RunningReduceTasks 및 RemainingReduceTasks 측정치를 살펴봅니다.
유휴 클러스터를 감지 IsIdle 지표는 클러스터가 활성화되었지만 현재 작업을 실행하고 있지 않은지 여부를 추적합니다. 클러스터가 일정 시간(예: 30분) 동안 유휴 상태일 때 경보가 울리도록 설정할 수 있습니다.
노드에서 저장소가 부족한 경우 감지 MRUnhealthyNodes 지표는 하나 이상의 코어 또는 태스크 노드에서 로컬 디스크 스토리지가 부족해지고 UNHEALTHY YARN 상태로 전환되는 시점을 추적합니다. 예를 들어 코어 또는 태스크 노드의 디스크 공간이 부족하여 작업을 실행할 수 없는 경우가 이에 해당합니다.
클러스터에서 스토리지 부족 감지 HDFSUtilization 지표는 클러스터의 결합된 HDFS 용량을 모니터링하며, 코어 노드를 더 추가하기 위해 클러스터 크기를 조정해야 할 수 있습니다. 예를 들어 HDFS 사용률이 높아 작업 및 클러스터 상태에 영향을 미칠 수 있습니다.
용량을 줄여 클러스터가 실행되는 경우를 감지합니다. MRLostNodes 지표는 하나 이상의 코어 또는 태스크 노드가 프라이머리 노드와 통신할 수 없는 경우를 추적합니다. 예를 들어, 프라이머리 노드가 코어 또는 태스크 노드에 접속할 수 없습니다.

자세한 내용은 AWSSupportEMR 로그 NO_SLAVE_LEFT로 클러스터 종료 및 코어 노드 FAILED_BY_MASTER 및 분석을 참조하십시오.

Amazon EMR에 대한 액세스 CloudWatch 메트릭

Amazon EMR 콘솔 또는 콘솔을 CloudWatch 사용하여 Amazon EMR이 보고하는 지표를 볼 수 있습니다. CloudWatch CloudWatch CLI 명령 mon-get-stats 또는 API를 사용하여 메트릭을 검색할 수도 있습니다. CloudWatch GetMetricStatistics Amazon EMR을 CloudWatch 사용하여 Amazon EMR에 대한 지표를 보거나 검색하는 방법에 대한 자세한 내용은 CloudWatch Amazon 사용 설명서를 참조하십시오.

참고

보다 사용하기 쉽도록 Amazon EMR 콘솔을 재설계했습니다. 이전 콘솔과 새 콘솔 간 차이점에 대해서는 아마존 EMR 콘솔 섹션을 참조하세요.

New console
새 콘솔을 사용하여 지표를 보는 방법

  1. 에 로그인하고 AWS Management Console https://console.aws.amazon.com/emr 에서 Amazon EMR 콘솔을 엽니다.

  2. 왼쪽 탐색 창의 EMR on EC2에서 클러스터를 선택하고 지표를 볼 클러스터를 선택합니다. 그러면 클러스터 세부 정보 페이지가 열립니다.

  3. 클러스터 세부 정보 페이지에서 모니터링 탭을 선택합니다. 클러스터의 진행 상황 및 상태에 대한 보고서를 로드하려면 클러스터 상태, 노드 상태 또는 입력 및 출력 옵션 중 하나를 선택합니다.

  4. 확인할 지표를 선택한 후 각 그래프를 확대할 수 있습니다. 그래프의 기간을 필터링하려면 미리 채워진 옵션을 선택하거나 사용자 지정을 선택합니다.

Old console
이전 콘솔을 사용하여 지표를 보는 방법

  1. https://console.aws.amazon.com/elasticmapreduce/에서 Amazon EMR 콘솔을 엽니다.

  2. 클러스터에 대한 지표를 보려면 클러스터를 선택하여 Summary(요약) 창을 표시합니다.

  3. 클러스터에 대한 정보를 보려면 Monitoring(모니터링)을 선택합니다. 클러스터의 진행 상황 및 상태에 대한 보고서를 로드하려면 클러스터 상태, Map/Reduce, 노드 상태 또는 IO 탭 중 하나를 선택합니다.

  4. 확인할 측정치를 선택한 후 그래프 크기를 선택할 수 있습니다. Start(시작) 및 End(종료) 필드를 편집하여 지표를 특정 기간으로 필터링합니다.

Amazon EMR에서 보고한 지표 CloudWatch

다음 표에는 Amazon EMR이 콘솔에서 보고하고 푸시하는 지표가 나와 있습니다. CloudWatch

Amazon EMR 지표

Amazon EMR은 여러 지표에 대한 데이터를 로 전송합니다. CloudWatch 모든 Amazon EMR 클러스터가 5분 간격으로 지표를 자동으로 전송합니다. 측정치는 2주 간 보관되고 그 후에는 삭제됩니다.

AWS/ElasticMapReduce 네임스페이스에 포함된 지표는 다음과 같습니다.

참고

Amazon EMR은 클러스터에서 지표를 가져옵니다. 이때 클러스터에 도달할 수 없는 경우에는 클러스터를 다시 사용할 수 있을 때까지 아무런 지표도 보고되지 않습니다.

Hadoop 2.x 버전을 실행하는 클러스터에 대해 사용할 수 있는 지표는 다음과 같습니다.

지표 설명
클러스터 상태

IsIdle

클러스터가 더 이상 작업을 실행하지 않지만 여전히 활성 상태로 요금이 발생하고 있다는 것을 나타냅니다. 아무런 작업도 실행되고 있지 않으면 1로 설정되고, 그 외에는 0으로 설정됩니다. 이 값은 5분 주기로 검사하며, 값이 1일 때는 클러스터가 검사 시에만 유휴 상태일 뿐 전체 5분간 유휴 상태라는 것을 의미하지는 않습니다. 오탐지를 방지하기 위해서는 이 값이 5분 주기의 연속 검사 1회를 넘어 1을 유지할 때 경보를 알려야 합니다. 예를 들어 30분 이상 1을 유지하는 경우 이 값에 대한 경보를 제기할 수 있습니다.

사용 사례: 클러스터 성능 모니터링

단위: 부울

ContainerAllocated

에서 할당한 리소스 컨테이너의 수. ResourceManager

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

ContainerReserved

예약된 컨테이너 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

ContainerPending

대기열에서 아직 할당되지 않은 컨테이너 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

ContainerPendingRatio

보류 중인 컨테이너와 할당된 컨테이너의 비율 (ContainerPendingRatio = ContainerPending / ContainerAllocated) ContainerAllocated = 0이면 ContainerPendingRatio ContainerPending =입니다. 의 값은 백분율이 아니라 숫자를 ContainerPendingRatio 나타냅니다. 이 값은 컨테이너 할당 동작에 따라 클러스터 리소스를 조정하는 데 유용합니다.

Units: Count

AppsCompleted

완료 상태로 YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

AppsFailed

미완료 상태로 YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

AppsKilled

종료 상태로 YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

AppsPending

대기 상태로 YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

AppsRunning

실행 상태로 YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

AppsSubmitted

YARN에게 제출된 애플리케이션 수

사용 사례: 클러스터 진행 상황 모니터링

Units: Count
노드 상태

CoreNodesRunning

작업 중인 코어 노드 수. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

CoreNodesPending

할당 대기 중인 코어 노드 수. 코어 노드를 요청한다고 해서 즉시 모두 제공되는 것은 아닙니다. 이때 이 지표가 대기 중인 요청 수를 보고합니다. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

LiveDataNodes

하둡에서 작업을 수신 중인 데이터 노드 비율

사용 사례: 클러스터 상태 모니터링

단위: 백분율

MR TotalNodes

현재 MapReduce 작업에 사용할 수 있는 노드 수 YARN 지표 mapred.resourcemanager.TotalNodes와 동등합니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MR ActiveNodes

현재 MapReduce 태스크 또는 작업을 실행 중인 노드 수 YARN 지표 mapred.resourcemanager.NoOfActiveNodes와 동등합니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MR LostNodes

LOST 상태로 표시된 MapReduce 해당 노드에 할당된 노드 수입니다. YARN 지표 mapred.resourcemanager.NoOfLostNodes와 동등합니다.

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

MR UnhealthyNodes

비정상 상태로 표시된 MapReduce 작업에 사용할 수 있는 노드 수 YARN 지표 mapred.resourcemanager.NoOfUnhealthyNodes와 동등합니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MR DecommissionedNodes

사용 중지됨 상태로 표시된 MapReduce 애플리케이션에 할당된 노드 수입니다. YARN 지표 mapred.resourcemanager.NoOfDecommissionedNodes와 동등합니다.

사용 사례: 클러스터 상태 모니터링, 클러스터 진행 상황 모니터링

Units: Count

MR RebootedNodes

재부팅되고 재부팅 상태로 표시된 사용 가능한 노드 수 MapReduce YARN 지표 mapred.resourcemanager.NoOfRebootedNodes와 동등합니다.

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

MultiMasterInstanceGroupNodesRunning

실행 중인 마스터 노드의 수입니다.

사용 사례: 마스터 노드 장애 및 교체 모니터링

Units: Count

MultiMasterInstanceGroupNodesRunningPercentage

요청된 수의 마스터 노드 인스턴스에서 실행 중인 마스터 노드의 백분율입니다.

사용 사례: 마스터 노드 장애 및 교체 모니터링

단위: 백분율

MultiMasterInstanceGroupNodesRequested

요청된 마스터 노드의 수입니다.

사용 사례: 마스터 노드 장애 및 교체 모니터링

Units: Count
IO

S3 BytesWritten

Amazon S3에 기록된 바이트 수입니다. 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

S3 BytesRead

Amazon S3에서 읽은 바이트 수입니다. 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

HDFSUtilization

현재 사용 중인 HDFS 스토리지 비율

사용 사례: 클러스터 성능 분석

단위: 백분율

HDFS BytesRead

HDFS에서 읽어온 바이트 수 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

HDFS BytesWritten

HDFS에 작성된 바이트 수 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

MissingBlocks

HDFS에 복제본이 없는 블록 수. 이는 손상된 블록일 수 있습니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

CorruptBlocks

HDFS가 손상된 것으로 보고하는 블록 수

사용 사례: 클러스터 상태 모니터링

Units: Count

TotalLoad

동시 데이터 전송 총 수

사용 사례: 클러스터 상태 모니터링

Units: Count

MemoryTotalMB

클러스터의 총 메모리 크기

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MemoryReservedMB

예약된 메모리 크기

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MemoryAvailableMB

할당 가능한 메모리 크기

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

원사 MemoryAvailablePercentage

YARN에서 사용할 수 있는 남은 메모리의 백분율 (YARN MemoryAvailablePercentage = MemoryAvailable MemoryTotal MB/MB) 이 값은 YARN 메모리 사용량을 기준으로 클러스터 리소스를 조정하는 데 유용합니다.

단위: 백분율

MemoryAllocatedMB

클러스터에 할당된 메모리 크기

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

PendingDeletionBlocks

삭제 표시된 블록 수

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

UnderReplicatedBlocks

1회 이상 복제해야 하는 블록 수

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

DfsPendingReplicationBlocks

블록 복제 상태: 복제 중인 블록, 복제 요청의 경과 시간, 성공하지 못한 복제 요청

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

CapacityRemaining기가바이트

남아있는 HDFS 디스크 용량 크기

사용 사례: 클러스터 진행 상황 모니터링, 클러스터 상태 모니터링

Units: Count

다음은 하둡 1 지표입니다.

지표 설명
클러스터 상태

IsIdle

클러스터가 더 이상 작업을 실행하지 않지만 여전히 활성 상태로 요금이 발생하고 있다는 것을 나타냅니다. 아무런 작업도 실행되고 있지 않으면 1로 설정되고, 그 외에는 0으로 설정됩니다. 이 값은 5분 주기로 검사하며, 값이 1일 때는 클러스터가 검사 시에만 유휴 상태일 뿐 전체 5분간 유휴 상태라는 것을 의미하지는 않습니다. 오탐지를 방지하기 위해서는 이 값이 5분 주기의 연속 검사 1회를 넘어 1을 유지할 때 경보를 알려야 합니다. 예를 들어 30분 이상 1을 유지하는 경우 이 값에 대한 경보를 제기할 수 있습니다.

사용 사례: 클러스터 성능 모니터링

단위: 부울

JobsRunning

클러스터에서 현재 실행 중인 작업 수

사용 사례: 클러스터 상태 모니터링

Units: Count

JobsFailed

클러스터에서 실패한 작업 수

사용 사례: 클러스터 상태 모니터링

Units: Count
맵/감소

MapTasksRunning

각 작업마다 실행 중인 맵 태스크 수. 스케줄러를 설치하여 여러 작업을 실행 중인 경우에는 다수의 그래프가 생성됩니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MapTasksRemaining

각 작업마다 남아있는 맵 태스크 수. 스케줄러를 설치하여 여러 작업을 실행 중인 경우에는 다수의 그래프가 생성됩니다. 남아있는 맵 태스크란 Running, Killed 또는 Completed 상태가 아닌 태스크를 말합니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

MapSlotsOpen

사용하지 않은 맵 태스크 용량. 이 용량은 임의 클러스터에서 현재 실행 중인 전체 맵 태스크 수를 뺀 최대 맵 태스크 수로 계산됩니다.

사용 사례: 클러스터 성능 분석

Units: Count

RemainingMapTasksPerSlot

클러스터에서 남아있는 전체 맵 작업과 사용할 수 있는 전체 맵 슬롯의 비율

사용 사례: 클러스터 성능 분석

단위: 비율

ReduceTasksRunning

각 작업마다 실행 중인 reduce 작업 수. 스케줄러를 설치하여 여러 작업을 실행 중인 경우에는 다수의 그래프가 생성됩니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

ReduceTasksRemaining

각 작업마다 남아있는 reduce 작업 수. 스케줄러를 설치하여 여러 작업을 실행 중인 경우에는 다수의 그래프가 생성됩니다.

사용 사례: 클러스터 진행 상황 모니터링

Units: Count

ReduceSlotsOpen

사용하지 않은 reduce 작업 용량. 이 용량은 임의 클러스터에서 현재 실행 중인 reduce 작업 수를 뺀 최대 reduce 작업 용량으로 계산됩니다.

사용 사례: 클러스터 성능 분석

Units: Count
노드 상태

CoreNodesRunning

작업 중인 코어 노드 수. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

CoreNodesPending

할당 대기 중인 코어 노드 수. 코어 노드를 요청한다고 해서 즉시 모두 제공되는 것은 아닙니다. 이때 이 지표가 대기 중인 요청 수를 보고합니다. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

LiveDataNodes

하둡에서 작업을 수신 중인 데이터 노드 비율

사용 사례: 클러스터 상태 모니터링

단위: 백분율

TaskNodesRunning

작업 중인 작업 노드 수. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

TaskNodesPending

할당 대기 중인 작업 노드 수. 작업 노드를 요청한다고 해서 즉시 모두 제공되는 것은 아닙니다. 이때 이 지표가 대기 중인 요청 수를 보고합니다. 이 지표의 데이터 포인트는 해당하는 인스턴스 그룹이 존재하는 경우에만 보고됩니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

LiveTaskTrackers

실행 중인 태스크 트래커 비율

사용 사례: 클러스터 상태 모니터링

단위: 백분율
IO

S3 BytesWritten

Amazon S3에 기록된 바이트 수입니다. 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

S3 BytesRead

Amazon S3에서 읽은 바이트 수입니다. 이 지표는 MapReduce 작업만 집계하며 Amazon EMR의 다른 워크로드에는 적용되지 않습니다.

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

HDFSUtilization

현재 사용 중인 HDFS 스토리지 비율

사용 사례: 클러스터 성능 분석

단위: 백분율

HDFS BytesRead

HDFS에서 읽어온 바이트 수

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

HDFS BytesWritten

HDFS에 작성된 바이트 수

사용 사례: 클러스터 성능 분석, 클러스터 진행 상황 모니터링

Units: Count

MissingBlocks

HDFS에 복제본이 없는 블록 수. 이는 손상된 블록일 수 있습니다.

사용 사례: 클러스터 상태 모니터링

Units: Count

TotalLoad

클러스터의 모든 DataNodes 사용자가 보고한 독자 및 작성자의 현재 총 수입니다.

사용 사례: 높은 I/O가 작업 실행 성능 저하에 기여하는 정도를 진단합니다. DataNode 데몬을 실행하는 워커 노드는 맵 및 축소 작업도 수행해야 합니다. 시간이 지남에 따라 TotalLoad 값이 계속 높으면 높은 I/O가 성능 저하의 원인일 수 있습니다. 이 값이 이따금 급증하는 것은 일반적인 것이며, 보통은 문제를 나타내지 않습니다.

Units: Count

클러스터 용량 지표

다음 지표는 클러스터의 현재 또는 대상 용량을 나타냅니다. 이러한 지표는 Managed Scaling 또는 자동 종료가 활성화된 경우에만 사용할 수 있습니다.

인스턴스 플릿으로 구성된 클러스터의 경우, 클러스터 용량 지표는 Units에서 측정됩니다. 인스턴스 그룹으로 구성된 클러스터의 경우, 클러스터 용량 지표는 관리형 조정 정책에 사용된 단위 유형을 기반으로 하는 VCPU에서 또는 Nodes에서 측정됩니다. 자세한 내용은 Amazon EMR 관리 안내서의 EMR Managed Scaling 사용을 참조하세요.

지표 설명

  • TotalUnitsRequested

  • TotalNodesRequested

  • TotalVCPURequested

관리형 조정에 의해 결정된 클러스터의 총 units/nodes/vCPU 대상 수입니다.

Units: Count

  • TotalUnitsRunning

  • TotalNodesRunning

  • TotalVCPURunning

실행 중인 클러스터에서 사용 가능한 현재 총unit/node/vCPU 수입니다. 클러스터 크기 조정이 요청되면 새 인스턴스가 클러스터에 추가되거나 클러스터에서 제거된 후 이 지표가 업데이트됩니다.

Units: Count

  • CoreUnitsRequested

  • CoreNodesRequested

  • CoreVCPURequested

관리형 조정에 의해 결정된 클러스터의 CORE unit/node/vCPU 대상 수입니다.

Units: Count

  • CoreUnitsRunning

  • CoreNodesRunning

  • CoreVCPURunning

클러스터에서 실행 중인 현재 CORE unit/node/vCPU 수입니다.

Units: Count

  • TaskUnitsRequested

  • TaskNodesRequested

  • TaskVCPURequested

관리형 조정에 의해 결정된 클러스터의 TASK unit/node/vCPU 대상 수입니다.

Units: Count

  • TaskUnitsRunning

  • TaskNodesRunning

  • TaskVCPURunning

클러스터에서 실행 중인 현재 TASK unit/node/vCPU 수입니다.

Units: Count

자동 종료 정책을 사용하여 자동 종료를 활성화하면 Amazon EMR은 1분 단위로 다음 지표를 생성합니다. 일부 지표는 Amazon EMR 버전 6.4.0 이상에만 사용할 수 있습니다. 자동 종료에 대한 자세한 내용은 자동 종료 정책 사용 섹션을 참조하세요.

지표 설명
TotalNotebookKernels 클러스터에서 실행 중 및 유휴 상태의 노트북 커널 총 수.

이 지표는 Amazon EMR 버전 6.4.0 이상에만 사용할 수 있습니다.
AutoTerminationIsClusterIdle 클러스터가 사용 중인지 여부를 나타냅니다.

값이 0이면 다음 구성 요소 중 하나가 클러스터를 사용하고 있음을 나타냅니다.

  • YARN 애플리케이션

  • HDFS

  • 노트북

  • 클러스터 내 UI(예: Spark 기록 서버)

값이 1이면 클러스터가 유휴 상태임을 나타냅니다. Amazon EMR은 지속적인 클러스터 유휴 상태(AutoTerminationIsClusterIdle=1)를 확인합니다. 클러스터의 유휴 시간이 자동 종료 정책의 IdleTimeout 값과 같으면 Amazon EMR은 클러스터를 종료합니다.

Amazon EMR 지표 차원

다음 테이블의 차원을 사용하여 Amazon EMR 데이터를 필터링할 수 있습니다.

측정기준 설명
JobFlowId 클러스터 ID와 동일합니다. 이는 j-XXXXXXXXXXXXX 양식의 클러스터 고유 식별자입니다. Amazon EMR 콘솔에서 클러스터를 클릭하여 이 값을 찾습니다.