클러스터에 작업 제출 - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

클러스터에 작업 제출

이 섹션에서는 Amazon EMR 클러스터에 작업을 제출하는 데 사용할 수 있는 방법을 설명합니다. 작업을 제출하려면 단계를 추가하거나 대화식으로 Hadoop 작업을 프라이머리 노드에 제출할 수 있습니다.

클러스터에 단계를 제출할 때는 다음과 같은 단계 동작 규칙을 고려합니다.

  • 단계 ID는 최대 256자를 포함할 수 있습니다.

  • 클러스터에서는 보류 중 및 실행 중 상태의 단계를 256개까지 보유할 수 있습니다.

  • 클러스터에서 실행 중인 256개의 활성 단계가 있더라도 작업을 프라이머리 노드에 대화형으로 제출할 수 있습니다. 장기 실행 클러스터의 수명 동안 무제한 수의 단계를 제출할 수 있지만, 지정된 시간에 256개의 단계만 실행 중 또는 보류 중일 수 있습니다.

  • Amazon EMR 버전 4.8.0 이상(버전 5.0.0 제외)에서는 보류 중인 단계를 취소할 수 있습니다. 자세한 정보는 단계 취소을 참조하세요.

  • Amazon EMR 버전 5.28.0 이상에서는 보류 중인 단계와 실행 중인 단계를 모두 취소할 수 있습니다. 또한 여러 단계를 병렬로 실행하여 클러스터 사용률을 향상하고 비용을 절감할 수 있습니다. 자세한 정보는 여러 단계를 병렬로 실행하기 위한 고려 사항을 참조하세요.

참고

최상의 성능을 위해 Amazon EMR에서 사용하려는 사용자 지정 부트스트랩 작업, 스크립트 및 기타 파일을 클러스터와 AWS 리전 동일한 Amazon S3 버킷에 저장하는 것이 좋습니다.