Apache 하둡 - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Apache 하둡

Apache Hadoop은 오픈 소스 Java 소프트웨어 프레임워크로 인스턴스 클러스터 전체에 걸친 대량 데이터 처리를 지원합니다. 단일 인스턴스에서 실행될 수도 있고 수천 대의 인스턴스에서 실행될 수도 있습니다. Hadoop은 MapReduce 및 Tez와 같은 다양한 처리 모델을 사용하여 처리를 여러 인스턴스에 분산하고 HDFS라는 분산 파일 시스템을 사용하여 여러 인스턴스에 데이터를 저장합니다. 하둡은 클러스터에 속한 인스턴스의 상태를 모니터링하고, 하나 이상의 노드에서 장애가 발생할 경우 이를 복구할 수 있습니다. 이처럼 Hadoop은 처리 및 스토리지 용량을 증가시켜 줄 뿐 아니라 고가용성까지 보장합니다. 자세한 내용은 Hadoop 설명서를 참조하세요.

다음 테이블에는 Amazon EMR이 Hadoop을 통해 설치하는 구성 요소와 함께 Amazon EMR 7.x 시리즈의 최신 릴리스에 포함된 Hadoop의 버전이 나열되어 있습니다.

이번 릴리스에서 Hadoop과 함께 설치된 구성 요소 버전은 릴리스 7.1.0 구성 요소 버전을 참조하십시오.

emr-7.1.0용 하둡 버전 정보
Amazon EMR 릴리스 레이블 하둡 버전 Hadoop과 함께 설치된 구성 요소

emr-7.1.0

Hadoop 3.3.6

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server

다음 테이블에는 Amazon EMR이 Hadoop을 통해 설치하는 구성 요소와 함께 Amazon EMR 6.x 시리즈의 최신 릴리스에 포함된 Hadoop의 버전이 나열되어 있습니다.

이 릴리스에서 Hadoop과 함께 설치된 구성 요소의 버전은 릴리스 6.15.0 구성 요소 버전을 참조하세요.

emr-6.15.0용 Hadoop 버전 정보
Amazon EMR 릴리스 레이블 하둡 버전 Hadoop과 함께 설치된 구성 요소

emr-6.15.0

Hadoop 3.3.6

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server

다음 테이블에는 Amazon EMR이 Hadoop을 통해 설치하는 구성 요소와 함께 Amazon EMR 5.x 시리즈의 최신 릴리스에 포함된 Hadoop의 버전이 나열되어 있습니다.

이번 릴리스에서 Hadoop과 함께 설치된 구성 요소 버전은 릴리스 5.36.2 구성 요소 버전을 참조하십시오.

emr-5.36.2의 하둡 버전 정보
Amazon EMR 릴리스 레이블 하둡 버전 Hadoop과 함께 설치된 구성 요소

emr-5.36.2

Hadoop 2.10.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server

Amazon EMR 5.18.0부터 Amazon EMR 아티팩트 리포지토리를 사용하여 특정 Amazon EMR 릴리스 버전에서 사용할 수 있는 정확한 버전의 라이브러리와 종속 항목에 대해 작업 코드를 빌드할 수 있습니다. 자세한 정보는 Amazon EMR 아티팩트 리포지토리를 사용하여 종속성 확인을 참조하세요.