새로운 기능 - 아마존 EMR
아마존 EMR 7.2.0아마존 EMR 6.15.0아마존 EMR 5.36.2SigV4 호환성

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

새로운 기능

이 페이지에서는 Amazon EMR 7.x, 6.x 및 5.x의 최신 릴리스에서 사용할 수 있는 변경 사항 및 기능에 대해 설명합니다.

이 릴리스 노트는 Amazon EMR 7.2.0, Amazon EMR 6.15.0 및 Amazon EMR 5.36.2 페이지에서도 확인할 수 있으며, 각 릴리스에 대한 애플리케이션 버전, 구성 요소 버전 및 사용 가능한 구성 분류도 함께 제공됩니다.

참고

이후 출시된 Amazon EMR 사용 AWS 시그니처 버전 4 (SigV4) 를 사용하여 Amazon S3에 대한 요청을 인증합니다. 지원하는 Amazon EMR 릴리스를 사용하는 것이 좋습니다.SigV4 새 S3 버킷에 액세스하고 워크로드가 중단되지 않도록 하기 위해서입니다. 자세한 정보 및 지원하는 Amazon EMR 릴리스 목록은 SigV4, 를 참조하십시오아마존 EMR 및 AWS 서명 버전 4.

아마존 EMR 7.2.0 (7.x 시리즈 최신 릴리스)

새 Amazon EMR 릴리스는 최초 출시일의 첫 번째 지역부터 시작하여 며칠에 걸쳐 여러 지역에서 제공됩니다. 이 기간에는 사용자 리전에서 최신 릴리스 버전이 제공되지 않을 수도 있습니다.

다음 릴리스 노트에는 Amazon EMR 릴리스 7.2.0에 대한 정보가 포함되어 있습니다. 변경 사항은 7.2.0을 기준으로 합니다.

새로운 기능

  • 애플리케이션 업그레이드 — Amazon EMR 7.2.0 application upgrades include Iceberg 1.5.0-amzn-0 and Delta 3.1.0.

  • Amazon은 Flink 및 Hive와 같은 HBase 다른 애플리케이션을 Amazon S3 Express One Zone 스토리지 클래스와 함께 사용할 수 있도록 지원을 EMR 추가합니다.

  • 이번 릴리스에는 복원된 객체를 읽는 기능이 추가되어 프로토콜을 사용하여 S3 위치에서 Glacier 객체를 읽을 수 있습니다. S3A 이 기능은 스파크, 플링크, 하이브에서 작동합니다.

  • 관리형 크기 조정 기능을 갖춘 노드 레이블 - 시장 유형 또는 노드 유형에 따라 인스턴스에 노드 레이블을 사용하면 Amazon의 자동 크기 조정을 개선할 수 EMR 있습니다. 자세한 내용은 Amazon의 관리형 조정 사용을 참조하십시오EMR.

알려진 문제

  • 파이썬 3.11은 EMR 스튜디오에서 지원되지 않습니다.

변경 사항, 향상된 기능 및 해결된 문제

  • 이 릴리스에서는 내부 단계 정리 작업 중에 발생할 수 있는 교착 상태 문제가 수정되었습니다. 이 작업은 클러스터에서 완료되는 단계의 수명 주기를 관리합니다. EMR 이 문제는 단계 작업 및 규모 조정과 같은 중요한 Amazon EMR 작업에 영향을 미칩니다.

  • 이 릴리스는 특정 기존 로그 파일이 AMIs 있는 사용자 지정 클러스터에서 Amazon EMR 로그 관리 데몬이 실패할 수 있는 문제를 해결합니다.

  • Amazon EMR 7.2.0은 클러스터 관리 및 모니터링 활동을 담당하는 Amazon EMR 데몬을 업그레이드합니다. AWS SDKv1에서 v2로.

  • Amazon EMR 5.36 이상, 6.6 이상 또는 7.0 이상의 최신 패치 릴리스로 클러스터를 시작하면 Amazon은 기본 Amazon에 대해 최신 Amazon Linux 2023 또는 Amazon Linux 2 릴리스를 EMR 사용합니다. EMR AMI 자세한 내용은 Amazon용 기본 Amazon Linux AMI 사용을 참조하십시오EMR.

    OsReleaseLabel (아마존 리눅스 버전) Amazon Linux 커널 버전 사용 가능한 날짜 지원되는 리전
    2023.5.20240819.0 6.1.102-111.182.amzn2023 2024년 8월 20일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 아시아 태평양 (하이데라바드), 중동 (), 유럽 (스페인UAE), 유럽 (취리히), 아시아 태평양 (멜버른), 이스라엘 (텔아비브), 캐나다 서부 (캘거리)
    2023.5.20240730.0 6.1.97-104.177.amzn2023 2024년 8월 2일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 아시아 태평양 (하이데라바드), 중동 (), 유럽 (스페인UAE), 유럽 (취리히), 아시아 태평양 (멜버른), 이스라엘 (텔아비브), 캐나다 서부 (캘거리)
    2023.5.20240722.0 6.1.97-104.177.amzn2023 2024년 7월 24일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 아시아 태평양 (하이데라바드), 중동 (), 유럽 (스페인UAE), 유럽 (취리히), 아시아 태평양 (멜버른), 이스라엘 (텔아비브), 캐나다 서부 (캘거리)
    2023.5.20240708.0 6.1.96-102.177.amzn2023 2024년 7월 8일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), 캐나다 서부 (캘거리), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)

아마존 EMR 6.15.0 (6.x 시리즈 최신 릴리스)

새 Amazon EMR 릴리스는 최초 출시일의 첫 번째 지역부터 시작하여 며칠에 걸쳐 여러 지역에서 제공됩니다. 이 기간에는 사용자 리전에서 최신 릴리스 버전이 제공되지 않을 수도 있습니다.

다음 릴리스 노트에는 Amazon EMR 릴리스 6.15.0에 대한 정보가 포함되어 있습니다. 변경 사항은 6.14.0에 관련됩니다. 릴리스 일정에 대한 자세한 내용은 6.15.0 변경 로그 섹션을 참조하세요.

새로운 기능

  • 애플리케이션 업그레이드 — Amazon EMR 6.15.0 application upgrades include Apache Hadoop 3.3.6, Apache Hudi 0.14.0-amzn-0, Iceberg 1.4.0-amzn-0, and Trino 426.

  • 에서 실행되는 EMR 클러스터의 시작 속도 향상 EC2 — 이제 EMR EC2 클러스터에서 Amazon 시작 속도가 최대 35% 빨라졌습니다. 이번 개선 덕분에 고객은 대부분 대략 5분 만에 클러스터를 시작할 수 있게 되었습니다.

  • CodeWhisperer for EMR Studio — 이제 Amazon CodeWhisperer EMR Studio와 함께 Amazon을 사용하여 코드를 작성할 때 실시간 추천을 받을 수 JupyterLab 있습니다. CodeWhisperer 주석을 작성하고, 한 줄의 코드를 완성하고, line-by-line 추천하고, 완전한 형식의 함수를 생성할 수 있습니다.

  • Flink를 통한 작업 재시작 시간 단축 — Amazon EMR 6.15.0 이상에서는 Apache Flink에 몇 가지 새로운 메커니즘을 사용하여 작업 복구 또는 조정 작업 중 작업 재시작 시간을 개선할 수 있습니다. 이는 실행 그래프의 복구 및 재시작 속도를 최적화하여 작업 안정성을 향상시킵니다.

  • 오픈 테이블 형식에 대한 테이블 수준의 세분화된 액세스 제어 — EMR Amazon 6.15.0 이상에서는 데이터에 액세스하는 클러스터에서 Amazon의 Spark 작업을 실행할 때 EMR EC2 AWS Glue 데이터 카탈로그, 사용할 수 있습니다 AWS Lake Formation Hudi, Iceberg 또는 Delta Lake 기반 테이블에 표, 행, 열 및 셀 수준 권한을 적용할 수 있습니다.

  • 하둡 업그레이드 — Amazon EMR 6.15.0에는 아파치 하둡을 버전 3.3.6으로 업그레이드하는 기능이 포함되어 있습니다. 하둡 3.3.6은 아마존 EMR 6.15 배포 당시의 최신 버전으로, 아파치가 2023년 6월에 출시했습니다. Amazon의 이전 릴리스 EMR (6.9.0~6.14.x) 에서는 하둡 3.3.3을 사용했습니다.

    업그레이드에는 수백 개의 개선 및 수정 사항, 재구성 가능한 데이터 노드 매개 변수, 모든 라이브 데이터 노드에서 대량 재구성 작업을 시작하는 DFSAdmin 옵션, 검색이 많은 독자가 읽을 수 있는 여러 범위를 지정할 수 있는 벡터 기능이 포함되어 있습니다. API 또한 Hadoop 3.3.6에는 write-ahead log () 에 대한 지원 HDFS APIs 및 시맨틱이 추가되어 다른 스토리지 시스템 구현에서도 실행할 수 있습니다. WAL HBase 자세한 내용을 확인하려면Apache Hadoop 하둡 설명서에서 버전 3.3.4, 3.3.5 및 3.3.6의 변경 로그를 참조하세요.

  • 에 대한 지원 AWS SDKJava의 경우 버전 2 - Amazon EMR 6.15.0 애플리케이션에서 사용할 수 있습니다. AWS SDK자바 버전 1.12.569 또는 2.20.160의 경우 애플리케이션이 v2를 지원하는 경우 The AWS SDKJava 2.x의 경우 버전 1.x 코드 베이스를 대대적으로 재작성한 것입니다. Java 8+에 토대를 두고 있으며, 요청이 많았던 기능들을 몇 가지 추가했습니다. 여기에는 비블로킹 I/O에 대한 지원과 런타임 시 다른 HTTP 구현을 연결하는 기능이 포함됩니다. Java v1에서 SDK v2로의 마이그레이션 안내서를 비롯한 자세한 내용은 다음을 참조하십시오. AWS SDKJava의 경우, 버전 2 안내서를 참조하십시오.

변경 사항, 향상된 기능 및 해결된 문제

  • 고가용성 EMR 클러스터를 개선하기 위해 이 릴리스에서는 다음을 사용하는 로컬 호스트의 Amazon EMR 데몬에 연결할 수 있습니다.IPv6 엔드포인트.

  • 이번 릴리스에서는 TLS 1.2에서 고가용성 클러스터의 모든 기본 노드에 ZooKeeper 프로비저닝된 서버와 통신할 수 있습니다.

  • 이 릴리스에서는 기본 노드에서 유지 관리되는 ZooKeeper 트랜잭션 로그 파일의 관리를 개선하여 로그 파일이 범위를 초과하여 클러스터 작업을 방해하는 시나리오를 최소화합니다.

  • 이번 릴리스에서는 고가용성 클러스터의 노드 내 통신 복원력이 향상되었습니다. EMR 이러한 개선 사항은 부트스트랩 작업 실패나 클러스터 시작 실패 가능성을 줄입니다.

  • Amazon EMR 6.15.0의 Tez에는 Tez 그룹 분할에서 입력 분할을 비동기적으로 열도록 지정할 수 있는 구성이 도입되었습니다. 그 결과 단일 Tez 그룹화된 분할에 많은 수의 입력 분할이 있을 경우 읽기 쿼리 성능이 더욱 빨라집니다. 자세한 내용을 확인하려면 Tez 비동기식 분할 열기를 참조하세요.

  • Amazon EMR 5.36 이상, 6.6 이상 또는 7.0 이상의 최신 패치 릴리스로 클러스터를 시작하면 Amazon은 기본 Amazon에 대해 최신 Amazon Linux 2023 또는 Amazon Linux 2 릴리스를 EMR 사용합니다. EMR AMI 자세한 내용은 Amazon용 기본 Amazon Linux AMI 사용을 참조하십시오EMR.

    OsReleaseLabel (아마존 리눅스 버전) Amazon Linux 커널 버전 사용 가능한 날짜 지원되는 리전
    2.0.20240816.0 4.14.350 2024년 8월 21일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240809.0 4.14.349 2024년 8월 20일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240719.0 4.14.348 2024년 7월 25일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240709.1 4.14.348 2024년 7월 23일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 아시아 태평양 (하이데라바드), 중동 (), 유럽 (스페인UAE), 유럽 (취리히), 아시아 태평양 (멜버른), 이스라엘 (텔아비브), 캐나다 서부 (캘거리)
    2.0.20240223.0 4.14.336 2024년 3월 8일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 캐나다 서부 (캘거리)
    2.0.20240131.0 4.14.336 2024년 2월 14일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 캐나다 서부 (캘거리)
    2.0.20240124.0 4.14.336 2024년 2월 7일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 캐나다 서부 (캘거리)
    2.0.20240109.0 4.14.334 2024년 1월 24일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 캐나다 서부 (캘거리)
    2.0.20231218.0 4.14.330 2024년 1월 2일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20231206.0 4.14.330 2023년 12월 22일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20231116.0 4.14.328 2023년 12월 11일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20231101.0 4.14.327 2023년 11월 13일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (스페인), 유럽 (프랑크푸르트), 유럽 (취리히), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (뭄바이), 아시아 태평양 (하이데라바드), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아시아 태평양 (멜버른), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 중동 (), 캐나다 (UAE중부), 이스라엘 (텔아비브), AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)

아마존 EMR 5.36.2 (5.x 시리즈 최신 릴리스)

새 Amazon EMR 릴리스는 최초 출시일의 첫 번째 지역부터 시작하여 며칠에 걸쳐 여러 지역에서 제공됩니다. 이 기간에는 사용자 리전에서 최신 릴리스 버전이 제공되지 않을 수도 있습니다.

다음 릴리스 노트에는 Amazon EMR 릴리스 5.36.2에 대한 정보가 포함되어 있습니다. 변경 사항은 5.36.1을 기준으로 합니다. 릴리스 일정에 대한 자세한 내용은 변경 로그를 참조하세요.

변경 사항, 향상된 기능 및 해결된 문제

  • 이번 릴리스에서는 Amazon이 클러스터의 HDFS 복제 요소 설정 이하로 코어 노드를 EMR 축소하지 않도록 클러스터 스케일 다운 로직이 개선되었습니다. 이러한 개선으로 데이터 중복성 요구 사항이 충족되고 조정 작업이 중단될 가능성이 줄어듭니다.

  • 이번 릴리스에서는 Presto 또는 Trino를 실행하는 클러스터 스케일링 워크플로우에 새로운 재시도 메커니즘이 추가되었습니다. 이 개선으로 단일 크기 조정 작업 실패로 인해 클러스터 크기 조정이 무기한 실행될 위험이 줄어듭니다. 또한 클러스터를 더 빠르게 스케일 업 및 스케일 다운하므로 클러스터 활용도가 향상됩니다.

  • Amazon이 코어 노드를 EMR 정상적으로 사용 중지하고 완전히 폐기되기 전에 비정상 상태로 전환되는 동안 클러스터 스케일 다운 작업이 중단될 수 있는 문제를 수정합니다.

  • Amazon이 단일 노드를 EMR 재시작할 때 여러 기본 노드가 있는 고가용성 클러스터의 노드 안정성을 개선합니다.

  • Amazon에서 EMR 실행되는 Amazon을 사용하여 로그 관리를 최적화합니다. EC2 따라서 클러스터 로그의 스토리지 비용이 조금 절감될 수 있습니다.

  • 기본 노드에서 유지 관리되는 ZooKeeper 트랜잭션 로그 파일의 관리를 개선하여 로그 파일이 범위를 벗어나고 클러스터 작업을 방해하는 시나리오를 최소화합니다.

  • Yarn과 통신할 수 없어 여러 기본 노드가 있는 고가용성 클러스터가 실패할 수 있는 드문 버그를 수정합니다. ResourceManager

  • Amazon EMR 5.36 이상, 6.6 이상 또는 7.0 이상의 최신 패치 릴리스로 클러스터를 시작하면 Amazon은 기본 Amazon에 대해 최신 Amazon Linux 2023 또는 Amazon Linux 2 릴리스를 EMR 사용합니다. EMR AMI 자세한 내용은 Amazon용 기본 Amazon Linux AMI 사용을 참조하십시오EMR.

    OsReleaseLabel (아마존 리눅스 버전) Amazon Linux 커널 버전 사용 가능한 날짜 지원되는 리전
    2.0.20240816.0 4.14.350 2024년 8월 21일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240809.0 4.14.349 2024년 8월 20일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240719.0 4.14.348 2024년 7월 25일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)
    2.0.20240709.1 4.14.348 2024년 7월 23일 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤), 아시아 태평양 (하이데라바드), 중동 (), 유럽 (스페인UAE), 유럽 (취리히), 아시아 태평양 (멜버른), 이스라엘 (텔아비브), 캐나다 서부 (캘거리)
    2.0.20240503.0 4.14.343 xxxxxx, 2024 미국 동부 (버지니아 북부), 미국 동부 (오하이오), 미국 서부 (캘리포니아 북부), 미국 서부 (오레곤), 유럽 (스톡홀름), 유럽 (밀라노), 유럽 (프랑크푸르트), 유럽 (아일랜드), 유럽 (런던), 유럽 (파리), 아시아 태평양 (홍콩), 아시아 태평양 (뭄바이), 아시아 태평양 (도쿄), 아시아 태평양 (서울), 아시아 태평양 (오사카), 아시아 태평양 (오사카), 아시아 태평양 (싱가포르), 아시아 태평양 (시드니), 아시아 태평양 (자카르타), 아프리카 (케이프타운), 남미 (상파울루), 중동 (바레인), 캐나다 (중부) AWS GovCloud (미국 서부), AWS GovCloud (미국 동부), 중국 (베이징), 중국 (닝샤)

아마존 EMR 및 AWS 서명 버전 4

아마존 EMR 릴리스 사용 AWS 시그니처 버전 4 (SigV4) 를 사용하여 Amazon S3에 대한 요청을 인증합니다. 2020년 6월 24일 이후 Amazon S3에서 생성된 버킷은 Signature Version 2(SigV2)로 서명된 요청을 지원하지 않습니다. 2020년 6월 24일 또는 이전에 생성된 버킷은 계속해서 SIGv2를 지원합니다. 지원하는 Amazon EMR 릴리스로 마이그레이션하는 것이 좋습니다.SigV4 새 S3 버킷에 액세스하고 워크로드가 중단되지 않도록 하기 위해서입니다.

Apache Spark, Apache Hive, Presto와 EMR 같이 Amazon에 포함된 애플리케이션을 사용하는 경우 사용하기 위해 애플리케이션 코드를 변경할 필요가 없습니다.SigV4 . EMRAmazon에 포함되지 않은 사용자 지정 애플리케이션을 사용하는 경우 사용하려면 코드를 업데이트해야 할 수 있습니다.SigV4. 자세한 내용은 Amazon S3 사용 설명서의 서명 버전 2에서 서명 버전 4로 이동을 참조하십시오.

다음 Amazon EMR 릴리스 지원 SigV4: emr-4.7.4, emr-4.8.5, emr-4.9.6, emr-4.10.1, emr-5.1.1, emr-5.2.3, emr-5.3.2, emr-5.4.1, emr-5.5.4, emr-5.6.1, emr-5.7.1, emr-5.8.3, emr-5.9.1, emr-5.10.1, emr-5.11.4, emr-5.12.3, emr-5.13.1, emr-5.14.2, emr-5.15.1, emr-5.16.1, emr-5.17.2, emr-5.18.1, emr-5.19.1, emr-5.20.1, emr-5.21.2, and emr-5.22.0 and higher. 모든 6.x 및 7.x 릴리스 지원 SigV4.