最新情報 - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

最新情報

このページでは、Amazon 7.x、6.x、および EMR 5.x の最新リリースで利用可能な変更と機能について説明します。

これらのリリースノートは、Amazon EMR 7.2.0Amazon EMR 6.15.0、および Amazon EMR 5.36.2 ページでも、各リリースのアプリケーションバージョン、コンポーネントバージョン、および使用可能な設定分類とともに利用できます。

注記

Amazon の今後のEMRリリースでの使用 AWS 署名バージョン 4 (SigV4) Amazon S3 へのリクエストを認証します。をサポートする Amazon EMRリリースを使用することをお勧めします。SigV4 新しい S3 バケットにアクセスし、ワークロードの中断を回避できます。をサポートする Amazon EMRリリースの詳細とリスト SigV4「Amazon EMRと AWS 署名バージョン 4」を参照してください。

Amazon EMR 7.2.0 (7.x シリーズの最新リリース)

新しい Amazon EMRリリースは、最初のリリース日の 1 つ目のリージョンから始まる数日間、異なるリージョンで利用可能になります。この期間中、お客様のリージョンで最新のリリースバージョンが利用できない場合があります。

次のリリースノートには、Amazon EMRリリース 7.2.0 に関する情報が含まれています。7.2.0 からの変更が含まれています。

新機能
  • アプリケーションのアップグレード – Amazon EMR 7.2.0 application upgrades include Iceberg 1.5.0-amzn-0 and Delta 3.1.0.

  • Amazon は、、FlinkHBase、Hive などの他のアプリケーションを Amazon S3 Express One Zone ストレージクラスで使用できるようにサポートEMRを追加します。

  • このリリースでは、復元されたオブジェクトを読み取る機能が追加されているため、S3Aプロトコルを使用して S3 の場所から Glacier オブジェクトを読み取ることができます。この機能は Spark、Flink、および Hive で動作します。

  • マネージドスケーリングを使用したノードラベル - 市場タイプまたはノードタイプに基づいてインスタンスでノードラベルを使用して、Amazon からの自動スケーリングを改善しますEMR。詳細については、「Amazon でのマネージドスケーリングEMRの使用」を参照してください。

既知の問題
  • Python 3.11 は EMR Studio ではサポートされていません。

変更点、機能強化、解決した問題
  • このリリースでは、内部ステップのクリーンアップオペレーション中に発生する可能性のあるデッドロックの問題が修正されています。このオペレーションは、EMRクラスターでステップが完了したときのライフサイクルを管理します。この問題は、ステップEMRオペレーションやスケーリングなどの重要な Amazon オペレーションに影響します。

  • このリリースでは、特定の既存のログファイルAMIsを持つカスタム を持つカスタムクラスターによって Amazon EMRログ管理デーモンが失敗する問題を解決します。

  • Amazon EMR 7.2.0 は、クラスターの管理およびモニタリングアクティビティを担当する Amazon EMR デーモンを からアップグレードします。 AWS SDK v1 から v2。

  • Amazon 5.36 以上、6EMR.6 以上、または 7.0 以上の最新のパッチリリースでクラスターを起動すると、Amazon EMRはデフォルトの Amazon に対して最新の Amazon Linux 2023 または Amazon Linux 2 EMR リリースを使用しますAMI。詳細については、「デフォルトの Amazon Linux for Amazon の使用AMIEMR」を参照してください。

    OsReleaseLabel (Amazon Linux バージョン) Amazon Linux カーネルバージョン 利用可能日 サポートされるリージョン
    2023 年 5 月 2024 日 819.0 6.1.102-111.182.amzn2023 2024 年 8 月 20 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、アジアパシフィック (ハイデラバード)、中東 ()UAE、欧州 (スペイン)、欧州 (チューリッヒ)、アジアパシフィック (メルボルン)、イスラエル (テルアビブ)、カナダ西部 (カルガリー)
    2023 年 5 月 2024 日0730.0 6.1.97-104.177.amzn2023 2024 年 8 月 2 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、アジアパシフィック (ハイデラバード)、中東 ()UAE、欧州 (スペイン)、欧州 (チューリッヒ)、アジアパシフィック (メルボルン)、イスラエル (テルアビブ)、カナダ西部 (カルガリー)
    2023 年 5 月 2024 日 722.0 6.1.97-104.177.amzn2023 2024 年 7 月 24 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、アジアパシフィック (ハイデラバード)、中東 ()UAE、欧州 (スペイン)、欧州 (チューリッヒ)、アジアパシフィック (メルボルン)、イスラエル (テルアビブ)、カナダ西部 (カルガリー)
    2023 年 5 月 2024 日 708.0 6.1.96-102.177.amzn2023 2024 年 7 月 8 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード)、 アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 カナダ西部 (カルガリー)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)

Amazon EMR 6.15.0 (6.x シリーズの最新リリース)

新しい Amazon EMRリリースは、最初のリリース日の 1 つ目のリージョンから始まる数日間、異なるリージョンで利用可能になります。この期間中、お客様のリージョンで最新のリリースバージョンが利用できない場合があります。

次のリリースノートには、Amazon EMRリリース 6.15.0 に関する情報が含まれています。6.14.0 からの変更が含まれています。リリースタイムラインの詳細については、「6.15.0 変更ログ」を参照してください。

新機能
  • アプリケーションのアップグレード – Amazon EMR 6.15.0 application upgrades include Apache Hadoop 3.3.6, Apache Hudi 0.14.0-amzn-0, Iceberg 1.4.0-amzn-0, and Trino 426.

  • で実行されるEMRクラスターの起動の高速化 EC2 – EC2クラスターで Amazon を起動する速度が最大 35% EMR向上しました。この改善により、お客様の大多数はクラスターを 5 分以内に起動できます。

  • CodeWhisperer for EMR Studio – Amazon CodeWhisperer EMR Studio で Amazon を使用して、 でコードを記述する際にリアルタイムのレコメンデーションを取得できるようになりました JupyterLab。 CodeWhisperer は、コメントの入力、1 行のコードの完了、レコメンデーションの作成 line-by-line 、および完全な形式の関数の生成を行うことができます。

  • Flink によるジョブの再起動時間の短縮 – Amazon 6EMR.15.0 以降では、タスクの復旧またはスケーリングオペレーション中のジョブの再起動時間を改善するために、Apache Flink でいくつかの新しいメカニズムを利用できます。これにより、実行グラフの回復と再開の速度を最適化してジョブの安定性を高めることができます。

  • オープンテーブル形式のテーブルレベルおよびきめ細かなアクセスコントロール – Amazon 6EMR.15.0 以降では、 のデータにアクセスするEC2クラスターで Amazon EMRで Spark ジョブを実行する場合 AWS Glue Data Catalog、 を使用できます AWS Lake Formation Hudi、Iceberg、または Delta Lake ベースのテーブルにテーブル、行、列、およびセルレベルのアクセス許可を適用するには、 を使用します。

  • Hadoop のアップグレード – Amazon EMR 6.15.0 には、Apache Hadoop をバージョン 3.3.6 にアップグレードしました。Hadoop 3.3.6 は Amazon EMR 6.15 デプロイ時の最新バージョンで、2023 年 6 月に Apache によってリリースされました。Amazon の以前のリリース EMR (6.9.0~6.14.x) では、Hadoop 3.3.3 が使用されていました。

    アップグレードには、数百の改善と修正、再設定可能なデータノードパラメータ、すべてのライブデータノードで一括再設定オペレーションを開始するDFSAdminオプション、シークの負荷の高いリーダーAPIが読み取る複数の範囲を指定できるようにするベクトル化された機能が含まれています。Hadoop 3.3.6 では、ログ先行書き込み (WAL) の HDFSAPIsおよび セマンティクスのサポートも追加されるため、 HBaseは他のストレージシステムの実装で実行できます。詳細については、「Apache Hadoop ドキュメント」のバージョン 3.3.43.3.53.3.6 の変更ログを参照してください。

  • のサポート AWS SDK for Java、バージョン 2 - Amazon EMR 6.15.0 アプリケーションは を使用できます AWS SDK for Java バージョン 1.12.569 またはアプリケーションが v2 をサポートしている場合は 2.20.160。- AWS SDK for Java 2.x は、バージョン 1.x のコードベースの主要な書き換えです。今回のバージョンは Java 8 以降をベースに構築されており、これまで要望の声が高かった機能が複数追加されています。これには、ノンブロッキング I/O のサポートや、実行時に別のHTTP実装をプラグインする機能が含まれます。for Java v1 から v2 への移行ガイドなどの詳細については、SDK「」を参照してください。 AWS SDK for Java、バージョン 2 のガイド。

変更点、機能強化、解決した問題
  • 高可用性EMRクラスターを改善するために、このリリースでは、 を使用するローカルホスト上の Amazon EMR デーモンへの接続を有効にします。IPv6 エンドポイント。

  • このリリースではTLS、高可用性クラスターのすべてのプライマリノードで ZooKeeper プロビジョニングされた との通信が 1.2 で有効になります。

  • このリリースでは、プライマリノードで管理されるトランザクションログファイルの管理 ZooKeeper が改善され、ログファイルが範囲外になり、クラスターオペレーションが中断されるシナリオが最小限に抑えられます。

  • このリリースでは、高可用性EMRクラスターに対してノード内通信の耐障害性が向上します。この改善により、ブートストラップアクションが失敗したり、クラスターの起動に失敗したりする可能性が低くなります。

  • Amazon 6.15.0 EMR の Tez では、Tez グループ分割で入力分割を非同期的に開くように指定できる設定が導入されています。これにより、1 つの Tez グループ分割で多数の入力分割がある場合に、読み取りクエリのパフォーマンスが向上します。詳細については、「Tez 非同期スプリットオープン」を参照してください。

  • Amazon 5.36 以上、6EMR.6 以上、または 7.0 以上の最新のパッチリリースでクラスターを起動すると、Amazon EMRはデフォルトの Amazon に対して最新の Amazon Linux 2023 または Amazon Linux 2 EMR リリースを使用しますAMI。詳細については、「デフォルトの Amazon Linux for Amazon の使用AMIEMR」を参照してください。

    OsReleaseLabel (Amazon Linux バージョン) Amazon Linux カーネルバージョン 利用可能日 サポートされるリージョン
    2.0.20240816.0 4.14.350 2024 年 8 月 21 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240809.0 4.14.349 2024 年 8 月 20 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240719.0 4.14.348 2024 年 7 月 25 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240709.1 4.14.348 2024 年 7 月 23 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、アジアパシフィック (ハイデラバード)、中東 ()、欧州 (スペインUAE)、欧州 (チューリッヒ)、アジアパシフィック (メルボルン)、イスラエル (テルアビブ)、カナダ西部 (カルガリー)
    2.0.20240223.0 4.14.336 2024 年 3 月 8 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、カナダ西部 (カルガリー)
    2.0.20240131.0 4.14.336 2024 年 2 月 14 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、カナダ西部 (カルガリー)
    2.0.20240124.0 4.14.336 2024 年 2 月 7 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、カナダ西部 (カルガリー)
    2.0.20240109.0 4.14.334 2024 年 1 月 24 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、カナダ西部 (カルガリー)
    2.0.20231218.0 4.14.330 2024 年 1 月 2 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20231206.0 4.14.330 2023 年 12 月 22 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20231116.0 4.14.328 2023 年 12 月 11 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20231101.0 4.14.327 2023 年 11 月 13 日 米国東部 (バージニア北部)、 米国東部 (オハイオ)、 米国西部 (北カリフォルニア)、 米国西部 (オレゴン)、 欧州 (ストックホルム)、 欧州 (ミラノ)、 欧州 (スペイン)、 欧州 (フランクフルト)、 欧州 (チューリッヒ)、 欧州 (アイルランド)、 欧州 (ロンドン)、 欧州 (パリ)、 アジアパシフィック (香港)、 アジアパシフィック (ムンバイ)、 アジアパシフィック (ハイデラバード) アジアパシフィック (東京)、 アジアパシフィック (ソウル)、 アジアパシフィック (大阪)、 アジアパシフィック (シンガポール)、 アジアパシフィック (シドニー)、 アジアパシフィック (ジャカルタ)、 アジアパシフィック (メルボルン)、 アフリカ (ケープタウン)、 南米 (サンパウロ)、 中東 (バーレーン)、 中東 (UAE)、 カナダ (中部)、 イスラエル (テルアビブ)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)

Amazon EMR 5.36.2 (5.x シリーズの最新リリース)

新しい Amazon EMRリリースは、最初のリリース日のリージョンから数日間、異なるリージョンで利用可能になります。この期間中、お客様のリージョンで最新のリリースバージョンが利用できない場合があります。

次のリリースノートには、Amazon EMRリリース 5.36.2 に関する情報が含まれています。5.36.1 からの変更が含まれています。リリースタイムラインの詳細については、「変更ログ」を参照してください。

変更点、機能強化、解決した問題
  • このリリースでは、クラスターのスケールダウンロジックが改善され、Amazon EMRがコアノードをクラスターのHDFSレプリケーション係数設定以下にスケールダウンしないようにしました。この改善により、データの冗長性要件が満たされ、スケーリングオペレーションが停止する可能性が減ります。

  • このリリースでは、Presto または Trino を実行する のクラスタースケーリングワークフローに新しい再試行メカニズムが追加されました。この改善により、1 回のサイズ変更操作が失敗するため、クラスターのサイズ変更が無期限に実行されるリスクが軽減されます。また、クラスターのスケールアップとスケールダウンが速くなるため、クラスターの使用率も向上します。

  • Amazon がコアノードをEMR正常に廃止し、完全に廃止される前に異常になる間にクラスターのスケールダウンオペレーションが停止する問題を修正しました。

  • Amazon が 1 つのノードEMRを再起動するときに、複数のプライマリノードを持つ高可用性クラスター内のノードの安定性が向上します。

  • Amazon でEMR実行されている Amazon によるログ管理を最適化しますEC2。その結果、クラスターログのストレージコストがわずかに削減される可能性があります。

  • プライマリノードで管理される ZooKeeper トランザクションログファイルの管理を改善し、ログファイルが範囲外になり、クラスターオペレーションが中断されるシナリオを最小限に抑えます。

  • Yarn と通信できないために、複数のプライマリノードを持つ高可用性クラスターが失敗することがあるまれなバグを修正しました ResourceManager。

  • Amazon 5.36 以上、6EMR.6 以上、または 7.0 以上の最新のパッチリリースでクラスターを起動すると、Amazon EMRはデフォルトの Amazon に対して最新の Amazon Linux 2023 または Amazon Linux 2 EMR リリースを使用しますAMI。詳細については、「デフォルトの Amazon Linux for Amazon の使用AMIEMR」を参照してください。

    OsReleaseLabel (Amazon Linux バージョン) Amazon Linux カーネルバージョン 利用可能日 サポートされるリージョン
    2.0.20240816.0 4.14.350 2024 年 8 月 21 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240809.0 4.14.349 2024 年 8 月 20 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240719.0 4.14.348 2024 年 7 月 25 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)
    2.0.20240709.1 4.14.348 2024 年 7 月 23 日 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)、アジアパシフィック (ハイデラバード)、中東 ()、欧州 (スペインUAE)、欧州 (チューリッヒ)、アジアパシフィック (メルボルン)、イスラエル (テルアビブ)、カナダ西部 (カルガリー)
    2.0.20240503.0 4.14.343 2024 年 xxxxxx 月 米国東部 (バージニア北部)、米国東部 (オハイオ)、米国西部 (北カリフォルニア)、米国西部 (オレゴン)、欧州 (ストックホルム)、欧州 (ミラノ)、欧州 (フランクフルト)、欧州 (アイルランド)、欧州 (ロンドン)、欧州 (パリ)、アジアパシフィック (香港)、アジアパシフィック (ムンバイ)、アジアパシフィック (東京)、アジアパシフィック (ソウル)、アジアパシフィック (大阪)、アジアパシフィック (シンガポール)、アジアパシフィック (シドニー)、アジアパシフィック (ジャカルタ)、アフリカ (ケープタウン)、南米 (サンパウロ)、中東 (バーレーン)、カナダ (中部)、 AWS GovCloud (米国西部)、 AWS GovCloud (米国東部)、中国 (北京)、中国 (寧夏)

Amazon EMRと AWS 署名バージョン 4

Amazon EMRリリースで を使用する AWS 署名バージョン 4 (SigV4) Amazon S3 へのリクエストを認証します。2020 年 6 月 24 日以降に Amazon S3 で作成されたバケットは、Signature Version 2 (SigV2) によって署名されたリクエストをサポートしていません。2020 年 6 月 24 日以前に作成されたバケットは、引き続き SigV2 をサポートします。をサポートする Amazon EMRリリースに移行することをお勧めします。SigV4 により、新しい S3 バケットにアクセスし、ワークロードの中断を回避できます。

Apache Spark、Apache Hive、Presto EMRなど、Amazon に含まれているアプリケーションを使用する場合は、使用するアプリケーションコードを変更する必要はありません。SigV4 。 Amazon に含まれていないカスタムアプリケーションを使用する場合はEMR、 を使用するようにコードを更新する必要がある場合があります。SigV4。 詳細については、Amazon S3「署名バージョン 2 から署名バージョン 4 への移行」を参照してください。

以下の Amazon EMRリリースのサポート SigV4: emr-4.7.4, emr-4.8.5, emr-4.9.6, emr-4.10.1, emr-5.1.1, emr-5.2.3, emr-5.3.2, emr-5.4.1, emr-5.5.4, emr-5.6.1, emr-5.7.1, emr-5.8.3, emr-5.9.1, emr-5.10.1, emr-5.11.4, emr-5.12.3, emr-5.13.1, emr-5.14.2, emr-5.15.1, emr-5.16.1, emr-5.17.2, emr-5.18.1, emr-5.19.1, emr-5.20.1, emr-5.21.2, and emr-5.22.0 and higher。 すべての 6.x および 7.x リリースでサポートされています SigV4.