Amazon EMR 7.6.0 - Hadoop リリースノート - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

Amazon EMR 7.6.0 - Hadoop リリースノート

Amazon EMR 7.6.0 - Hadoop の変更

タイプ 説明

新機能

S3A 認証情報供給のフレームワーク

新機能

Hive の S3A Magic Committer サポート

バックポート

HADOOP-19309: ソースファイルにファイルスキームが含まれていない場合、S3A: CopyFromLocalFile オペレーションが失敗する

バックポート

HADOOP-19050 S3A:S3 アクセス許可のサポート

バックポート

HADOOP-18708 S3A: S3 クライアント側の暗号化 (CSE) をサポート

Amazon EMR 7.6.0 - Hadoop の機能

  • yarn.scheduler.increment-allocation-mb および のデフォルト設定yarn.scheduler.minimum-allocation-mbが 32 から 1 に変更され、YARN でのコンテナリソースの正規化を効果的に無効にしました。

  • Hadoop の S3A ファイルシステムは、リクエストレベルの認証情報供給をサポートするように拡張されました。この機能を使用すると、行われたすべての Amazon S3 リクエストは を使用しますAwsCredentialsProvider。これにより、リクエストごとに認証情報を動的に提供することで、柔軟性とセキュリティが向上します。

  • Hadoop の S3A ファイルシステムは、S3 クライアント側の暗号化をサポートしています。