翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
Amazon EMRリリース 5.33.1
5.33.1 アプリケーションバージョン
このリリースでは、次のアプリケーションがサポートされています。 Flink
次の表に、Amazon のこのリリースで利用可能なアプリケーションバージョンEMRと、前述の 3 つの Amazon EMRリリース (該当する場合) のアプリケーションバージョンを示します。
Amazon の各リリースのアプリケーションバージョンの包括的な履歴についてはEMR、以下のトピックを参照してください。
アプリケーションバージョン情報 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
emr-5.33.1 | emr-5.33.0 | emr-5.32.1 | emr-5.32.0 | ||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
AWS SDK for Java | 1.11.970 | 1.11.970 | 1.11.890 | 1.11.890 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Python | 2.7、3.7 | 2.7、3.7 | 2.7、3.7 | 2.7、3.7 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Scala | 2.11.12 | 2.11.12 | 2.11.12 | 2.11.12 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
AmazonCloudWatchAgent | - | - | - | - | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
差分 | - | - | - | - | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Flink | 1.12.1 | 1.12.1 | 1.11.2 | 1.11.2 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
HBase | 1.4.13 | 1.4.13 | 1.4.13 | 1.4.13 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
HCatalog | 2.3.7 | 2.3.7 | 2.3.7 | 2.3.7 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Hadoop | 2.10.1 | 2.10.1 | 2.10.1 | 2.10.1 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
[Hive] | 2.3.7 | 2.3.7 | 2.3.7 | 2.3.7 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Hudi | 0.7.0-amzn-1 | 0.7.0-amzn-1 | 0.6.0-amzn-0 | 0.6.0-amzn-0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Hue | 4.9.0 | 4.9.0 | 4.8.0 | 4.8.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Iceberg | - | - | - | - | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
JupyterHub | 1.2.2 | 1.2.2 | 1.1.0 | 1.1.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Livy | 0.7.0 | 0.7.0 | 0.7.0 | 0.7.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
MXNet | 1.7.0 | 1.7.0 | 1.7.0 | 1.7.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Mahout | 0.13.0 | 0.13.0 | 0.13.0 | 0.13.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
フェニックス | 4.14.3 | 4.14.3 | 4.14.3 | 4.14.3 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Presto | 0.245.1 | 0.245.1 | 0.240.1 | 0.240.1 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Spark | 2.4.7 | 2.4.7 | 2.4.7 | 2.4.7 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
TensorFlow | 2.4.1 | 2.4.1 | 2.3.1 | 2.3.1 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Trino (Presto SQL) | - | - | - | - | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
Zeppelin | 0.9.0 | 0.9.0 | 0.8.2 | 0.8.2 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 |
5.33.1 リリースノート
次のリリースノートには、Amazon EMRリリース 5.33.0/5.33.1 に関する情報が含まれています。5.32.0 からの変更が含まれています。
初回リリース日: 2021 年 4 月 19 日
最終更新日: 2021 年 8 月 9 日
アップグレード
Amazon Glue コネクタをバージョン 1.15.0 にアップグレードしました
アップグレード済み AWS SDK for Java をバージョン 1.11.970 に更新
バージョン 2.46.0 EMRFSにアップグレード
Goodies EMR をバージョン 2.14.0 にアップグレードしました
EMR Record Server をバージョン 1.9.0 にアップグレードしました
EMR S3 Dist CP をバージョン 2.18.0 にアップグレードしました
EMR シークレットエージェントをバージョン 1.8.0 にアップグレードしました
Flink をバージョン 1.12.1 にアップグレードしました
Hadoop をバージョン 2.10.1-amzn-1 にアップグレードしました
Hive をバージョン 2.3.7-amzn-4 にアップグレードしました
Hudi をバージョン 0.7.0 にアップグレードしました
Hue をバージョン 4.9.0 にアップグレードしました
OpenCV をバージョン 4.5.0 にアップグレードしました
Presto をバージョン 0.245.1-amzn-0 にアップグレードしました
R をバージョン 4.0.2 にアップグレードしました
Spark をバージョン 2.4.7-amzn-1 にアップグレードしました
バージョン 2.4.1 TensorFlow にアップグレード
Zeppelin をバージョン 0.9.0 にアップグレードしました
変更点、機能強化、解決した問題
-
これは、クラスターのスケールアップ/スケールダウンに失敗した場合、またはアプリケーション障害を引き起こした場合の Amazon EMR Scaling の問題を修正するためのリリースです。
Amazon クラスターEMR上のデーモンがYARNノードの状態やノードの状態の収集などのヘルスチェックアクティビティを実行している場合に、大規模で使用率の高いクラスターでスケーリングリクエストが失敗する問題を修正しましたHDFS。これは、クラスター上のデーモンがノードのヘルスステータスデータを内部 Amazon EMRコンポーネントに通信できなかったために発生しました。
クラスターEMR上のデーモンが改善され、IP アドレスが再利用されたときのノードの状態が正しく追跡され、スケーリングオペレーション中の信頼性が向上しました。
SPARK-29683
。Spark が使用可能なすべてのノードが拒否リストに登録されていると想定していたため、クラスターのスケールダウン中にジョブエラーが発生する問題を修正しました。 YARN-9011
。クラスターのスケールアップまたはスケールダウンを試みたときに、YARN廃止時の競合状態が原因でジョブの失敗が発生する問題を修正しました。 Amazon クラスターEMR上のデーモンと YARN/ の間でノードの状態が常に一貫しているようにすることで、クラスターのスケーリング中にステップまたはジョブが失敗する問題を修正しましたHDFS。
Kerberos 認証で有効になっている Amazon クラスターでスケールダウンやステップ送信などのEMRクラスターオペレーションが失敗する問題を修正しました。これは、Amazon クラスターEMR上のデーモンが Kerberos チケットを更新しなかったためです。これは、プライマリノードで HDFS/YARN と安全に通信するために必要です。
新しい Amazon EMRリリースでは、Amazon の古い の「最大オープンファイル」制限を低く設定することで問題が修正AL2されていますEMR。Amazon EMRリリース 5.30.1、5.30.2、5.31.1、5.32.1、6.0.1、6.1.1、6.2.1、5.33.0、6.3.0 以降では、「最大オープンファイル」設定が高い永続的な修正が追加されました。
-
Apache YARN Timeline Server バージョン 1 および 1.5 のパフォーマンス問題を修正するためのクラスターの設定
Apache YARN Timeline Server バージョン 1 および 1.5 では、非常にアクティブで大規模なEMRクラスター、特に Amazon のデフォルト設定
yarn.resourcemanager.system-metrics-publisher.enabled=true
である でパフォーマンスの問題が発生する可能性がありますEMR。オープンソースの YARN Timeline Server v2 は、Timeline Server YARN のスケーラビリティに関連するパフォーマンスの問題を解決します。この問題の他の回避策には、次のものがあります。
yarn-site.xml での yarn.resourcemanagersystem-metrics-publisher..enabled=false の設定。
クラスターの作成時にこの問題の修正を有効にします (以下を参照)。
次の Amazon EMRリリースには、この YARN Timeline Server のパフォーマンス問題の修正が含まれています。
EMR 5.30.2、5.31.1、5.32.1、5.33.1、5.34.x、6.0.1、6.1.1、6.2.1、6.3.1、6.4.x
上記の Amazon EMRリリースのいずれかで修正を有効にするには、
aws emr create-cluster
コマンドパラメータ を使用して渡される設定JSONファイルtrue
で、これらのプロパティを に設定します--configurations file://./configurations.json
。または、再構成コンソール UI を使用して修正を有効にします。configurations.json ファイルの内容の例
[ { "Classification": "yarn-site", "Properties": { "yarn.resourcemanager.system-metrics-publisher.timeline-server-v1.enable-batch": "true", "yarn.resourcemanager.system-metrics-publisher.enabled": "true" }, "Configurations": [] } ]
Spark 挿入クエリのために Hive メタストアからパーティションの場所を取得するときに Spark ランタイムが高速になりました。
コンポーネントのバージョンをアップグレードしました。コンポーネントバージョンのリストについては、このガイドの「Amazon EMRリリースについて」を参照してください。
をインストールしました AWS 新しいクラスターごとに Java SDKバンドル。これは、個々のコンポーネント jar ではなく、すべてのサービスSDKsとその依存関係を含む単一の jar です。詳細については、「Java SDK Bundled Dependency
」を参照してください。 以前の Amazon EMRリリースの Managed Scaling の問題を修正し、アプリケーションの障害率を大幅に削減できるように改善しました。
-
HTTPS が Amazon Linux リポジトリでデフォルトで有効になりました。Amazon S3 VPCEポリシーを使用して特定のバケットへのアクセスを制限する場合は、新しい Amazon Linux バケットARN
arn:aws:s3:::amazonlinux-2-repos-$region/*
をポリシーに追加する必要があります ( をエンドポイントがあるリージョン$region
に置き換えます)。詳細については、「」の「このトピック」を参照してください。 AWS ディスカッションフォーラム。発表: Amazon Linux 2 では、パッケージリポジトリ に接続HTTPSする際に を使用する機能がサポートされるようになりました。
新機能
Amazon は Amazon S3 アクセスポイントEMRをサポートしています。これは、共有データレイクへのアクセスを簡単に管理できる Amazon S3 の機能です。Amazon S3 アクセスポイントエイリアスを使用すると、Amazon での大規模なデータアクセスを簡素化できますEMR。Amazon S3 アクセスポイントは、すべてのバージョンの Amazon で追加料金EMRなしで使用できます。 AWS Amazon EMR が利用可能な リージョン。Amazon S3 Access Points と Access Points のエイリアスの詳細については、「Amazon S3 ユーザー ガイド」の「アクセス ポイントにバケット形式のエイリアスの使用」を参照してください。
Amazon EMR-5.33 は、新しい Amazon EC2インスタンスタイプ c5a、c5ad、c6gn、c6gd、m6gd、d3、d3en、m5zn、r5b、r6gd をサポートしています。「サポートされるインスタンスタイプ」を参照してください。
既知の問題
-
古い AL2 [新しいリリースで修正済み] の「最大オープンファイル」制限を引き下げます。Amazon EMRリリース: emr-5.30.x、emr-5.31.0、emr-5.32.0、emr-6.0.0、emr-6.1.0、emr-6.2.0 は、古いバージョンの ofAmazon Linux 2 (AL2) に基づいています。これは、Amazon EMRクラスターがデフォルトの で作成されたときに「最大オープンファイル」の ulimit 設定が低くなりますAMI。Amazon EMRリリース 5.30.1、5.30.2、5.31.1、5.32.1、6.0.1、6.1.1、6.2.1、5.33.0、6.3.0 以降には、「最大オープンファイル」設定が高い永続的な修正が含まれています。オープンファイルの上限が低いリリースでは、Spark ジョブを送信するときに「Too many open files」というエラーが発生します。影響を受けるリリースでは、Amazon のEMRデフォルト ulimit 設定AMIは「最大オープンファイル」で 4096 で、 latestAmazon Linux 2 の 65536 ファイル制限よりも低くなっていますAMI。「最大オープンファイル」の ulimit 設定が低い場合、Spark ドライバーとエグゼキュータが 4096 を超えるファイルを開こうとすると、Spark ジョブが失敗します。この問題を解決するために、Amazon EMRにはクラスターの作成時に ulimit 設定を調整するブートストラップアクション (BA) スクリプトがあります。
この問題の永続的な修正がない古い Amazon EMRバージョンを使用している場合、次の回避策により、インスタンスコントローラーの ulimit を最大 65536 ファイルに明示的に設定できます。
コマンドラインから ulimit を明示的に設定する
/etc/systemd/system/instance-controller.service
を編集して、Service セクションに次のパラメータを追加します。LimitNOFILE=65536
LimitNPROC=65536
再起動 InstanceController
$ sudo systemctl daemon-reload
$ sudo systemctl restart instance-controller
ブートストラップアクション (BA) を使用して ulimit を設定する
ブートストラップアクション (BA) スクリプトを使用して、クラスター作成時にインスタンスコントローラーの ulimit を 65536 ファイルに設定することもできます。
#!/bin/bash for user in hadoop spark hive; do sudo tee /etc/security/limits.d/$user.conf << EOF $user - nofile 65536 $user - nproc 65536 EOF done for proc in instancecontroller logpusher; do sudo mkdir -p /etc/systemd/system/$proc.service.d/ sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF [Service] LimitNOFILE=65536 LimitNPROC=65536 EOF pid=$(pgrep -f aws157.$proc.Main) sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535 done sudo systemctl daemon-reload
Amazon 6EMR.3.0 および 6.2.0 プライベートサブネットクラスターでは、Ganglia ウェブ UI にアクセスできません。「アクセス拒否 (403)」というエラーが表示されます。SparkUIs、Hue、Zeppelin JupyterHub、Livy、Tez などの他のウェブ は正常に動作しています。パブリックサブネットクラスターでの Ganglia ウェブ UI アクセスも正常に動作します。この問題を解決するには、
sudo systemctl restart httpd
を使用してプライマリノードで httpd サービスを再起動します。この問題は Amazon 6.4.0 EMR で修正されています。-
重要
EMR Amazon Linux または Amazon Linux 2 Amazon マシンイメージ (AMIs) を実行する クラスターは、デフォルトの Amazon Linux 動作を使用し、再起動を必要とする重要かつ重要なカーネル更新を自動的にダウンロードしてインストールしません。これは、デフォルトの Amazon Linux を実行する他の Amazon EC2インスタンスと同じ動作ですAMI。Amazon EMRリリースが利用可能になった後に、再起動を必要とする新しい Amazon Linux ソフトウェア更新 (カーネル、NVIDIA、CUDA更新など) が利用可能になった場合、デフォルトを実行するEMRクラスターインスタンスはそれらの更新を自動的にダウンロードしてインストールAMIしません。カーネルの更新を取得するには、最新の Amazon Linux を使用するEMRように Amazon をカスタマイズできますAMI。 AMI
を指定するセキュリティ設定を作成するためのコンソールサポート AWS Ranger 統合オプションは現在、 GovCloud リージョンではサポートされていません。セキュリティ設定は、 を使用して行うことができますCLI。「Amazon 管理ガイド」のEMR「セキュリティ設定の作成」を参照してください。 EMR
スコープ管理ポリシー: と連携させるには AWS ベストプラクティスである Amazon EMRでは、廃止されるポリシーの代替として v2 EMRスコープのデフォルト管理ポリシーを導入しました。「Amazon EMR 管理ポリシー」を参照してください。
Hive パーティションの場所の書式設定で Spark を使用して Amazon S3 でデータを読み取るときに、Amazon EMRリリース 5.30.0 から 5.36.0、および 6.2.0 から 6.9.0 で Spark を実行すると、クラスターがデータを正しく読み取れないという問題が発生する可能性があります。これは、パーティションに以下の特徴がすべて当てはまる場合に発生する可能性があります。
-
同じテーブルから 2 つ以上のパーティションがスキャンされます。
-
少なくとも 1 つのパーティションディレクトリパスが、少なくとも 1 つの他のパーティションディレクトリパスのプレフィックスです。例えば、
s3://bucket/table/p=a
はs3://bucket/table/p=a b
のプレフィックスです。 -
他のパーティションディレクトリのプレフィックスに続く最初の文字は、
/
文字 (U+002F) より小さい UTF-8 値を持ちます。例えば、s3://bucket/table/p=a b
の a と b の間にあるスペース文字 (U+0020) はこのカテゴリに該当します。非制御文字は他にも 14 個あることに注意してください:!"#$%&‘()*+,-
。詳細については、UTF「-8 エンコーディングテーブル」および「Unicode 文字」を参照してください。
この問題の回避策として、
spark-defaults
分類のspark.sql.sources.fastS3PartitionDiscovery.enabled
設定をfalse
にセットします。-
5.33.1 コンポーネントバージョン
このリリースで Amazon がEMRインストールするコンポーネントを以下に示します。そのうちいくつかは、ビッグデータアプリケーションパッケージの一部としてインストールされます。その他は Amazon に固有のものでEMR、システムプロセスと機能用にインストールされます。これらは通常、emr
または aws
で開始されます。最新の Amazon EMRリリースのビッグデータアプリケーションパッケージは、通常、 コミュニティにある最新バージョンです。Amazon では、コミュニティリリースEMRをできるだけ早く利用できます。
Amazon の一部のコンポーネントEMRは、コミュニティバージョンとは異なります。これらのコンポーネントには、
の形式のバージョンラベルがあります。CommunityVersion
-amzn-EmrVersion
は 0 から始まります。例えば、バージョン 2.2 EmrVersion
myapp-component
の という名前のオープンソースコミュニティコンポーネントが、異なる Amazon EMRリリースに含めるために 3 回変更された場合、そのリリースバージョンは としてリストされます2.2-amzn-2
。
コンポーネント | Version | 説明 |
---|---|---|
aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK |
emr-ddb | 4.16.0 | Hadoop エコシステムアプリケーション用の Amazon DynamoDB コネクター。 |
emr-goodies | 2.14.0 | Hadoop エコシステムに役立つ追加のライブラリ。 |
emr-kinesis | 3.5.0 | Hadoop エコシステムアプリケーション用の Amazon Kinesis コネクター。 |
emr-notebook-env | 1.2.0 | Jupyter エンタープライズゲートウェイを含む emr ノートブック用 Conda env |
emr-s3-dist-cp | 2.18.0 | Amazon S3 に最適化された分散コピーアプリケーション。 |
emr-s3-select | 1.6.0 | EMR S3Select コネクタ |
emrfs | 2.46.0 | Hadoop エコシステムアプリケーション用の Amazon S3 コネクタ。 |
flink-client | 1.12.1 | Apache Flink のコマンドラインクライアント スクリプトとアプリケーション。 |
flink-jobmanager-config | 1.12.1 | Apache Flink のEMRノード上のリソースの管理 JobManager。 |
ganglia-monitor | 3.7.2 | Ganglia モニタリングエージェントとともに埋め込まれた、Hadoop エコシステムアプリケーション用 Ganglia エージェント。 |
ganglia-metadata-collector | 3.7.2 | Ganglia モニタリングエージェントからメトリクスを集計する Ganglia メタデータコレクター。 |
ganglia-web | 3.7.1 | Ganglia メタデータコレクターによって収集されたメトリクスを表示するウェブアプリケーション。 |
hadoop-client | 2.10.1-amzn-1.1 | 'hdfs'、'hadoop'、'yarn' などの Hadoop コマンドラインクライアント。 |
hadoop-hdfs-datanode | 2.10.1-amzn-1.1 | HDFS ブロックを保存するためのノードレベルのサービス。 |
hadoop-hdfs-library | 2.10.1-amzn-1.1 | HDFS コマンドラインクライアントとライブラリ |
hadoop-hdfs-namenode | 2.10.1-amzn-1.1 | HDFS ファイル名とブロックの場所を追跡するための サービス。 |
hadoop-hdfs-journalnode | 2.10.1-amzn-1.1 | HDFS HA クラスターで Hadoop ファイルシステムジャーナルを管理するための サービス。 |
hadoop-httpfs-server | 2.10.1-amzn-1.1 | HTTP HDFSオペレーションの エンドポイント。 |
hadoop-kms-server | 2.10.1-amzn-1.1 | Hadoop の に基づく暗号化キー管理サーバー KeyProvider API。 |
hadoop-mapred | 2.10.1-amzn-1.1 | MapReduce MapReduce アプリケーションを実行するための 実行エンジンライブラリ。 |
hadoop-yarn-nodemanager | 2.10.1-amzn-1.1 | YARN 個々のノードのコンテナを管理するための サービス。 |
hadoop-yarn-resourcemanager | 2.10.1-amzn-1.1 | YARN クラスターリソースと分散アプリケーションの割り当てと管理のための サービス。 |
hadoop-yarn-timeline-server | 2.10.1-amzn-1.1 | YARN アプリケーションの現在および履歴情報を取得するためのサービス。 |
hbase-hmaster | 1.4.13 | リージョンの調整と管理コマンドの実行を担当する HBaseクラスターのサービス。 |
hbase-region-server | 1.4.13 | 1 つ以上のHBaseリージョンに対応するサービス。 |
hbase-client | 1.4.13 | HBase コマンドラインクライアント。 |
hbase-rest-server | 1.4.13 | のRESTfulHTTPエンドポイントを提供するサービスHBase。 |
hbase-thrift-server | 1.4.13 | Thrift エンドポイントを に提供するサービスHBase。 |
hcatalog-client | 2.3.7-amzn-4 | hcatalog-server を操作するための 'hcat' コマンドラインクライアント。 |
hcatalog-server | 2.3.7-amzn-4 | 分散アプリケーション用のテーブルおよびストレージ管理レイヤーHCatalogである を提供するサービス。 |
hcatalog-webhcat-server | 2.3.7-amzn-4 | HTTP へのRESTインターフェイスを提供する エンドポイントHCatalog。 |
hive-client | 2.3.7-amzn-4 | Hive コマンドラインクライアント。 |
hive-hbase | 2.3.7-amzn-4 | Hive-hbase クライアント。 |
hive-metastore-server | 2.3.7-amzn-4 | Hadoop オペレーションSQLで のメタデータを保存するセマンティックリポジトリである Hive メタストアにアクセスするためのサービス。 |
hive-server2 | 2.3.7-amzn-4 | Hive クエリをウェブリクエストとして受け入れるサービス。 |
hudi | 0.7.0-amzn-1 | データパイプラインを強化する低レイテンシーかつ高効率な増分処理フレームワーク。 |
hudi-spark | 0.7.0-amzn-1 | Spark を Hudi で実行するためのバンドルライブラリ。 |
hudi-presto | 0.7.0-amzn-1 | Presto を Hudi で実行するためのバンドルライブラリ。 |
hue-server | 4.9.0 | Hadoop エコシステムアプリケーションを使用してデータを分析するウェブアプリケーション |
jupyterhub | 1.2.2 | Jupyter Notebook のマルチユーザーサーバー |
livy-server | 0.7.0-incubating | REST Apache Spark とやり取りするための インターフェイス |
nginx | 1.12.1 | nginx [エンジン x] は HTTPおよびリバースプロキシサーバーです |
mahout-client | 0.13.0 | 機械学習用のライブラリ。 |
mxnet | 1.7.0 | フレキシブルかつスケーラブルで、ディープラーニングにおいて効率的なライブラリです。 |
mariadb-server | 5.5.68+ | データベースSQLサーバー。 |
nvidia-cuda | 10.1.243 | Nvidia ドライバーと Cuda ツールキット |
oozie-client | 5.2.0 | Oozie コマンドラインクライアント。 |
oozie-server | 5.2.0 | Oozie ワークフローリクエストを受け入れるサービス。 |
opencv | 4.5.0 | オープンソースのコンピュータビジョンライブラリ。 |
phoenix-library | 4.14.3-HBase-1.4 | サーバーとクライアントの Phoenix ライブラリ |
phoenix-query-server | 4.14.3-HBase-1.4 | Avatica JDBCへのアクセスとプロトコルバッファ、JSONフォーマットアクセスを提供する軽量サーバー API |
presto-coordinator | 0.245.1-amzn-0 | presto-worker 間でクエリを受け入れ、クエリの実行を管理するサービス。 |
presto-worker | 0.245.1-amzn-0 | いくつかのクエリを実行するサービス。 |
presto-client | 0.245.1-amzn-0 | Presto サーバーが起動されていない HA クラスターのスタンバイマスターにインストールされる Presto コマンドラインクライアント。 |
pig-client | 0.17.0 | Pig コマンドラインクライアント。 |
r | 4.0.2 | 統計的コンピューティング用 R プロジェクト |
ranger-kms-server | 1.2.0 | Apache Ranger Key Management System |
spark-client | 2.4.7-amzn-1.1 | Spark コマンドラインクライアント。 |
spark-history-server | 2.4.7-amzn-1.1 | 完了した Spark アプリケーションの有効期間にログに記録されたイベントを表示するウェブ UI。 |
spark-on-yarn | 2.4.7-amzn-1.1 | のインメモリ実行エンジンYARN。 |
spark-yarn-slave | 2.4.7-amzn-1.1 | YARN スレーブに必要な Apache Spark ライブラリ。 |
sqoop-client | 1.4.7 | Apache Sqoop コマンドラインクライアント。 |
tensorflow | 2.4.1 | TensorFlow 高性能な数値計算のための オープンソースソフトウェアライブラリ。 |
tez-on-yarn | 0.9.2 | Tez YARNアプリケーションとライブラリ。 |
webserver | 2.4.25+ | Apache HTTPサーバー。 |
zeppelin-server | 0.9.0 | インタラクティブなデータ分析を可能にするウェブベースのノートブック。 |
zookeeper-server | 3.4.14 | 設定情報を維持し、名前を付け、分散化された同期を提供し、グループサービスを提供する一元化されたサービス。 |
zookeeper-client | 3.4.14 | ZooKeeper コマンドラインクライアント。 |
5.33.1 設定分類
設定分類を使用すると、アプリケーションをカスタマイズできます。これらは、多くの場合、 などのアプリケーションの設定XMLファイルに対応しますhive-site.xml
。詳細については、「アプリケーションの設定」を参照してください。
再設定アクションは、実行中のクラスターのインスタンスグループの設定を指定すると発生します。Amazon は、変更した分類に対してEMRのみ再設定アクションを開始します。詳細については、「実行中のクラスター内のインスタンスグループの再設定」を参照してください。
emr-5.33.1 の分類 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
分類 | 説明 | 再設定アクション | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
capacity-scheduler | Hadoop の capacity-scheduler.xml ファイルの値を変更します。 | Restarts the ResourceManager service. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
container-executor | Hadoop YARNの container-executor.cfg ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
container-log4j | Hadoop YARNの container-log4j.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
core-site | Hadoop の core-site.xml ファイルの値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
docker-conf | Docker 関連の設定を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emrfs-site | EMRFS 設定を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
flink-conf | flink-conf.yaml の設定を変更します。 | Restarts Flink history server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
flink-log4j | Flink log4j.properties の設定を変更します。 | Restarts Flink history server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
flink-log4j-session | Kubernetes/Yarn セッションの Flink log4j-session.properties 設定を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
flink-log4j-cli | Flink log4j-cli.properties の設定を変更します。 | Restarts Flink history server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-env | Hadoop のすべてのコンポーネントに対する Hadoop 環境の値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-log4j | Hadoop の log4j.properties ファイルの値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-ssl-server | Hadoop ssl のサーバー設定を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-ssl-client | Hadoop ssl のクライアント設定を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase | Apache EMRの Amazon が厳選した設定HBase。 | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase-env | HBaseの環境の値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase-log4j | HBaseの hbase-log4j.properties ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase-metrics | HBaseの hadoop-metrics2-hbase.properties ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase-policy | HBaseの hbase-policy.xml ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hbase-site | HBaseの hbase-site.xml ファイルの値を変更します。 | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hdfs-encryption-zones | HDFS 暗号化ゾーンを設定します。 | Should not be reconfigured. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hdfs-site | HDFSの hdfs-site.xml の値を変更します。 | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-env | HCatalogの環境の値を変更します。 | Restarts Hive HCatalog Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-server-jndi | HCatalogの jndi.properties の値を変更します。 | Restarts Hive HCatalog Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-server-proto-hive-site | HCatalogの proto-hive-site.xml の値を変更します。 | Restarts Hive HCatalog Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-webhcat-env | HCatalog W のebHCat環境の値を変更します。 | Restarts Hive WebHCat Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-webhcat-log4j2 | HCatalog W ebHCatの log4j2.properties の値を変更します。 | Restarts Hive WebHCat Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hcatalog-webhcat-site | HCatalog W ebHCatの webhcat-site.xml ファイルの値を変更します。 | Restarts Hive WebHCat Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-beeline-log4j2 | Hive の beeline-log4j2.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-parquet-logging | Hive の parquet-logging.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-env | Hive 環境の値を変更します。 | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-exec-log4j2 | Hive の hive-exec-log4j2.properties ファイルの値を変更します。 | Restarts HiveServer2 and HiveMetastore. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-llap-daemon-log4j2 | Hive の llap-daemon-log4j2.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-log4j2 | Hive の hive-log4j2.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hive-site | Hive の hive-site.xml ファイルの値を変更します | Restarts HiveServer2 and HiveMetastore. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hiveserver2-site | Hive Server2 の hiveserver2-site.xml ファイルの値を変更します | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hue-ini | Hue の ini ファイルの値を変更します | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
httpfs-env | HTTPFS 環境の値を変更します。 | Restarts Hadoop Httpfs service. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
httpfs-site | Hadoop の httpfs-site.xml ファイルの値を変更します。 | Restarts Hadoop Httpfs service. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-kms-acls | Hadoop の kms-acls.xml ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-kms-env | Hadoop KMS環境の値を変更します。 | Restarts Hadoop-KMS service. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-kms-log4j | Hadoop の kms-log4j.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hadoop-kms-site | Hadoop の kms-site.xml ファイルの値を変更します。 | Restarts Hadoop-KMS and Ranger-KMS service. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
hudi-env | Hudi 環境の値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
jupyter-notebook-conf | Jupyter Notebook の jupyter_notebook_config.py ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
jupyter-hub-conf | JupyterHubsの jupyterhub_config.py ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
jupyter-s3-conf | Jupyter Notebook の S3 の永続性を設定します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
jupyter-sparkmagic-conf | Sparkmagic の config.json ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
livy-conf | Livy の livy.conf ファイルの値を変更します。 | Restarts Livy Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
livy-env | Livy 環境の値を変更します。 | Restarts Livy Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
livy-log4j | Livy の log4j.properties の設定を変更します。 | Restarts Livy Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
mapred-env | MapReduce アプリケーションの環境の値を変更します。 | Restarts Hadoop MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
mapred-site | MapReduce アプリケーションの mapred-site.xml ファイルの値を変更します。 | Restarts Hadoop MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
oozie-env | Oozie の環境の値を変更します。 | Restarts Oozie. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
oozie-log4j | Oozie の oozie-log4j.properties ファイルの値を変更します。 | Restarts Oozie. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
oozie-site | Oozie の oozie-site.xml ファイルの値を変更します。 | Restarts Oozie. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
phoenix-hbase-metrics | Phoenix の hadoop-metrics2-hbase.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
phoenix-hbase-site | Phoenix の hbase-site.xml ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
phoenix-log4j | Phoenix の log4j.properties ファイルの値を変更します。 | Restarts Phoenix-QueryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
phoenix-metrics | Phoenix の hadoop-metrics2-phoenix.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
pig-env | Pig 環境の値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
pig-properties | Pig の pig.properties ファイルの値を変更します。 | Restarts Oozie. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
pig-log4j | Pig の log4j.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-log | Presto の log.properties ファイルの値を変更します。 | Restarts Presto-Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-config | Presto の config.properties ファイルの値を変更します。 | Restarts Presto-Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-password-authenticator | Presto の password-authenticator.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-env | Presto の presto-env.sh ファイルの値を変更します。 | Restarts Presto-Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-node | Presto の node.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-blackhole | Presto の blackhole.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-cassandra | Presto の cassandra.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-hive | Presto の hive.properties ファイルの値を変更します。 | Restarts Presto-Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-jmx | Presto の jmx.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-kafka | Presto の kafka.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-localfile | Presto の localfile.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-memory | Presto の memory.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-mongodb | Presto の mongodb.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-mysql | Presto の musql.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-postgresql | Presto の postgresql.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-raptor | Presto の raptor.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-redis | Presto の redis.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-redshift | Presto の redshift.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-tpch | Presto の tpcj.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
presto-connector-tpcds | Presto の tpcds.properties ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ranger-kms-dbks-site | Ranger の dbks-site.xml ファイルの値を変更しますKMS。 | Restarts Ranger KMS Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ranger-kms-site | Ranger の ranger-kms-site.xml ファイルの値を変更しますKMS。 | Restarts Ranger KMS Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ranger-kms-env | Ranger KMS環境の値を変更します。 | Restarts Ranger KMS Server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ranger-kms-log4j | Ranger の kms-log4j.properties ファイルの値を変更しますKMS。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
ranger-kms-db-ca | Ranger とSSLの接続で S3 SQLの CA ファイルの値を変更しますKMS。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
recordserver-env | EMR RecordServer 環境の値を変更します。 | Restarts EMR record server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
recordserver-conf | EMR RecordServerの erver.properties ファイルの値を変更します。 | Restarts EMR record server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
recordserver-log4j | EMR RecordServerの log4j.properties ファイルの値を変更します。 | Restarts EMR record server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark | Apache EMRSpark の Amazon が厳選した設定。 | This property modifies spark-defaults. See actions there. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark-defaults | Spark の spark-defaults.conf ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark-env | Spark 環境の値を変更します。 | Restarts Spark history server and Spark thrift server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark-hive-site | Spark の hive-site.xml ファイルの値を変更します | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark-log4j | Spark の log4j.properties ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
spark-metrics | Spark の metrics.properties ファイルの値を変更します。 | Restarts Spark history server and Spark thrift server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
sqoop-env | Sqoop の環境の値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
sqoop-oraoop-site | Sqoop OraOopの oraoop-site.xml ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
sqoop-site | Sqoop の sqoop-site.xml ファイルの値を変更します。 | Not available. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
tez-site | Tez の tez-site.xml ファイルの値を変更します。 | Restarts Oozie. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
yarn-env | YARN 環境の値を変更します。 | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
yarn-site | YARNの yarn-site.xml ファイルの値を変更します。 | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
zeppelin-env | Zeppelin 環境の値を変更します。 | Restarts Zeppelin. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
zeppelin-site | zeppelin-site.xml の構成設定を変更します。 | Restarts Zeppelin. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
zookeeper-config | ZooKeeperの zoo.cfg ファイルの値を変更します。 | Restarts Zookeeper server. | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
zookeeper-log4j | ZooKeeperの log4j.properties ファイルの値を変更します。 | Restarts Zookeeper server. |