タスクの設定 - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

タスクの設定

構成変数を設定して、MapReduce ジョブのパフォーマンスを調整できます。このセクションでは、重要な設定のデフォルト値を提供します。デフォルト値は、クラスターで使用されるノードの EC2 インスタンスタイプにより異なります。HBase は Amazon EMR リリースバージョン 4.6.0 以降を使用するときに使用できます。HBase がインストールされているときは、別のデフォルトが使用されます。これらの値は、初期のデフォルトと共に示します。

Hadoop 2 は 2 つのパラメータ、mapreduce.map.java.opts および mapreduce.reduce.java.opts を使用して、マップとリデュース JVM のメモリをそれぞれ設定します。これらのパラメータは、Hadoop バージョンの 1 つの設定オプション (mapreduce.map.java.opts) に置き換わります。

同様に、mapred.job.jvm.num.tasks置き換えるmapred.job.reuse.jvm.num.tasksでの Hadoop 2.7.2 以降です。Amazon EMR では、EC2 インスタンスタイプにかかわらず、この値を 20 に設定します。mapred-site 設定分類を使用して、この設定を上書きできます。-1 の値を設定すると、JVM を単一のジョブ内の無限のタスクで再利用でき、1 の値は、新しい JVM が各タスクにスポーンされることを示します。

たとえば、mapred.job.jvm.num.tasks の値を -1 に設定すると、次の内容でファイルを作成することができます。

[ { "Classification": "mapred-site", "Properties": { "mapred.job.jvm.num.tasks": "-1" } } ]

AWS CLI から create-cluster または modify-instance-groups コマンドを使用すると、JSON 設定ファイルを参照できます。次の例では、設定ファイルはとして保存されます。myConfig.jsonAmazon S3 に保存されます。

注記

読みやすくするために Linux 行継続文字 (\) が含まれています。これらは Linux コマンドで削除したり、使用できます。Windows の場合、それらを削除するか、キャレット (^) に置き換えます。

aws emr create-cluster --release-label emr-5.33.0 --instance-type m5.xlarge \ --instance-count 3 --applications Name=Hadoop --configurations https://s3.amazonaws.com/mybucket/myfolder/myConfig.json \ --use-default-roles

以下に示すデフォルト値は、mapred-site同様に、設定分類を行い、単一の JSON ファイルを使用して、複数の値と複数の設定分類を設定します。詳細については、「アプリケーションの設定」を参照してください。

Amazon EMR バージョン 5.21.0 以降では、実行中のクラスター内のインスタンスグループごとに、クラスター設定を上書きして追加の設定分類を指定できます。これを行うには、Amazon EMR コンソールAWS Command Line Interface(AWS CLI)、またはAWSSDK。詳細については、「」を参照してください。実行中のクラスター内のインスタンスグループの設定を指定する

タスク構成設定のデフォルト値

c1 インスタンス

c1.medium
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx288m
mapreduce.reduce.java.opts -Xmx288m
mapreduce.map.memory.mb 512
mapreduce.reduce.memory.mb 512
yarn.app.mapreduce.am.resource.mb 512
yarn.scheduler.minimum-allocation-mb 256
yarn.scheduler.maximum-allocation-mb 512
yarn.nodemanager.resource.memory-mb 1024
c1.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx864m -Xmx864m
mapreduce.reduce.java.opts -Xmx1536m -Xmx1536m
mapreduce.map.memory.mb 1024 1024
mapreduce.reduce.memory.mb 2048 2048
yarn.app.mapreduce.am.resource.mb 2048 2048
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 2048 2560
yarn.nodemanager.resource.memory-mb 5120 2560

c3 インスタンス

c3.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1126m -Xmx1126m
mapreduce.reduce.java.opts -Xmx2252m -Xmx2252m
mapreduce.map.memory.mb 1408 1408
mapreduce.reduce.memory.mb 2816 2816
yarn.app.mapreduce.am.resource.mb 2816 2816
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 5632 2816
yarn.nodemanager.resource.memory-mb 5632 2816
c3.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1152m -Xmx1152m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1440 1440
mapreduce.reduce.memory.mb 2880 2880
yarn.app.mapreduce.am.resource.mb 2880 2880
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 11520 5760
yarn.nodemanager.resource.memory-mb 11520 5760
c3.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1152m -Xmx1152m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1440 1440
mapreduce.reduce.memory.mb 2880 2880
yarn.app.mapreduce.am.resource.mb 2880 2880
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23040 11520
yarn.nodemanager.resource.memory-mb 23040 11520
c3.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1331m -Xmx1331m
mapreduce.reduce.java.opts -Xmx2662m -Xmx2662m
mapreduce.map.memory.mb 1664 1664
mapreduce.reduce.memory.mb 3328 3328
yarn.app.mapreduce.am.resource.mb 3328 3328
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 53248 26624
yarn.nodemanager.resource.memory-mb 53248 26624

c4 インスタンス

c4.large
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx717m -Xmx717m
mapreduce.reduce.java.opts -Xmx1434m -Xmx1434m
mapreduce.map.memory.mb 896 896
mapreduce.reduce.memory.mb 1792 1792
yarn.app.mapreduce.am.resource.mb 1792 1792
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 1792 896
yarn.nodemanager.resource.memory-mb 1792 896
c4.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1126m -Xmx1126m
mapreduce.reduce.java.opts -Xmx2253m -Xmx2253m
mapreduce.map.memory.mb 1408 1408
mapreduce.reduce.memory.mb 2816 2816
yarn.app.mapreduce.am.resource.mb 2816 2816
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 5632 2816
yarn.nodemanager.resource.memory-mb 5632 2816
c4.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1152m -Xmx1152m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1440 1440
mapreduce.reduce.memory.mb 2880 2880
yarn.app.mapreduce.am.resource.mb 2880 2880
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 11520 5760
yarn.nodemanager.resource.memory-mb 11520 5760
c4.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1152m -Xmx1152m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1440 1440
mapreduce.reduce.memory.mb 2880 2880
yarn.app.mapreduce.am.resource.mb 2880 2880
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23040 11520
yarn.nodemanager.resource.memory-mb 23040 11520
c4.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1183m -Xmx1183m
mapreduce.reduce.java.opts -Xmx2366m -Xmx2366m
mapreduce.map.memory.mb 1479 1479
mapreduce.reduce.memory.mb 2958 2958
yarn.app.mapreduce.am.resource.mb 2958 2958
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 53248 26624
yarn.nodemanager.resource.memory-mb 53248 26624

c5 インスタンス

c5.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 6144
yarn.nodemanager.resource.memory-mb 6144
c5.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
c5.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
c5.9xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1456m
mapreduce.reduce.java.opts -Xmx2912m
mapreduce.map.memory.mb 1820
mapreduce.reduce.memory.mb 3640
yarn.app.mapreduce.am.resource.mb 3640
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 65536
yarn.nodemanager.resource.memory-mb 65536
c5.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1502m
mapreduce.reduce.java.opts -Xmx3004m
mapreduce.map.memory.mb 1877
mapreduce.reduce.memory.mb 3754
yarn.app.mapreduce.am.resource.mb 3754
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 90112
yarn.nodemanager.resource.memory-mb 90112
c5.18xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1547m
mapreduce.reduce.java.opts -Xmx3094m
mapreduce.map.memory.mb 1934
mapreduce.reduce.memory.mb 3868
yarn.app.mapreduce.am.resource.mb 3868
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 139264
yarn.nodemanager.resource.memory-mb 139264
c5.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1570m
mapreduce.reduce.java.opts -Xmx3140m
mapreduce.map.memory.mb 1963
mapreduce.reduce.memory.mb 3926
yarn.app.mapreduce.am.resource.mb 3926
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416

c5a インスタンス

c5a.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1126m
mapreduce.reduce.java.opts -Xmx2252m
mapreduce.map.memory.mb 1408
mapreduce.reduce.memory.mb 2816
yarn.app.mapreduce.am.resource.mb 2816
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 5632
yarn.nodemanager.resource.memory-mb 5632
c5a.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
c5a.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
c5a.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1357m
mapreduce.reduce.java.opts -Xmx2714m
mapreduce.map.memory.mb 1696年
mapreduce.reduce.memory.mb 3392
yarn.app.mapreduce.am.resource.mb 3392
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
c5a.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1502m
mapreduce.reduce.java.opts -Xmx3004m
mapreduce.map.memory.mb 1877
mapreduce.reduce.memory.mb 3754
yarn.app.mapreduce.am.resource.mb 3754
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 90112
yarn.nodemanager.resource.memory-mb 90112
c5a.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1459m
mapreduce.reduce.java.opts -Xmx3004m
mapreduce.map.memory.mb 1824年
mapreduce.reduce.memory.mb 3648
yarn.app.mapreduce.am.resource.mb 3648
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
c5a.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1494m
mapreduce.reduce.java.opts -xmx2988m
mapreduce.map.memory.mb 1867年
mapreduce.reduce.memory.mb 3734
yarn.app.mapreduce.am.resource.mb 3734
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 179200
yarn.nodemanager.resource.memory-mb 179200

c5ad インスタンス

c5ad.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1126m
mapreduce.reduce.java.opts -Xmx2252m
mapreduce.map.memory.mb 1408
mapreduce.reduce.memory.mb 2816
yarn.app.mapreduce.am.resource.mb 2816
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 5632
yarn.nodemanager.resource.memory-mb 5632
c5ad.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
c5ad.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
c5ad.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1357m
mapreduce.reduce.java.opts -Xmx2714m
mapreduce.map.memory.mb 1696年
mapreduce.reduce.memory.mb 3392
yarn.app.mapreduce.am.resource.mb 3392
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
c5ad.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1425m
mapreduce.reduce.java.opts -xmx1425m
mapreduce.map.memory.mb 1781年
mapreduce.reduce.memory.mb 3562
yarn.app.mapreduce.am.resource.mb 3562
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
c5ad.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1459m
mapreduce.reduce.java.opts -Xmx2918m
mapreduce.map.memory.mb 1824年
mapreduce.reduce.memory.mb 3648
yarn.app.mapreduce.am.resource.mb 3648
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
c5ad.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1494m
mapreduce.reduce.java.opts -xmx2988m
mapreduce.map.memory.mb 1867年
mapreduce.reduce.memory.mb 3734
yarn.app.mapreduce.am.resource.mb 3734
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 179200
yarn.nodemanager.resource.memory-mb 179200

c5d インスタンス

c5d.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 6144
yarn.nodemanager.resource.memory-mb 6144
c5d.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
c5d.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m
mapreduce.map.memory.mb 1536
mapreduce.reduce.memory.mb 3072
yarn.app.mapreduce.am.resource.mb 3072
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
c5d.9xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1456m
mapreduce.reduce.java.opts -Xmx2912m
mapreduce.map.memory.mb 1820
mapreduce.reduce.memory.mb 3640
yarn.app.mapreduce.am.resource.mb 3640
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 65536
yarn.nodemanager.resource.memory-mb 65536
c5d.18xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1547m
mapreduce.reduce.java.opts -Xmx3094m
mapreduce.map.memory.mb 1934
mapreduce.reduce.memory.mb 3868
yarn.app.mapreduce.am.resource.mb 3868
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 139264
yarn.nodemanager.resource.memory-mb 139264

c5n インスタンス

c5n.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1613m
mapreduce.reduce.java.opts -Xmx3226m
mapreduce.map.memory.mb 2016
mapreduce.reduce.memory.mb 4032
yarn.app.mapreduce.am.resource.mb 4032
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 8064
yarn.nodemanager.resource.memory-mb 8064
c5n.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1613m
mapreduce.reduce.java.opts -Xmx3226m
mapreduce.map.memory.mb 2016
mapreduce.reduce.memory.mb 4032
yarn.app.mapreduce.am.resource.mb 4032
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 16128
yarn.nodemanager.resource.memory-mb 16128
c5n.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1741m
mapreduce.reduce.java.opts -Xmx3482m
mapreduce.map.memory.mb 2176
mapreduce.reduce.memory.mb 4352
yarn.app.mapreduce.am.resource.mb 4352
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 34816
yarn.nodemanager.resource.memory-mb 34816
c5n.9xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2002m
mapreduce.reduce.java.opts -Xmx4004m
mapreduce.map.memory.mb 2503
mapreduce.reduce.memory.mb 5006
yarn.app.mapreduce.am.resource.mb 5006
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 90112
yarn.nodemanager.resource.memory-mb 90112
c5n.18xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2094m
mapreduce.reduce.java.opts -Xmx4188m
mapreduce.map.memory.mb 2617
mapreduce.reduce.memory.mb 5234
yarn.app.mapreduce.am.resource.mb 5234
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416

c6g インスタンス

c6g.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1126
mapreduce.reduce.java.opts -Xmx2252m
mapreduce.map.memory.mb 1408
mapreduce.reduce.memory.mb 2816
yarn.app.mapreduce.am.resource.mb 2816
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 5632
yarn.nodemanager.resource.memory-mb 5632
c6g.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
c6g.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
c6g.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1375m
mapreduce.reduce.java.opts -Xmx2714m
mapreduce.map.memory.mb 1696年
mapreduce.reduce.memory.mb 3392
yarn.app.mapreduce.am.resource.mb 3392
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
c6g.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1425m
mapreduce.reduce.java.opts -xmx2850m
mapreduce.map.memory.mb 1781年
mapreduce.reduce.memory.mb 3562
yarn.app.mapreduce.am.resource.mb 3562
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
c6g.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1459m
mapreduce.reduce.java.opts -Xmx2918m
mapreduce.map.memory.mb 1824年
mapreduce.reduce.memory.mb 3648
yarn.app.mapreduce.am.resource.mb 3648
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736

C6gd インスタンス

c6gd.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1126m
mapreduce.reduce.java.opts -Xmx2252m
mapreduce.map.memory.mb 1408
mapreduce.reduce.memory.mb 2816
yarn.app.mapreduce.am.resource.mb 2816
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 5632
yarn.nodemanager.resource.memory-mb 5632
c6gd.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
c6gd.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
c6gd.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1357m
mapreduce.reduce.java.opts -Xmx2714m
mapreduce.map.memory.mb 1696年
mapreduce.reduce.memory.mb 3392
yarn.app.mapreduce.am.resource.mb 3392
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
c6gd.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1425m
mapreduce.reduce.java.opts -xmx2850m
mapreduce.map.memory.mb 1781年
mapreduce.reduce.memory.mb 3562
yarn.app.mapreduce.am.resource.mb 3562
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
c6gd.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1459m
mapreduce.reduce.java.opts -Xmx2918m
mapreduce.map.memory.mb 1824年
mapreduce.reduce.memory.mb 3648
yarn.app.mapreduce.am.resource.mb 3648
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736

C6gn インスタンス

c6gn.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1126m
mapreduce.reduce.java.opts -Xmx2252m
mapreduce.map.memory.mb 1408
mapreduce.reduce.memory.mb 2816
yarn.app.mapreduce.am.resource.mb 2816
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 5632
yarn.nodemanager.resource.memory-mb 5632
c6gn.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
c6gn.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1171m
mapreduce.reduce.java.opts -Xmx2342m
mapreduce.map.memory.mb 1464年
mapreduce.reduce.memory.mb 2928
yarn.app.mapreduce.am.resource.mb 2928
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
c6gn.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1357m
mapreduce.reduce.java.opts -Xmx2714m
mapreduce.map.memory.mb 1696年
mapreduce.reduce.memory.mb 3392
yarn.app.mapreduce.am.resource.mb 3392
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
c6gn.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1425m
mapreduce.reduce.java.opts -xmx2850m
mapreduce.map.memory.mb 1781年
mapreduce.reduce.memory.mb 3562
yarn.app.mapreduce.am.resource.mb 3562
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
c6gn.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx1459m
mapreduce.reduce.java.opts -Xmx2918m
mapreduce.map.memory.mb 1824年
mapreduce.reduce.memory.mb 3648
yarn.app.mapreduce.am.resource.mb 3648
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736

cc2 インスタンス

cc2.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1280m -Xmx1280m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 2560 2560
yarn.app.mapreduce.am.resource.mb 2560 2560
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 56320 28160
yarn.nodemanager.resource.memory-mb 56320 28160

cg1 インスタンス

cg1.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1280m -Xmx1280m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 2560 2560
yarn.app.mapreduce.am.resource.mb 2560 2560
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 5120 10240
yarn.nodemanager.resource.memory-mb 20480 10240

cr1 インスタンス

cr1.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx6042m -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m -Xmx12084m
mapreduce.map.memory.mb 7552 7552
mapreduce.reduce.memory.mb 15104 15104
yarn.app.mapreduce.am.resource.mb 15104 15104
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 241664 211456
yarn.nodemanager.resource.memory-mb 241664 211456

d2 インスタンス

d2.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2342m -Xmx2342m
mapreduce.reduce.java.opts -Xmx4685m -Xmx4685m
mapreduce.map.memory.mb 2928 2928
mapreduce.reduce.memory.mb 5856 5856
yarn.app.mapreduce.am.resource.mb 5856 5856
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23424 11712
yarn.nodemanager.resource.memory-mb 23424 11712
d2.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2714m -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m -Xmx5428m
mapreduce.map.memory.mb 3392 3392
mapreduce.reduce.memory.mb 6784 6784
yarn.app.mapreduce.am.resource.mb 6784 6784
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 54272 27136
yarn.nodemanager.resource.memory-mb 54272 27136
d2.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2918m -Xmx2918m
mapreduce.reduce.java.opts -Xmx5836m -Xmx5836m
mapreduce.map.memory.mb 3648 3648
mapreduce.reduce.memory.mb 7296 7296
yarn.app.mapreduce.am.resource.mb 7296 7296
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 116736 87552
yarn.nodemanager.resource.memory-mb 116736 87552
d2.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2417m -Xmx2417m
mapreduce.reduce.java.opts -Xmx4384m -Xmx4834m
mapreduce.map.memory.mb 3021 3021
mapreduce.reduce.memory.mb 6042 6042
yarn.app.mapreduce.am.resource.mb 6042 6042
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 241664 211470
yarn.nodemanager.resource.memory-mb 241664 211470

d3 インスタンス

d3.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4685m
mapreduce.reduce.java.opts -Xmx9370m
mapreduce.map.memory.mb 5856
mapreduce.reduce.memory.mb 11712
yarn.app.mapreduce.am.resource.mb 11712
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
d3.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5427m
mapreduce.reduce.java.opts -Xmx10854m
mapreduce.map.memory.mb 6784
mapreduce.reduce.memory.mb 13568
yarn.app.mapreduce.am.resource.mb 13568
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
d3.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5837m
mapreduce.reduce.java.opts -Xmx11674m
mapreduce.map.memory.mb 7296
mapreduce.reduce.memory.mb 14592
yarn.app.mapreduce.am.resource.mb 14592
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
d3.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m
mapreduce.map.memory.mb 7552
mapreduce.reduce.memory.mb 15104
yarn.app.mapreduce.am.resource.mb 15104
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664

d3en インスタンス

d3en.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
d3en.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
d3en.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m
mapreduce.map.memory.mb 3392
mapreduce.reduce.memory.mb 6784
yarn.app.mapreduce.am.resource.mb 6784
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
d3en.6xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx2850m
mapreduce.reduce.java.opts -xmx5700m
mapreduce.map.memory.mb 3563
mapreduce.reduce.memory.mb 7126
yarn.app.mapreduce.am.resource.mb 7126
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
d3en.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2918m
mapreduce.reduce.java.opts -xmx5700m
mapreduce.map.memory.mb 3648
mapreduce.reduce.memory.mb 7296
yarn.app.mapreduce.am.resource.mb 7296
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
d3en.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2918m
mapreduce.reduce.java.opts -xmx5700m
mapreduce.map.memory.mb 3733
mapreduce.reduce.memory.mb 7466
yarn.app.mapreduce.am.resource.mb 7466
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 179200
yarn.nodemanager.resource.memory-mb 179200

g2 インスタンス

g2.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx512m -Xmx512m
mapreduce.reduce.java.opts -Xmx1536m -Xmx1536m
mapreduce.map.memory.mb 768 768
mapreduce.reduce.memory.mb 2048 2048
yarn.app.mapreduce.am.resource.mb 2048 2048
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 8192 6144
yarn.nodemanager.resource.memory-mb 12288 6144

g3 インスタンス

g3.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5837m
mapreduce.reduce.java.opts -Xmx11674m
mapreduce.map.memory.mb 7296
mapreduce.reduce.memory.mb 14592
yarn.app.mapreduce.am.resource.mb 14592
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
g3.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m
mapreduce.map.memory.mb 7552
mapreduce.reduce.memory.mb 15104
yarn.app.mapreduce.am.resource.mb 15104
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664
g3.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 491520
yarn.nodemanager.resource.memory-mb 491520

g3s インスタンス

g3s.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4685m
mapreduce.reduce.java.opts -Xmx9370m
mapreduce.map.memory.mb 5856
mapreduce.reduce.memory.mb 11712
yarn.app.mapreduce.am.resource.mb 11712
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424

G4dn インスタンス

g4dn.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
g4dn.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
g4dn.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2867m
mapreduce.reduce.java.opts -Xmx5734m
mapreduce.map.memory.mb 3584
mapreduce.reduce.memory.mb 7168
yarn.app.mapreduce.am.resource.mb 7168
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
g4dn.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3072m
mapreduce.reduce.java.opts -Xmx6144m
mapreduce.map.memory.mb 3840
mapreduce.reduce.memory.mb 7680
yarn.app.mapreduce.am.resource.mb 7680
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
g4dn.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3140m
mapreduce.reduce.java.opts -Xmx6280m
mapreduce.map.memory.mb 3925
mapreduce.reduce.memory.mb 7850
yarn.app.mapreduce.am.resource.mb 7850
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416
g4dn.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3174m
mapreduce.reduce.java.opts -Xmx6348m
mapreduce.map.memory.mb 3968
mapreduce.reduce.memory.mb 7936
yarn.app.mapreduce.am.resource.mb 7936
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952

hi1 インスタンス

hi1.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2688m -Xmx2688m
mapreduce.reduce.java.opts -Xmx5376m -Xmx5376m
mapreduce.map.memory.mb 3360 3360
mapreduce.reduce.memory.mb 6720 6720
yarn.app.mapreduce.am.resource.mb 6720 6720
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 53760 26880
yarn.nodemanager.resource.memory-mb 53760 26880

hs1 インスタンス

hs1.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1280m -Xmx1280m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 2560 2560
yarn.app.mapreduce.am.resource.mb 2560 2560
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 8192 28160
yarn.nodemanager.resource.memory-mb 56320 28160

i2 インスタンス

i2.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2342m -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m -Xmx4684m
mapreduce.map.memory.mb 2928 2928
mapreduce.reduce.memory.mb 5856 5856
yarn.app.mapreduce.am.resource.mb 5856 5856
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23424 11712
yarn.nodemanager.resource.memory-mb 23424 11712
i2.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2714m -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m -Xmx5428m
mapreduce.map.memory.mb 3392 3392
mapreduce.reduce.memory.mb 6784 6784
yarn.app.mapreduce.am.resource.mb 6784 6784
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 54272 27136
yarn.nodemanager.resource.memory-mb 54272 27136
i2.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2918m -Xmx2918m
mapreduce.reduce.java.opts -Xmx5836m -Xmx5836m
mapreduce.map.memory.mb 3648 3648
mapreduce.reduce.memory.mb 7296 7296
yarn.app.mapreduce.am.resource.mb 7296 7296
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 116736 87552
yarn.nodemanager.resource.memory-mb 116736 87552
i2.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx3021m -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m -Xmx6042m
mapreduce.map.memory.mb 3776 3776
mapreduce.reduce.memory.mb 7552 7552
yarn.app.mapreduce.am.resource.mb 7552 7552
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 241664 211456
yarn.nodemanager.resource.memory-mb 241664 211456

i3 インスタンス

i3.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4685m
mapreduce.reduce.java.opts -Xmx9370m
mapreduce.map.memory.mb 5856
mapreduce.reduce.memory.mb 11712
yarn.app.mapreduce.am.resource.mb 11712
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
i3.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5427m
mapreduce.reduce.java.opts -Xmx10854m
mapreduce.map.memory.mb 6784
mapreduce.reduce.memory.mb 13568
yarn.app.mapreduce.am.resource.mb 13568
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
i3.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5837m
mapreduce.reduce.java.opts -Xmx11674m
mapreduce.map.memory.mb 7296
mapreduce.reduce.memory.mb 14592
yarn.app.mapreduce.am.resource.mb 14592
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
i3.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6042m
mapreduce.reduce.java.opts -Xmx12083m
mapreduce.map.memory.mb 7552
mapreduce.reduce.memory.mb 15104
yarn.app.mapreduce.am.resource.mb 15104
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664
i3.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 491520
yarn.nodemanager.resource.memory-mb 491520

i3en インスタンス

i3en.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4915m
mapreduce.reduce.java.opts -Xmx9830m
mapreduce.map.memory.mb 6144
mapreduce.reduce.memory.mb 12288
yarn.app.mapreduce.am.resource.mb 12288
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
i3en.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5734m
mapreduce.reduce.java.opts -Xmx11468m
mapreduce.map.memory.mb 7168
mapreduce.reduce.memory.mb 14336
yarn.app.mapreduce.am.resource.mb 14336
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
i3en.3xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6007m
mapreduce.reduce.java.opts -Xmx12014m
mapreduce.map.memory.mb 7509
mapreduce.reduce.memory.mb 15018
yarn.app.mapreduce.am.resource.mb 15018
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 90112
yarn.nodemanager.resource.memory-mb 90112
i3en.6xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6281m
mapreduce.reduce.java.opts -Xmx12562m
mapreduce.map.memory.mb 7851
mapreduce.reduce.memory.mb 15702
yarn.app.mapreduce.am.resource.mb 15702
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416
i3en.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6417m
mapreduce.reduce.java.opts -Xmx12834m
mapreduce.map.memory.mb 8021
mapreduce.reduce.memory.mb 16042
yarn.app.mapreduce.am.resource.mb 16042
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024
i3en.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6486m
mapreduce.reduce.java.opts -Xmx12972m
mapreduce.map.memory.mb 8107
mapreduce.reduce.memory.mb 16214
yarn.app.mapreduce.am.resource.mb 16214
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 778240
yarn.nodemanager.resource.memory-mb 778240

m1 インスタンス

m1.medium
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx512m
mapreduce.reduce.java.opts -Xmx768m
mapreduce.map.memory.mb 768
mapreduce.reduce.memory.mb 1024
yarn.app.mapreduce.am.resource.mb 1024
yarn.scheduler.minimum-allocation-mb 256
yarn.scheduler.maximum-allocation-mb 2048
yarn.nodemanager.resource.memory-mb 2048
m1.large
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx512m -Xmx512m
mapreduce.reduce.java.opts -Xmx1024m -Xmx1024m
mapreduce.map.memory.mb 768 768
mapreduce.reduce.memory.mb 1536 1536
yarn.app.mapreduce.am.resource.mb 1536 1536
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 5120 2560
yarn.nodemanager.resource.memory-mb 5120 2560
m1.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx512m -Xmx512m
mapreduce.reduce.java.opts -Xmx1536m -Xmx1536m
mapreduce.map.memory.mb 768 768
mapreduce.reduce.memory.mb 2048 2048
yarn.app.mapreduce.am.resource.mb 2048 2048
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 8192 6144
yarn.nodemanager.resource.memory-mb 12288 6144

m2 インスタンス

m2.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx864m -Xmx864m
mapreduce.reduce.java.opts -Xmx1536m -Xmx1536m
mapreduce.map.memory.mb 1024 1024
mapreduce.reduce.memory.mb 2048 2048
yarn.app.mapreduce.am.resource.mb 2048 2048
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 7168 7168
yarn.nodemanager.resource.memory-mb 14336 7168
m2.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1280m -Xmx1280m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 2560 2560
yarn.app.mapreduce.am.resource.mb 2560 2560
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 8192 15360
yarn.nodemanager.resource.memory-mb 61440 15360
m2.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1280m -Xmx1280m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 2560 2560
yarn.app.mapreduce.am.resource.mb 2560 2560
yarn.scheduler.minimum-allocation-mb 256 32
yarn.scheduler.maximum-allocation-mb 8192 30720
yarn.nodemanager.resource.memory-mb 61440 30720

m3 インスタンス

m3.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1152m -Xmx1152m
mapreduce.reduce.java.opts -Xmx2304m -Xmx2304m
mapreduce.map.memory.mb 1440 1440
mapreduce.reduce.memory.mb 2880 2880
yarn.app.mapreduce.am.resource.mb 2880 2880
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23040 11520
yarn.nodemanager.resource.memory-mb 23040 11520

m4 インスタンス

m4.large
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1229m -Xmx2458m
mapreduce.reduce.java.opts -Xmx2458m -Xmx4916m
mapreduce.map.memory.mb 1536 3072
mapreduce.reduce.memory.mb 3072 6144
yarn.app.mapreduce.am.resource.mb 3072 6144
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 6144 3072
yarn.nodemanager.resource.memory-mb 6144 3072
m4.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1229m -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m -Xmx2458m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 3072 3072
yarn.app.mapreduce.am.resource.mb 3072 3072
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 12288 6144
yarn.nodemanager.resource.memory-mb 12288 6144
m4.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1229m -Xmx1229m
mapreduce.reduce.java.opts -Xmx2458m -Xmx2458m
mapreduce.map.memory.mb 1536 1536
mapreduce.reduce.memory.mb 3072 3072
yarn.app.mapreduce.am.resource.mb 3072 3072
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 24576 12288
yarn.nodemanager.resource.memory-mb 24576 12288
m4.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1434m -Xmx1434m
mapreduce.reduce.java.opts -Xmx2868m -Xmx2868m
mapreduce.map.memory.mb 1792 1792
mapreduce.reduce.memory.mb 3584 3584
yarn.app.mapreduce.am.resource.mb 3584 3584
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 57344 28672
yarn.nodemanager.resource.memory-mb 57344 28672
m4.10xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx1557m -Xmx1557m
mapreduce.reduce.java.opts -Xmx3114m -Xmx3114m
mapreduce.map.memory.mb 1946 1946
mapreduce.reduce.memory.mb 3892 3892
yarn.app.mapreduce.am.resource.mb 3892 3892
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 155648 124544
yarn.nodemanager.resource.memory-mb 155648 124544
m4.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx1587m
mapreduce.reduce.java.opts -Xmx3174m
mapreduce.map.memory.mb 1984
mapreduce.reduce.memory.mb 3968
yarn.app.mapreduce.am.resource.mb 3968
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952

m5 インスタンス

m5.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
m5.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
m5.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2867m
mapreduce.reduce.java.opts -Xmx5734m
mapreduce.map.memory.mb 3584
mapreduce.reduce.memory.mb 7168
yarn.app.mapreduce.am.resource.mb 7168
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
m5.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3072m
mapreduce.reduce.java.opts -Xmx6144m
mapreduce.map.memory.mb 3840
mapreduce.reduce.memory.mb 7680
yarn.app.mapreduce.am.resource.mb 7680
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
m5.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3140m
mapreduce.reduce.java.opts -Xmx6280m
mapreduce.map.memory.mb 3925
mapreduce.reduce.memory.mb 7850
yarn.app.mapreduce.am.resource.mb 7850
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416
m5.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3174m
mapreduce.reduce.java.opts -Xmx6348m
mapreduce.map.memory.mb 3968
mapreduce.reduce.memory.mb 7936
yarn.app.mapreduce.am.resource.mb 7936
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
m5.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3209m
mapreduce.reduce.java.opts -Xmx6418m
mapreduce.map.memory.mb 4011
mapreduce.reduce.memory.mb 8022
yarn.app.mapreduce.am.resource.mb 8022
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024

m5a インスタンス

m5a.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
m5a.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
m5a.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2867m
mapreduce.reduce.java.opts -Xmx5734m
mapreduce.map.memory.mb 3584
mapreduce.reduce.memory.mb 7168
yarn.app.mapreduce.am.resource.mb 7168
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
m5a.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
m5a.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3140m
mapreduce.reduce.java.opts -Xmx6280m
mapreduce.map.memory.mb 3925
mapreduce.reduce.memory.mb 7850
yarn.app.mapreduce.am.resource.mb 7850
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416
m5a.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6349m
mapreduce.reduce.java.opts -Xmx12698m
mapreduce.map.memory.mb 7936
mapreduce.reduce.memory.mb 15872
yarn.app.mapreduce.am.resource.mb 15872
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
m5a.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3209m
mapreduce.reduce.java.opts -Xmx6418m
mapreduce.map.memory.mb 4011
mapreduce.reduce.memory.mb 8022
yarn.app.mapreduce.am.resource.mb 8022
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024

m5d インスタンス

m5d.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 12288
yarn.nodemanager.resource.memory-mb 12288
m5d.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2458m
mapreduce.reduce.java.opts -Xmx4916m
mapreduce.map.memory.mb 3072
mapreduce.reduce.memory.mb 6144
yarn.app.mapreduce.am.resource.mb 6144
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
m5d.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2867m
mapreduce.reduce.java.opts -Xmx5734m
mapreduce.map.memory.mb 3584
mapreduce.reduce.memory.mb 7168
yarn.app.mapreduce.am.resource.mb 7168
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
m5d.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
m5d.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3140m
mapreduce.reduce.java.opts -Xmx6280m
mapreduce.map.memory.mb 3925
mapreduce.reduce.memory.mb 7850
yarn.app.mapreduce.am.resource.mb 7850
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 188416
yarn.nodemanager.resource.memory-mb 188416
m5d.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6349m
mapreduce.reduce.java.opts -Xmx12698m
mapreduce.map.memory.mb 7936
mapreduce.reduce.memory.mb 15872
yarn.app.mapreduce.am.resource.mb 15872
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
m5d.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3209m
mapreduce.reduce.java.opts -Xmx6418m
mapreduce.map.memory.mb 4011
mapreduce.reduce.memory.mb 8022
yarn.app.mapreduce.am.resource.mb 8022
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024

M5zn インスタンス

m5zn.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2304m
mapreduce.reduce.java.opts -xmx4608m
mapreduce.map.memory.mb 2880
mapreduce.reduce.memory.mb 5760
yarn.app.mapreduce.am.resource.mb 5760
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11520
yarn.nodemanager.resource.memory-mb 11520
m5zn.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2304m
mapreduce.reduce.java.opts -xmx4608m
mapreduce.map.memory.mb 2880
mapreduce.reduce.memory.mb 5760
yarn.app.mapreduce.am.resource.mb 5760
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11520
yarn.nodemanager.resource.memory-mb 11520
m5zn.3xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2304m
mapreduce.reduce.java.opts -xmx5154m
mapreduce.map.memory.mb 3221
mapreduce.reduce.memory.mb 6442
yarn.app.mapreduce.am.resource.mb 6442
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 38656
yarn.nodemanager.resource.memory-mb 38656
m5zn.6xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx2850m
mapreduce.reduce.java.opts -xmx5700m
mapreduce.map.memory.mb 3563
mapreduce.reduce.memory.mb 7126
yarn.app.mapreduce.am.resource.mb 7126
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 85504
yarn.nodemanager.resource.memory-mb 85504
m5zn.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx2986m
mapreduce.reduce.java.opts -xmx5972m
mapreduce.map.memory.mb 3733
mapreduce.reduce.memory.mb 7466
yarn.app.mapreduce.am.resource.mb 7466
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 179200
yarn.nodemanager.resource.memory-mb 179200

m6g インスタンス

m6g.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
m6g.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
m6g.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m
mapreduce.map.memory.mb 3392
mapreduce.reduce.memory.mb 6784
yarn.app.mapreduce.am.resource.mb 6784
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
m6g.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2918m
mapreduce.reduce.java.opts -Xmx5836m
mapreduce.map.memory.mb 3648
mapreduce.reduce.memory.mb 7296
yarn.app.mapreduce.am.resource.mb 7296
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
m6g.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m
mapreduce.map.memory.mb 3776
mapreduce.reduce.memory.mb 7552
yarn.app.mapreduce.am.resource.mb 7552
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 181248
yarn.nodemanager.resource.memory-mb 181248
m6g.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m
mapreduce.map.memory.mb 3776
mapreduce.reduce.memory.mb 7552
yarn.app.mapreduce.am.resource.mb 7552
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664

M6gd インスタンス

m6gd.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 11712
yarn.nodemanager.resource.memory-mb 11712
m6gd.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m
mapreduce.map.memory.mb 2928
mapreduce.reduce.memory.mb 5856
yarn.app.mapreduce.am.resource.mb 5856
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
m6gd.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m
mapreduce.map.memory.mb 3392
mapreduce.reduce.memory.mb 6784
yarn.app.mapreduce.am.resource.mb 6784
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
m6gd.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx2918m
mapreduce.reduce.java.opts -Xmx5836m
mapreduce.map.memory.mb 3648
mapreduce.reduce.memory.mb 7296
yarn.app.mapreduce.am.resource.mb 7296
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
m6gd.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m
mapreduce.map.memory.mb 3776
mapreduce.reduce.memory.mb 7552
yarn.app.mapreduce.am.resource.mb 7552
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 181248
yarn.nodemanager.resource.memory-mb 181248
m6gd.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m
mapreduce.map.memory.mb 3776
mapreduce.reduce.memory.mb 7552
yarn.app.mapreduce.am.resource.mb 7552
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664

p2 インスタンス

p2.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx10854m
mapreduce.reduce.java.opts -Xmx21708m
mapreduce.map.memory.mb 13568
mapreduce.reduce.memory.mb 27136
yarn.app.mapreduce.am.resource.mb 27136
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
p2.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx12288m
mapreduce.reduce.java.opts -Xmx24576
mapreduce.map.memory.mb 15360
mapreduce.reduce.memory.mb 30720
yarn.app.mapreduce.am.resource.mb 30720
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 491520
yarn.nodemanager.resource.memory-mb 491520
p2.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx9267m
mapreduce.reduce.java.opts -Xmx18534m
mapreduce.map.memory.mb 11584
mapreduce.reduce.memory.mb 23168
yarn.app.mapreduce.am.resource.mb 23168
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 741376
yarn.nodemanager.resource.memory-mb 741376

p3 インスタンス

p3.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5427m
mapreduce.reduce.java.opts -Xmx10854m
mapreduce.map.memory.mb 6784
mapreduce.reduce.memory.mb 13568
yarn.app.mapreduce.am.resource.mb 13568
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
p3.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m
mapreduce.map.memory.mb 7552
mapreduce.reduce.memory.mb 15104
yarn.app.mapreduce.am.resource.mb 15104
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664
p3.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 491520
yarn.nodemanager.resource.memory-mb 491520

r3 インスタンス

r3.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2342m -Xmx2342m
mapreduce.reduce.java.opts -Xmx4684m -Xmx4684m
mapreduce.map.memory.mb 2928 2928
mapreduce.reduce.memory.mb 5856 5856
yarn.app.mapreduce.am.resource.mb 5856 5856
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23424 11712
yarn.nodemanager.resource.memory-mb 23424 11712
r3.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2714m -Xmx2714m
mapreduce.reduce.java.opts -Xmx5428m -Xmx5428m
mapreduce.map.memory.mb 3392 3392
mapreduce.reduce.memory.mb 6784 6784
yarn.app.mapreduce.am.resource.mb 6784 6784
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 54272 27136
yarn.nodemanager.resource.memory-mb 54272 27136
r3.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx2918m -Xmx2918m
mapreduce.reduce.java.opts -Xmx5836m -Xmx5836m
mapreduce.map.memory.mb 3648 3648
mapreduce.reduce.memory.mb 7296 7296
yarn.app.mapreduce.am.resource.mb 7296 7296
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 116736 87552
yarn.nodemanager.resource.memory-mb 116736 87552
r3.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx3021m -Xmx3021m
mapreduce.reduce.java.opts -Xmx6042m -Xmx6042m
mapreduce.map.memory.mb 3776 3776
mapreduce.reduce.memory.mb 7552 7552
yarn.app.mapreduce.am.resource.mb 7552 7552
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 241664 211456
yarn.nodemanager.resource.memory-mb 241664 211456

r4 インスタンス

注記

R4 インスタンスは Amazon EMR リリースバージョン 5.4.0 以降でのみ利用できます。

r4.xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx4685m -Xmx2342m
mapreduce.reduce.java.opts -Xmx9370m -Xmx4684m
mapreduce.map.memory.mb 5856 5856
mapreduce.reduce.memory.mb 11712 11712
yarn.app.mapreduce.am.resource.mb 11712 11712
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 23424 11712
yarn.nodemanager.resource.memory-mb 23424 11712
r4.2xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx5427m -Xmx5427m
mapreduce.reduce.java.opts -Xmx10854m -Xmx10854m
mapreduce.map.memory.mb 6784 6784
mapreduce.reduce.memory.mb 13568 13568
yarn.app.mapreduce.am.resource.mb 13568 13568
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 54272 27136
yarn.nodemanager.resource.memory-mb 54272 27136
r4.4xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx5837m -Xmx5837m
mapreduce.reduce.java.opts -Xmx11674m -Xmx11674m
mapreduce.map.memory.mb 7296 7296
mapreduce.reduce.memory.mb 14592 14592
yarn.app.mapreduce.am.resource.mb 14592 14592
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 116736 87552
yarn.nodemanager.resource.memory-mb 116736 87552
r4.8xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx6042m -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m -Xmx12084m
mapreduce.map.memory.mb 7552 7552
mapreduce.reduce.memory.mb 15104 15104
yarn.app.mapreduce.am.resource.mb 15104 15104
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 241664 211456
yarn.nodemanager.resource.memory-mb 241664 211456
r4.16xlarge
設定オプション デフォルト値 HBase がインストールされている場合
mapreduce.map.java.opts -Xmx6144m -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m -Xmx1228m
mapreduce.map.memory.mb 7680 7680
mapreduce.reduce.memory.mb 15360 15360
yarn.app.mapreduce.am.resource.mb 15360 15360
yarn.scheduler.minimum-allocation-mb 32 32
yarn.scheduler.maximum-allocation-mb 491520 460800
yarn.nodemanager.resource.memory-mb 491520 460800

r5 インスタンス

r5.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4915m
mapreduce.reduce.java.opts -Xmx9830m
mapreduce.map.memory.mb 6144
mapreduce.reduce.memory.mb 12288
yarn.app.mapreduce.am.resource.mb 12288
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
r5.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5734m
mapreduce.reduce.java.opts -Xmx11468m
mapreduce.map.memory.mb 7168
mapreduce.reduce.memory.mb 14336
yarn.app.mapreduce.am.resource.mb 14336
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
r5.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
r5.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6349m
mapreduce.reduce.java.opts -Xmx12698m
mapreduce.map.memory.mb 7936
mapreduce.reduce.memory.mb 15872
yarn.app.mapreduce.am.resource.mb 15872
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
r5.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6417m
mapreduce.reduce.java.opts -Xmx12834m
mapreduce.map.memory.mb 8021
mapreduce.reduce.memory.mb 16042
yarn.app.mapreduce.am.resource.mb 16042
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024
r5.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6451m
mapreduce.reduce.java.opts -Xmx12902m
mapreduce.map.memory.mb 8064
mapreduce.reduce.memory.mb 16128
yarn.app.mapreduce.am.resource.mb 16128
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 516096
yarn.nodemanager.resource.memory-mb 516096
r5.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6486m
mapreduce.reduce.java.opts -Xmx12972m
mapreduce.map.memory.mb 8107
mapreduce.reduce.memory.mb 16214
yarn.app.mapreduce.am.resource.mb 16214
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 778240
yarn.nodemanager.resource.memory-mb 778240

r5a インスタンス

r5a.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4915m
mapreduce.reduce.java.opts -Xmx9830m
mapreduce.map.memory.mb 6144
mapreduce.reduce.memory.mb 12288
yarn.app.mapreduce.am.resource.mb 12288
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
r5a.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5734m
mapreduce.reduce.java.opts -Xmx11468m
mapreduce.map.memory.mb 7168
mapreduce.reduce.memory.mb 14336
yarn.app.mapreduce.am.resource.mb 14336
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
r5a.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
r5a.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6349m
mapreduce.reduce.java.opts -Xmx12698m
mapreduce.map.memory.mb 7936
mapreduce.reduce.memory.mb 15872
yarn.app.mapreduce.am.resource.mb 15872
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
r5a.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6417m
mapreduce.reduce.java.opts -Xmx12834m
mapreduce.map.memory.mb 8021
mapreduce.reduce.memory.mb 16042
yarn.app.mapreduce.am.resource.mb 16042
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024
r5a.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6451m
mapreduce.reduce.java.opts -Xmx12902m
mapreduce.map.memory.mb 8064
mapreduce.reduce.memory.mb 16128
yarn.app.mapreduce.am.resource.mb 16128
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 516096
yarn.nodemanager.resource.memory-mb 516096
r5a.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6486m
mapreduce.reduce.java.opts -Xmx12972m
mapreduce.map.memory.mb 8107
mapreduce.reduce.memory.mb 16214
yarn.app.mapreduce.am.resource.mb 16214
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 778240
yarn.nodemanager.resource.memory-mb 778240

r5b インスタンス

r5b.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4685m
mapreduce.reduce.java.opts -Xmx9370m
mapreduce.map.memory.mb 5856
mapreduce.reduce.memory.mb 11712
yarn.app.mapreduce.am.resource.mb 11712
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 23424
yarn.nodemanager.resource.memory-mb 23424
r5b.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5427m
mapreduce.reduce.java.opts -Xmx10854m
mapreduce.map.memory.mb 6784
mapreduce.reduce.memory.mb 13568
yarn.app.mapreduce.am.resource.mb 13568
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 54272
yarn.nodemanager.resource.memory-mb 54272
r5b.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5837m
mapreduce.reduce.java.opts -Xmx11674m
mapreduce.map.memory.mb 7296
mapreduce.reduce.memory.mb 14592
yarn.app.mapreduce.am.resource.mb 14592
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 116736
yarn.nodemanager.resource.memory-mb 116736
r5b.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6042m
mapreduce.reduce.java.opts -Xmx12084m
mapreduce.map.memory.mb 7552
mapreduce.reduce.memory.mb 15104
yarn.app.mapreduce.am.resource.mb 15104
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 241664
yarn.nodemanager.resource.memory-mb 241664
r5b.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx6110m
mapreduce.reduce.java.opts -xmx12220m
mapreduce.map.memory.mb 7637
mapreduce.reduce.memory.mb 15274
yarn.app.mapreduce.am.resource.mb 15274
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 366592
yarn.nodemanager.resource.memory-mb 366592
r5b.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 491520
yarn.nodemanager.resource.memory-mb 491520
r5b.24xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -xmx6178m
mapreduce.reduce.java.opts -xmx12356m
mapreduce.map.memory.mb 7723
mapreduce.reduce.memory.mb 15446
yarn.app.mapreduce.am.resource.mb 15446
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 741376
yarn.nodemanager.resource.memory-mb 741376

r5d インスタンス

r5d.xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx4915m
mapreduce.reduce.java.opts -Xmx9830m
mapreduce.map.memory.mb 6144
mapreduce.reduce.memory.mb 12288
yarn.app.mapreduce.am.resource.mb 12288
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 24576
yarn.nodemanager.resource.memory-mb 24576
r5d.2xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx5734m
mapreduce.reduce.java.opts -Xmx11468m
mapreduce.map.memory.mb 7168
mapreduce.reduce.memory.mb 14336
yarn.app.mapreduce.am.resource.mb 14336
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 57344
yarn.nodemanager.resource.memory-mb 57344
r5d.4xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6144m
mapreduce.reduce.java.opts -Xmx12288m
mapreduce.map.memory.mb 7680
mapreduce.reduce.memory.mb 15360
yarn.app.mapreduce.am.resource.mb 15360
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 122880
yarn.nodemanager.resource.memory-mb 122880
r5d.8xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6349m
mapreduce.reduce.java.opts -Xmx12698m
mapreduce.map.memory.mb 7936
mapreduce.reduce.memory.mb 15872
yarn.app.mapreduce.am.resource.mb 15872
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 253952
yarn.nodemanager.resource.memory-mb 253952
r5d.12xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6417m
mapreduce.reduce.java.opts -Xmx12834m
mapreduce.map.memory.mb 8021
mapreduce.reduce.memory.mb 16042
yarn.app.mapreduce.am.resource.mb 16042
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 385024
yarn.nodemanager.resource.memory-mb 385024
r5d.16xlarge
設定オプション デフォルト値
mapreduce.map.java.opts -Xmx6451m
mapreduce.reduce.java.opts -Xmx12902m
mapreduce.map.memory.mb 8064
mapreduce.reduce.memory.mb 16128
yarn.app.mapreduce.am.resource.mb 16128
yarn.scheduler.minimum-allocation-mb 32
yarn.scheduler.maximum-allocation-mb 516096
yarn.nodemanager.resource.memory-mb 516096