インスタンスフリートを構成する
クラスターのインスタンスフリート構成は、最も広範な EC2 インスタンスのプロビジョニングオプションを提供します。インスタンスフリートでは、各フリート内のオンデマンドインスタンスおよびスポットインスタンスのターゲット容量を指定します。クラスターを起動すると、Amazon EMR は、ターゲットが満たされるまでインスタンスをプロビジョニングします。ターゲットを満たすときは、使用する Amazon EMR ごとに、フリートあたり最大 5 つの EC2 インスタンスタイプを指定できます。また、異なるアベイラビリティーゾーンに複数のサブネットを選択することもできます。Amazon EMR がクラスターを起動するときは、これらのサブネットで、指定されたインスタンスと購入オプションを探します。
クラスターの実行中に、価格の値上げまたはインスタンスの失敗のために Amazon EC2 がスポットインスタンスを再利用する場合、Amazon EMR は指定するインスタンスタイプのいずれかで、そのインスタンスを置き換えようとします。これにより、スポット料金の急激な増加中に容量を再取得することが容易になります。インスタンスフリートにより、ノードタイプごとに、柔軟で順応性に富むリソース戦略を作成できます。たとえば、特定のフリート内で、利用可能な場合はより安価なスポットキャパシティーでオンデマンドキャパシティーのコアを補足し、目的の料金でスポットが利用できない場合は、オンデマンドキャパシティーに切り替えることができます。
注記
インスタンスフリート設定は、5.0.0 および 5.0.3 を除く Amazon EMR バージョン 4.8.0 以降でのみ使用できます。
主要な機能の概要
-
1 つのインスタンスフリート、およびノードタイプ (マスター、コア、タスク) あたり 1 つのみ。フリートごとに最大 5 つの EC2 インスタンスタイプが指定されます。
-
Amazon EMR は、スポット購入オプションとオンデマンド購入オプションの両方で、プロビジョニングする５ つの EC2 インスタンスタイプのいずれかまたはすべてを選択します。
-
コアフリートとタスクフリートのスポットおよびオンデマンドインスタンスのターゲット容量を確立します。ターゲットに対してカウントされる、各 EC2 インスタンスに割り当てられた vCPU または汎用ユニットを使用します。Amazon EMR は各ターゲット容量が完全に満たされるまでインスタンスをプロビジョニングします。マスターフリートの場合、ターゲットは常に 1 つです。
-
1 つのサブネット (アベイラビリティーゾーン) または範囲を選択します。Amazon EMR は、最適なアベイラビリティーゾーンで容量をプロビジョニングします。
-
スポットインスタンスのターゲット容量を指定するとき、次のことを実行します。
-
インスタンスタイプごとに、最大スポット料金を指定します。スポット料金が最大スポット料金を下回る場合、Amazon EMR はスポットインスタンスをプロビジョニングします。お客様にご負担いただくのはスポット料金であり、必ずしも最大スポット料金ではありません。
-
オプションで、各フリートに定義期間 (スポットブロックとも呼ばれる) を指定します。スポットインスタンスは、定義期間が過ぎた後にのみ終了します。
-
フリートごとにスポットインスタンスをプロビジョニングするためのタイムアウト期間を定義します。Amazon EMR がスポットキャパシティーをプロビジョニングできない場合は、代わりにクラスターを終了させるか、オンデマンド容量のプロビジョニングに切り替えることができます。
-
インスタンスフリートオプション
次のガイドラインを使用して、インスタンスフリートオプションについて理解してください。
ターゲット容量の設定
コアフリートとタスクフリートのターゲット容量を指定します。この操作を行うと、Amazon EMR がプロビジョニングするオンデマンドインスタンスとスポットインスタンスの数が決まります。インスタンスを指定するときは、ターゲットに対してカウントされる各インスタンスの数を決定します。オンデマンドインスタンスがプロビジョニングされると、オンデマンドターゲットに対してカウントされます。スポットインスタンスの場合も同様です。マスターフリートはコアフリートやタスクフリートとは異なり、常に 1 つのインスタンスです。したがって、このフリートのターゲット容量は常に 1 になります。
コンソールを使用する場合、デフォルトではターゲット容量のカウントとして、EC2 インスタンスタイプの vCPU が使用されます。これを [Generic units (汎用ユニット)] に変更し、各 EC2 インスタンスタイプの数を指定できます。AWS CLI を使用する場合は、各インスタンスタイプに手動で汎用ユニットを割り当てることができます。
重要
AWS マネジメントコンソール を使用してインスタンスタイプを選択すると、[Instance type] ごとに表示される [vCPU] の数は、そのインスタンスタイプの EC2 vCPU の数ではなく、そのインスタンスタイプの YARN vcores の数になります。インスタンスタイプごとの vCPU の数の詳細については、「Amazon EC2 インスタンスタイプ」を参照してください。
フリートごとに最大 5 つの EC2 インスタンスタイプを指定します。Amazon EMR は、これらの EC2 インスタンスタイプの任意の組み合わせを選択して、ターゲット容量を満たします。Amazon EMR は完全にターゲット容量を満たそうとするため、超過が発生する可能性があります。たとえば、2 つの満たされていないユニットがある場合、Amazon EMR は 5 ユニットのインスタンスしかプロビジョニングできず、インスタンスは引き続きプロビジョニングされます。つまり、ターゲット容量を 3 ユニット超過します。
ターゲット容量を減らして実行中のクラスターのサイズを変更する場合、Amazon EMR は新しいターゲットに合わせてアプリケーションタスクを完了し、インスタンスを削除しようとします。詳細については、「タスクの完了時に終了」を参照してください。Amazon EMR には、サイズ変更オペレーションを完了するための 60 分のタイムアウトがあります。場合によっては、60 分後にノードでまだ実行中のタスクがあるが、Amazon EMR はサイズ変更オペレーションが正常に実行され、新しいターゲットが満たされていないと報告することがあります。
スポットインスタンスオプション
フリートの 5 つの各インスタンスタイプに、[Maximum Spot price (最大スポット料金)] を指定します。この料金は、オンデマンド料金のパーセンテージまたは特定の金額として設定できます。アベイラビリティーゾーンの現在のスポット料金が最大スポット料金を下回っている場合、Amazon EMR はスポットインスタンスをプロビジョニングします。お客様にご負担いただくのはスポット料金であり、必ずしも最大スポット料金ではありません。
フリートのスポットインスタンスで [Defined duration (定義された期間)] を指定できます。スポット料金が変動した場合、Amazon EMR は [Defined duration (定義された期間)] が終了するまでインスタンスを削除しません。定義期間の価格は、このオプションを選択すると適用されます。定義期間を指定しない場合、インスタンスは、スポット価格が最大スポット料金を上回るとすぐ終了します。詳細については、「スポットインスタンスの継続期間の指定」および「Amazon EC2 スポットインスタンスの価格設定」を参照してください。
各フリートで、[Provisioning timeout (プロビジョニングのタイムアウト)] を定義することもできます。タイムアウトは、クラスターが作成時に容量をプロビジョニングしているときに、指定どおりにターゲット容量を満たすために十分な数のスポットインスタンスをプロビジョニングできない場合に適用されます。タイムアウト期間と、実行するアクションを指定します。クラスターを終了させるか、残りのスポット容量を満たすためにオンデマンド容量のプロビジョニングに切り替えることができます。オンデマンドへの切り替えを選択した場合、残りのスポット容量は、タイムアウト後に実質的にオンデマンドターゲット容量に追加されます。
スポットインスタンスの詳細については、『Linux インスタンス用 Amazon EC2 ユーザーガイド』の「スポットインスタンス」を参照してください。
複数サブネット (アベイラビリティーゾーン) オプション
インスタンスフリートを使用する場合は、VPC 内で複数の EC2 サブネットを指定できます。それぞれが異なるアベイラビリティーゾーンに対応しています。EC2-Classic を使用する場合はアベイラビリティーゾーンを明示的に指定します。Amazon EMR は、フリートの指定に従って、インスタンスを起動するために最適なアベイラビリティーゾーンを識別します。インスタンスは、１ つのアベイラビリティーゾーンのみで常にプロビジョニングされます。プライベートサブネットまたはパブリックサブネットを選択できますが、2 つを組み合わせることはできません。指定するサブネットは同じ VPC 内になければなりません。
マスターノードの構成
マスターインスタンスフリートは単一インスタンスにすぎないため、その構成はコアインスタンスフリートとタスクインスタンスフリートとは多少異なります。マスターインスタンスフリートは
１ つのみのインスタンスで構成されているため、マスターインスタンスフリートにはオンデマンドまたはスポットのいずれかを選択します。コンソールを使用してインスタンスフリートを作成する場合、選択する購入オプションのターゲット容量は
1 に設定されます。AWS CLI を使用する場合、TargetSpotCapacity または TargetOnDemandCapacity のいずれかを必要に応じて 1 に設定します。依然として、マスターインスタンスフリートに最大 5 つのインスタンスタイプを選択できます。ただし、Amazon EMR
が異なるタイプの複数のインスタンスをプロビジョニングする可能性があるコアインスタンスフリートとタスクインスタンスフリートとは異なり、Amazon EMR は、マスターインスタンスフリートにプロビジョニングするために単一インスタンスタイプを選択します。
コンソールを使用してインスタンスフリートを構成する
インスタンスフリートを使用してクラスターを作成するには、Amazon EMR コンソールの [Advanced options (詳細オプション)] 構成を使用します。
コンソールを使用してインスタンスフリートでクラスターを作成するには
-
Amazon EMR コンソール (https://console.aws.amazon.com/elasticmapreduce/) を開きます。
-
[Create cluster] を選択します。
-
[Go to advanced options (詳細オプションに移動する)] を選択し、[ソフトウェアの構成] オプションに入り、[次へ] を選択します。
-
[インスタンスフリート] を選択します。
-
[Network] に値を入力します。[Network (ネットワーク)] の VPC を選択する場合、[EC2 Subnet (EC2 サブネット)] を 1 つ選択するか、CTRL を押しながら複数の EC2 サブネットを選択します。選択するサブネットは同じ種類 (パブリックまたはプライベート) である必要があります。1 つのみ選択した場合、クラスターはそのサブネット内で起動します。グループを選択した場合は、クラスターの起動時にグループから最適なサブネットが選択されます。
注記
アカウントおよびリージョンによっては、[Network (ネットワーク)] の [Launch into EC2-Classic (EC2-Classic に起動)] を選択するオプションが提供されます。そのオプションを選択する場合、[EC2 Subnets (EC2 サブネット)] ではなく、[EC2 Availability Zones (EC2 アベイラビリティーゾーン)] から 1 つ以上を選択します。詳細については、Linux インスタンス用 Amazon EC2 ユーザーガイドの「Amazon EC2 および Amazon VPC」を参照してください。
-
各ノードタイプの行内の [ノードタイプ] で、インスタンスフリートのデフォルト名を変更する場合、鉛筆アイコンをクリックしてわかりやすい名前を入力します。[タスク] インスタンスフリートを削除する場合は、X アイコンをクリックします。
-
[Target capacity (ターゲット容量)] の下で、次のガイドラインに従ってオプションを選択します。
-
[Target capacity (ターゲット容量)] を定義する方法を選択します。[vCPU] を選択すると、各 [Fleet instance type (フリートインスタンスタイプ)] の YARN vcores の数が加重容量として使用されます。[Generic units (汎用ユニット)] を選択する場合、ターゲット容量ごとにカスタム番号を割り当て、その後各インスタンスタイプにカスタム加重容量を割り当てます。この目的のフィールドは、[Fleet instance type (フリートインスタンスタイプ)] の下に追加するインスタンスごとに表示されます。
-
[マスター] ノードの場合、インスタンスが [オンデマンド] であるか、[スポット] であるか選択します。
-
[コア] および [タスク] ノードの場合、[オンデマンド] および [スポット] のターゲット容量を入力します。Amazon EMR は、これらの容量が満たされるまで、お客様が指定する [Fleet instance types (フリートインスタンスタイプ)] をプロビジョニングします。
-
-
各 [Node type (ノードタイプ)] の [Fleet instance types (フリートインスタンスタイプ)] の下で、次のガイドラインに従ってオプションを選択します。
-
[Add/remove instance types to fleet (フリートへのインスタンスタイプの追加/削除)] を選択し、リストから最大 5 つのインスタンスタイプを選択します。Amazon EMR は、クラスターを起動するときにこれらのインスタンスタイプの任意の組み合わせをプロビジョニングする可能性があります。
-
ノードタイプが [スポット] 用の [Target capacity (ターゲット容量)] で構成される場合は、[Maximum Spot price (最大スポット料金)] を選択します。[% オンデマンド価格] として最大スポット料金を入力するか、[Dollars ($) (ドル)] 金額を米ドルで入力します。
ヒント
[Maximum Spot price (最大スポット料金)] の情報ツールヒントの上にカーソルを置き、現在のリージョンのすべてのアベイラビリティーゾーンに対するスポット料金を確認します。最低のスポット価格は緑色で表示されます。[EC2 Subnet (EC2 サブネット)] の選択にこの情報を使用できます。
-
[Target capacity (ターゲット容量)] に [Default units (デフォルトユニット)] を選択する場合、各インスタンスタイプに割当てる加重容量を [Each instance counts as (各インスタンスのカウント単位)] ボックスに入力します。
-
インスタンスタイプがプロビジョニングされるときに EBS ボリュームをアタッチするには、[EBS Storage (EBS ストレージ)] の隣にある鉛筆をクリックしてから、EBS 構成オプションを入力します。
-
-
[スポット] の [Target capacity (ターゲット容量)] を設定したら、次のガイドラインに従って [Advanced Spot options (詳細スポットオプション)] を選択します。
-
[Defined duration (定義された期間)] - デフォルトの [Not set (未設定)] のままの場合、スポットインスタンスは、スポット料金が最大スポット料金を超えるか、クラスターが終了した時点で終了します。値を設定すれば、スポットインスタンスはその期間が終わるまで終了しません。
重要
[Defined duration (定義された期間)] を設定すると、特別な定義された期間の価格が適用されます。料金詳細については、「Amazon EC2 スポットインスタンスの価格設定」を参照してください。
-
[Provisioning timeout (プロビジョニングのタイムアウト)] - 指定する [Fleet instance types (フリートインスタンスタイプ)] からスポットインスタンスをプロビジョニングできない場合、これらの設定を使用して Amazon EMR の動作をコントロールします。分数でタイムアウト期間を入力し、[Terminate the cluster (クラスターを終了する)] か、[Switch to provisioning On-Demand Instances (オンデマンドインスタンスのプロビジョニングに切り替える)] かを選択します。オンデマンドインスタンスに切り替える選択をする場合、オンデマンドインスタンスの加重容量はスポットインスタンスのターゲット容量に含められ、Amazon EMRは、スポットインスタンスのターゲット容量が満たされるまでオンデマンドインスタンスをプロビジョニングします。
-
-
[次へ] を選択してクラスター設定を変更し、続いてクラスターを起動します。
CLI を使用してインスタンスフリートを構成する
-
インスタンスフリートでクラスターを作成して起動するには、
create-clusterパラメータとともに--instance-fleetコマンドを使用します。 -
クラスター内のインスタンスフリートの構成情報を得るには、
list-instance-fleetsコマンドを使用します。 -
インスタンスフリートのターゲット容量に変更を加えるには、
modify-instance-fleetコマンドを使用します。 -
タスクインスタンスがないクラスターにタスクインスタンスを追加するには、
add-instance-fleetコマンドを使用します。
注記
読みやすくするため、Linux の行連結文字 (\) を含めています。Linux コマンドでは、これらの文字は削除することも、使用することもできます。Windows の場合は、削除するか、キャレット (^) で置き換えます。
インスタンスフリート構成でクラスターを作成する
次の例は、 create-cluster コマンドを、組み合わせ可能なさまざまなオプションを使って実行する方法を示しています。
注記
デフォルト EMR サービスロールと EC2 インスタンスプロファイルを作成したことがない場合、 aws emr create-default-roles コマンドを使用する前に、 create-cluster を使って作成します。
例: オンデマンドマスター、単一インスタンスタイプのオンデマンドコア、デフォルト VPC
aws emr create-cluster --release-label emr-5.3.1 --service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole \ --instance-fleets InstanceFleetType=MASTER,TargetOnDemandCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large}'] \ InstanceFleetType=CORE,TargetOnDemandCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large}']
例:スポットマスター、単一インスタンスタイプのスポットコア、デフォルト VPC
aws emr create-cluster --release-label emr-5.3.1 --service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole \ --instance-fleets InstanceFleetType=MASTER,TargetSpotCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5}'] \ InstanceFleetType=CORE,TargetSpotCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5}']
例:オンデマンドマスター、単一インスタンスタイプの混合コア、単一 EC2 サブネット
aws emr create-cluster --release-label emr-5.3.1 --service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole,SubnetIds=['subnet-ab12345c'] \ --instance-fleets InstanceFleetType=MASTER,TargetOnDemandCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large}'] \ InstanceFleetType=CORE,TargetOnDemandCapacity=2,TargetSpotCapacity=6,InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5,WeightedCapacity=2}']
例:オンデマンドマスター、複数の加重インスタンスタイプのスポットコア、スポットの定義期間とタイムアウト、EC2 サブネットの範囲
aws emr create-cluster --release-label emr-5.3.1 --service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole,SubnetIds=['subnet-ab12345c','subnet-de67890f'] \ --instance-fleets InstanceFleetType=MASTER,TargetOnDemandCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large}'] \ InstanceFleetType=CORE,TargetSpotCapacity=11,InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5,WeightedCapacity=3}',\ '{InstanceType=m4.2xlarge,BidPrice=0.9,WeightedCapacity=5}'],\ LaunchSpecifications={SpotSpecification='{TimeoutDurationMinutes=120,TimeoutAction=SWITCH_TO_ON_DEMAND}'}
例:オンデマンドマスター、複数の加重インスタンスタイプの混合コアおよびタスク、コアスポットインスタンスの定義期間とタイムアウト、EC2 サブネットの範囲
aws emr create-cluster --release-label emr-5.3.1 --service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole,SubnetIds=['subnet-ab12345c','subnet-de67890f'] \ --instance-fleets InstanceFleetType=MASTER,TargetOnDemandCapacity=1,InstanceTypeConfigs=['{InstanceType=m4.large}'] \ InstanceFleetType=CORE,TargetOnDemandCapacity=8,TargetSpotCapacity=6,\ InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5,WeightedCapacity=3}',\ '{InstanceType=m4.2xlarge,BidPrice=0.9,WeightedCapacity=5}'],\ LaunchSpecifications={SpotSpecification='{TimeoutDurationMinutes=120,TimeoutAction=SWITCH_TO_ON_DEMAND}'} \ InstanceFleetType=TASK,TargetOnDemandCapacity=3,TargetSpotCapacity=3,\ InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5,WeightedCapacity=3}']
例: スポットマスター、コアまたはタスクなし、EBS 構成、デフォルト VPC
aws emr create-cluster --release-label emr 5.3.1 -service-role EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole \ --instance-fleets InstanceFleetType=MASTER,TargetSpotCapacity=1,\ LaunchSpecifications={SpotSpecification='{TimeoutDurationMinutes=60,TimeoutAction=TERMINATE_CLUSTER}'},\ InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5,\ EbsConfiguration={EbsOptimized=true,EbsBlockDeviceConfigs=[{VolumeSpecification={VolumeType=gp2,\ SizeIn GB=100}},{VolumeSpecification={VolumeType=io1,SizeInGB=100,Iop s=100},VolumesPerInstance=4}]}}']
例 JSON 構成ファイルを使用する
JSON ファイルでインスタンスフリートパラメータを構成してから、インスタンスフリートの唯一のパラメータとして JSON ファイルを参照できますたとえば、次のコマンドは JSON 構成ファイル ( my-fleet-config.json) を参照します。
aws emr create-cluster --release-label emr-5.2.0 --servicerole EMR_DefaultRole \ --ec2-attributes InstanceProfile=EMR_EC2_DefaultRole \ --instance-fleets file://my-fleet-config.json
my-fleet-config.json は、マスター、コア、およびタスクインスタンスフリートを、次の例で示すように指定します。コアインスタンスフリートは、オンデマンドの割合として最大スポット料金
(BidPrice) を使用するのに対し、タスクおよびマスターインスタンスフリートでは、米ドルの文字列として、最大スポット料金 (BidPriceAsPercentageofOnDemandPrice)
を使用します。
[ { "Name": "Masterfleet", "InstanceFleetType": "MASTER", "TargetSpotCapacity": 1, "LaunchSpecifications": { "SpotSpecification": { "TimeoutDurationMinutes": 120, "TimeoutAction": "SWITCH_TO_ON_DEMAND" } }, "InstanceTypeConfigs": [ { "InstanceType": "m4.large", "BidPrice": "0.89" } ] }, { "Name": "Corefleet", "InstanceFleetType": "CORE", "TargetSpotCapacity": 1, "LaunchSpecifications": { "SpotSpecification": { "TimeoutDurationMinutes": 120, "TimeoutAction": "TERMINATE_CLUSTER" } }, "InstanceTypeConfigs": [ { "InstanceType": "m4.large", "BidPriceAsPercentageOfOnDemandPrice": 100 } ] }, { "Name": "Taskfleet", "InstanceFleetType": "TASK", "TargetSpotCapacity": 1, "LaunchSpecifications": { "SpotSpecification": { "TimeoutDurationMinutes": 120, "TimeoutAction": "TERMINATE_CLUSTER" } }, "InstanceTypeConfigs": [ { "InstanceType": "m4.large", "BidPrice": "0.89" } ] } ]
クラスター内でインスタンスフリートの構成情報を取得する
クラスター内のインスタンスフリートの構成情報を得るには、 list-instance-fleets コマンドを使用します。コマンドは、クラスター ID を入力として受け入れます。次の例では、このコマンドと、それによるマスタータスクインスタンスグループとコアタスクインスタンスグループを含むクラスターの出力を示しています。完全な応答構文については、Amazon EMR API Referenceの「ListInstanceFleets」を参照してください。
list-instance-fleets --cluster-id 'j-12ABCDEFGHI34JK'
{ "InstanceFleets": [ { "Status": { "Timeline": { "ReadyDateTime": 1488759094.637, "CreationDateTime": 1488758719.817 }, "State": "RUNNING", "StateChangeReason": { "Message": "" } }, "ProvisionedSpotCapacity": 6, "Name": "CORE", "InstanceFleetType": "CORE", "LaunchSpecifications": { "SpotSpecification": { "TimeoutDurationMinutes": 60, "TimeoutAction": "TERMINATE_CLUSTER" } }, "ProvisionedOnDemandCapacity": 2, "InstanceTypeSpecifications": [ { "BidPrice": "0.5", "InstanceType": "m4.large", "WeightedCapacity": 2 } ], "Id": "if-1ABC2DEFGHIJ3" }, { "Status": { "Timeline": { "ReadyDateTime": 1488759058.598, "CreationDateTime": 1488758719.811 }, "State": "RUNNING", "StateChangeReason": { "Message": "" } }, "ProvisionedSpotCapacity": 0, "Name": "MASTER", "InstanceFleetType": "MASTER", "ProvisionedOnDemandCapacity": 1, "InstanceTypeSpecifications": [ { "BidPriceAsPercentageOfOnDemandPrice": 100.0, "InstanceType": "m4.large", "WeightedCapacity": 1 } ], "Id": "if-2ABC4DEFGHIJ4" } ] }
インスタンスフリートのターゲット容量を変更する
コマンドを使用して、インスタンスフリートの新しいターゲット容量を指定します modify-instance-fleet 。クラスター ID とインスタンスフリート ID を指定しなければなりません。コマンドを使用してインスタンスフリート ID を取得しますlist-instance-fleets 。
aws emr modify-instance-fleet --cluster-id 'j-12ABCDEFGHI34JK' / --instance-fleet InstanceFleetId='if-2ABC4DEFGHIJ4',TargetOnDemandCapacity=1,TargetSpotCapacity=1
タスクインスタンスフリートをクラスターに追加する
クラスターにマスターインスタンスフリートおよびコアインスタンスフリートしかない場合、 add-instance-fleet コマンドを使用してタスクインスタンスフリートを追加できます。このコマンドは、タスクインスタンスフリートを追加するためだけに使用できます。
aws emr add-instance-fleet --cluster-id 'j-12ABCDEFGHI34JK' --instance-fleet InstanceFleetType=TASK,TargetSpotCapacity=1,/ LaunchSpecifications={SpotSpecification='{TimeoutDurationMinutes=20,TimeoutAction=TERMINATE_CLUSTER}'},/ InstanceTypeConfigs=['{InstanceType=m4.large,BidPrice=0.5}']
