クラスターハードウェアおよびネットワークを構成する - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

クラスターハードウェアおよびネットワークを構成する

Amazon EMR クラスターを作成するときの重要な考慮事項は、Amazon EC2 インスタンスとネットワークオプションを構成する方法です。この章では、次の次の次の次の主な方法があります。ベストプラクティスとガイドライン

  • ノードの種類— EMR クラスター内の Amazon EC2 インスタンスは、Node Type。3 つがあります。マスターノード,コアノード, およびタスクノード。各ノードタイプは、クラスター上にインストールする分散アプリケーションにより定義される一連のロールを実行します。たとえば、Hadoop MapReduce または Spark ジョブの実行中に、コアノードとタスクノード上のコンポーネントはデータを処理し、出力を Amazon S3 または HDFS に転送し、ステータスメタデータをマスターノードに提供します。単一ノードクラスターの場合、すべてのコンポーネントはマスターノード上で実行されます。詳細については、「ノードタイプ (マスターノード、コアノード、タスクノード) を理解する」を参照してください。

  • EC2 インスタンス— クラスターを作成するときは、各タイプのノードが実行する Amazon EC2 インスタンスの選択を行います。EC2 インスタンスタイプによって、ノードの処理プロファイルとストレージプロファイルが決まります。ノードの Amazon EC2 インスタンスの選択は、クラスター内の個々のノードタイプのパフォーマンスプロファイルが決定されるため、重要です。詳細については、「Amazon EC2 インスタンスの設定」を参照してください。

  • ネットワーク— パブリックサブネット、プライベートサブネット、または共有サブネットを使用して、Amazon EMR クラスターを VPC 内に起動できます。ネットワーク構成によって、顧客とサービスがクラスタに接続して作業を実行する方法、クラスタがデータストアに接続する方法、その他のAWSリソース、およびそれらの接続上のトラフィックを制御するためのオプションが含まれます。詳細については、「ネットワーキングを設定する」を参照してください。

  • インスタンスのグループ化— 各ノードタイプをホストする EC2 インスタンスの集合は、インスタンスフリートまたはユニフォームインスタンスグループ。インスタンスグループ化の構成は、クラスターの作成時に選択します。この選択により、クラスターの実行中にクラスターにノードを追加する方法が決定されます。この設定は、すべてのノードタイプに適用されます。この価格を後で変更することはできません。詳細については、「インスタンスフリートまたはユニフォームインスタンスグループを使用してクラスターを作成する」を参照してください。

    注記

    インスタンスフリート設定は、5.0.0 および 5.0.3 を除く Amazon EMR リリースバージョン 4.8.0 以降でのみ使用できます。