クイックオプションを使用したクラスターの起動 - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

クイックオプションを使用したクラスターの起動

を使用するクラスターの作成-クイックオプションページを使用して、簡単なタスクまたは評価またはテストの目的で、クラスターをすばやく作成できます。クイックオプションでは、クラスタソフトウェア、ネットワーク、セキュリティなどの設定オプションにデフォルト値が使用されます。たとえば、クイックオプションクラスターの Virtual Private Cloud (VPC) とサブネットを選択しません。代わりに、Amazon EMR は、選択したリージョンのデフォルトの Amazon Virtual Private Cloud(Amazon VPC)のパブリックサブネットにクラスターを設定します。

を使用してクラスターを起動するにはクイックオプション

  1. [] にサインインします。AWS Management ConsoleAmazon EMR コンソール (https://console.aws.amazon.com/elasticmapreduce/

  2. 選択クラスター] を選択してから、[クラスターを作成するをクリックして、クイックオプションページで.

  3. リポジトリの []クラスターの作成-クイックオプションページで、提供されたフィールドの値を入力または選択します。クイックオプションフィールドの詳細については、「」を参照してください。クイックオプションの概要

  4. 選択クラスターを作成するをクリックしてクラスターを起動し、クラスターの状態ページを開きます。

  5. クラスターのステータスページで、クラスターのステータスクラスター名の横にあります。ステータスはから変更する必要があります。Starting実行中待機中ですクラスターの作成プロセス中に。アップデートを受けるには、右側にある更新アイコンを選択するか、ブラウザを更新する必要があります。

ステータスが待機中ですに設定されている場合、クラスターは起動し、実行され、ステップと SSH 接続を受け入れる準備ができています。

クイックオプションの概要

以下の表では、クラスターを起動するときのフィールドとデフォルト値について説明します。クラスターの作成-クイックオプションAmazon EMR コンソールで「」ページを開きます。

コンソールフィールド デフォルト値 説明
クラスター名 マイクラスター

クラスター名はオプションです。クラスターの記述名は一意である必要はありません。

ログ記録 選択済み

ロギングが有効な場合、Amazon EMR は詳細なログデータを、指定された Amazon S3 フォルダに書き込みます。ロギングは、クラスターの作成時にのみ有効にできます。後で設定を変更することはできません。クイックオプションデフォルトの Amazon S3 バケットを選択します。オプションで独自のバケットを指定できます。詳細については、「Amazon S3 にアーカイブされたログファイルを表示するには」を参照してください。

S3 フォルダ ElasticMapReduce

このオプションでは、Amazon EMR がログデータを書き込む Amazon S3 バケット内のフォルダへのパスを指定します。指定されたパス内のデフォルトフォルダがバケットに存在しない場合、Amazon EMR が自動的に作成します。フォルダ名を入力するか、Amazon S3 フォルダを参照することで、別のフォルダを指定できます。

起動モード クラスター

このオプションでは、長時間稼働クラスターを起動するか、作成時に指定するステップを実行した後に終了するクラスターを起動するかを指定します。

の使用クラスターオプションを使用すると、クラスターはユーザーが終了するまで実行を続けます。これは実行時間が長い。[] を選択した場合ステップの実行Amazon EMR では、ステップを追加して設定するよう求められます。ステップを使用して作業をクラスターに送信できます。指定したステップの実行を終了したら、クラスターは自動的に終了します。詳細については、「ステップ実行後に継続または終了するようにクラスターを構成する」を参照してください。

リリース emr-5.33.0

このオプションは、クラスターの作成時に使用する Amazon EMR リリースバージョンを指定します。Amazon EMR リリースは、Amazon EMR がインストールするオープンソースアプリケーションのバージョン (Hadoop、Hive など) を決定します。最新のリリースバージョンのラベルがデフォルトで選択されます。ソリューションとの互換性のためにオープンソースアプリケーションの異なるバージョンが必要な場合は、以前の Amazon EMR リリースを選択できます。以前の Amazon EMR リリースバージョンのを使用する場合、一部の Amazon EMR の機能とアプリケーションを使用できないことがあります。可能な限り、最新のリリースバージョンを使用することをお勧めします。各 Amazon EMR リリースバージョンの詳細については、「」を参照してください。Amazon EMR リリース ガイド

アプリケーション Core Hadoop

このオプションでは、クラスターにインストールする、ビッグデータエコシステムからのオープンソースのアプリケーションを指定します。クイックオプションでは、最も一般的なアプリケーションの組み合わせから選択できます。リストされていない追加のアプリケーションを含むアプリケーションの独自の組み合わせを選択するには、詳細オプションに移動。各 Amazon EMR リリースバージョンで使用可能なアプリケーションとバージョンの詳細については、を参照してください。Amazon EMR リリース ガイド

アプリケーションが Amazon EMR でインストールできない場合、またはすべてのクラスターインスタンスでカスタムアプリケーションをインストールする必要がある場合は、ブートストラップアクション。詳細については、「追加のソフトウェアをインストールするためのブートストラップアクションの作成」を参照してください。[] を選択した場合ステップの実行から、Amazon EMR は、ステップに必要なものに基づいて、インストールするアプリケーションを選択します。

を使用するAWSテーブルのメタデータのGlue Data Catalog Disabled 有効にすると、AWSGlue データカタログを外部の Hive メタストアとして使用します。詳細については、「」を参照してください。の使用AWSHive のメタストアとしてのGlue データカタログ
インスタンスタイプ m5.xlarge

このオプションでは、クラスターで実行されるインスタンスに対して Amazon EMR が初期化する Amazon EC2 インスタンスタイプを指定します。デフォルトのインスタンスの選択はリージョンによって異なり、一部のインスタンスタイプは一部のリージョンで利用できない場合があります。詳細については、「クラスターハードウェアおよびネットワークを構成する」を参照してください。

インスタンス数 3

このオプションでは、初期化する Amazon EC2 インスタンスの数を指定します。各インスタンスは、Amazon EMR クラスターの 1 つのノードに対応しています。少なくとも 1 つのノード (マスターノード) が必要です。インスタンスタイプとインスタンス数を選択するためのガイダンスについては、「クラスター設定のガイドラインとベストプラクティス」を参照してください。

クラスターのスケーリング [選択解除] 選択すると、クラスターのスケーリングにより、EMR 管理によるスケーリングが有効になります。マネージドスケーリングでは、ワークロードに基づいてコアノードとタスクノードのインスタンス数が自動的に増減します。詳細については、「Amazon EMR での EMR マネージドスケーリングの使用」を参照してください。
自動終了 Amazon EMR リリースバージョン 6.4.0 以降で有効になり、デフォルトのアイドル時間は 1 時間です。Amazon EMR の他のサポートされているバージョンでは、自動終了はデフォルトで無効になっています。 有効にすると、クラスターに自動終了ポリシーをアタッチできます。ポリシーでは、クラスターが自動的にシャットダウンするまでのアイドル時間を指定します。詳細については、「自動終了ポリシーの使用」を参照してください。
EC2 キーペア オプションの選択

これにより、Secure Shell (SSH) 接続を介してクラスター内のノードに接続するときに使用する Amazon EC2 key pair を指定します。Amazon EC2 key pair を作成して指定することを強くお勧めします。キーペアを選択しない場合、クラスターに接続してステップを送信したり、アプリケーションを操作したりできません。詳細については、「クラスターConnect する」を参照してください。接続するには、セキュリティグループにインバウンドルールを作成し、SSH 接続を許可する必要もあります。

アクセス許可 デフォルト

このオプションを使用して、クラスターが使用する AWS Identity and Access Management ロールを指定します。これらのロールにより、Amazon EMR とクラスターインスタンスで実行中の Amazon EMR とアプリケーションが他のAWSのサービス。[Custom (カスタム)] を選択して、独自のロールを指定できます。デフォルトのロールから開始することをお勧めします。詳細については、「Amazon EMR アクセス許可の IAM サービスロールをAWSのサービスとリソース」を参照してください。

EMR ロール EMR_DefaultRole Amazon EMR が他のAWSAmazon EC2 などのサービスが、お客様に代わって提供されます。詳細については、「Amazon EMR のサービスロール(EMR ロール)」を参照してください。
EC2 インスタンスプロファイル defaultRole 他のへのアクセスを提供しますAWSサービス(Amazon S3 や DynamoDB など)を、Amazon EMR によって起動される Amazon EC2 インスタンスから取得します。詳細については、「クラスター EC2 インスタンスのサービスロール(EC2 インスタンスプロファイル)」を参照してください。