クラスターへの作業の送信 - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

クラスターへの作業の送信

このセクションでは、Amazon EMR クラスターに作業を送信するために使用できる方法について説明します。作業を送信するには、ステップを追加するか、Hadoop ジョブをインタラクティブにプライマリノードに送信できます。

クラスターにステップを送信するときは、以下のステップ動作規則を考慮してください。

  • ステップ ID には最大 256 文字まで含めることができます。

  • 1 つのクラスターには、保留中のステップと実行中のステップを最大 256 個含めることができます。

  • 1 つのクラスターで 256 個のアクティブなステップを実行している場合でも、インタラクティブにジョブをプライマリノードに送信できます。長時間稼働するクラスターが存続する間は、送信できるステップの数に制限はありませんが、任意の時点で実行中または保留中にできるステップは 256 ステップまでです。

  • Amazon EMR バージョン 4.8.0 以降 (バージョン 5.0.0 を除く) では、保留中のステップをキャンセルできます。詳細については、「ステップのキャンセル」を参照してください。

  • Amazon EMR バージョン 5.28.0 以降では、保留中のステップと実行中のステップの両方をキャンセルできます。また、複数のステップを並行して実行して、クラスターの使用率を改善し、コストを削減することもできます。詳細については、「複数のステップを並行して実行する際の考慮事項」を参照してください。

注記

最高のパフォーマンスを得るには、Amazon EMR で使用するカスタムブートストラップアクション、スクリプト、およびその他のファイルを、クラスターと同じ AWS リージョン 内の Simple Storage Service (Amazon S3) バケットに保存することをお勧めします。

トピック