Apache Oozie - Amazon EMR

Apache Oozie

Apache Oozie Workflow Scheduler を使用して、Hadoop ジョブを管理し、調整します。詳細については http://oozie.apache.org/ をご覧ください。

Oozie ネイティブウェブインターフェイスは Amazon EMR でサポートされていません。Oozie のフロントエンドインターフェイスを使用するには、Hue Oozie アプリケーションを試します。詳細については、「Hue」を参照してください。Oozie は、Amazon EMR リリースバージョン 5.0.0 以降に含まれています。Oozie は以前のリリースにサンドボックスアプリケーションとして含まれています。詳細については、「Amazon EMR 4.x リリースバージョン」を参照してください。

作成日が 2018-08-11 の Amazon Linux AMI に基づくカスタム Amazon Linux AMI を使用すると、Oozie サーバーの起動に失敗します。Oozie を使用する場合は、作成日が異なる Amazon Linux AMI ID に基づいてカスタム AMI を作成します。次の AWS CLI コマンドを使用して、2018.03 バージョンのすべての HVM Amazon Linux AMI のイメージ ID とリリース日のリストを返し、ベースとして適切な Amazon Linux AMI を選択できます。MyRegion はリージョン ID (us-west-2 など) に置き換えます。

aws ec2 --region MyRegion describe-images --owner amazon --query 'Images[?Name!=`null`]|[?starts_with(Name, `amzn-ami-hvm-2018.03`) == `true`].[CreationDate,ImageId,Name]' --output text | sort -rk1

次の表は、Amazon EMR 6.x シリーズの最新リリースに含まれている Oozie のバージョンと、Amazon EMR で Oozie と共にインストールされるコンポーネントを示しています。

このリリースで Oozie と共にインストールされるコンポーネントのバージョンについては、「Release 6.14.0 Component Versions」を参照してください。

emr-6.14.0 の Oozie バージョン情報
Amazon EMR リリースラベル Oozie バージョン Oozie でインストールされるコンポーネント

emr-6.14.0

Oozie 5.2.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, oozie-client, oozie-server, tez-on-yarn, tez-on-worker

次の表は、Amazon EMR 5.x シリーズの最新リリースに含まれている Oozie のバージョンと、Amazon EMR で Oozie と共にインストールされるコンポーネントを示しています。

このリリースで Oozie と共にインストールされるコンポーネントのバージョンについては、「Release 6.14.0 Component Versions」を参照してください。

emr-5.36.1 の Oozie バージョン情報
Amazon EMR リリースラベル Oozie バージョン Oozie でインストールされるコンポーネント

emr-5.36.1

Oozie 5.2.1

emrfs, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-mapred, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, oozie-client, oozie-server, tez-on-yarn