Apache Livy - Amazon EMR

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

Apache Livy

Livy は、Spark を実行している EMRクラスターとのRESTインターフェイスを介したインタラクションを可能にします。REST インターフェイスまたはRPCクライアントライブラリを使用して、Spark コードの Spark ジョブまたはスニペットの送信、結果の同期または非同期の取得、Spark コンテキストの管理を行うことができます。詳細については、「Apache Livy ウェブサイト」を参照してください。Livy は Amazon EMRリリースバージョン 5.9.0 以降に含まれています。

Livy ウェブインターフェイスにアクセスするには、マスターノードへの SSH トンネルとプロキシ接続を設定します。詳細については、EMR「クラスター でホストされているウェブインターフェイスを表示する」を参照してください。

次の表に、Amazon 7.x シリーズの最新リリースに含まれている Livy EMR のバージョンと、Amazon が Livy と共にEMRインストールするコンポーネントを示します。

このリリースで Livy と共にインストールされるコンポーネントのバージョンについては、「リリース 7.2.0 コンポーネントバージョン」を参照してください。

emr-7.2.0 の Livy バージョン情報
Amazon EMR リリースラベル Livy バージョン Livy でインストールされるコンポーネント

emr-7.2.0

Livy 0.8.0

emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

次の表に、Amazon 6.x シリーズの最新リリースに含まれている Livy EMR のバージョンと、Amazon が Livy と共にEMRインストールするコンポーネントを示します。

このリリースで Livy と共にインストールされるコンポーネントのバージョンについては、「リリース 6.15.0 コンポーネントバージョン」を参照してください。

emr-6.15.0 の Livy バージョン情報
Amazon EMR リリースラベル Livy バージョン Livy でインストールされるコンポーネント

emr-6.15.0

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

次の表に、Amazon 5.x シリーズの最新リリースに含まれている Livy EMR のバージョンと、Amazon が Livy と共にEMRインストールするコンポーネントを示します。

このリリースで Livy と共にインストールされるコンポーネントのバージョンについては、「リリース 5.36.2 コンポーネントバージョン」を参照してください。

emr-5.36.2 の Livy バージョン情報
Amazon EMR リリースラベル Livy バージョン Livy でインストールされるコンポーネント

emr-5.36.2

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx