Apache Livy
Livy는 REST 인터페이스를 통해 Spark를 실행하는 EMR 클러스터와 상호 작용할 수 있습니다. REST 인터페이스 또는 RPC 클라이언트 라이브러리를 사용하면 Spark 작업 또는 Spark 코드 조각을 전송하고 결과를 동기적 또는 비동기적으로 검색할 수 있으며 Spark 컨텍스트를 관리할 수 있습니다. 자세한 내용은 Apache Livy 웹 사이트
Livy 웹 인터페이스에 액세스하려면 마스터 노드와 프록시 연결에 대한 SSH 터널을 설정하십시오. 자세한 내용은 EMR 클러스터에 호스팅된 웹 인터페이스 보기를 참조하세요.
다음 테이블에는 Amazon EMR이 Livy를 통해 설치하는 구성 요소와 함께 Amazon EMR 7.x 시리즈의 최신 릴리스에 포함된 Livy의 버전이 나열되어 있습니다.
이 릴리스에서 Livy와 함께 설치된 구성 요소의 버전은 릴리스 7.3.0 구성 요소 버전을 참조하세요.
| Amazon EMR 릴리스 레이블 | Livy 버전 | Livy와 함께 설치된 구성 요소 |
|---|---|---|
emr-7.3.0 |
Livy 0.8.0 |
emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
다음 테이블에는 Amazon EMR이 Livy를 통해 설치하는 구성 요소와 함께 Amazon EMR 6.x 시리즈의 최신 릴리스에 포함된 Livy의 버전이 나열되어 있습니다.
이 릴리스에서 Livy와 함께 설치된 구성 요소의 버전은 릴리스 6.15.0 구성 요소 버전을 참조하세요.
| Amazon EMR 릴리스 레이블 | Livy 버전 | Livy와 함께 설치된 구성 요소 |
|---|---|---|
emr-6.15.0 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
다음 테이블에는 Amazon EMR이 Livy를 통해 설치하는 구성 요소와 함께 Amazon EMR 5.x 시리즈의 최신 릴리스에 포함된 Livy의 버전이 나열되어 있습니다.
이 릴리스에서 Livy와 함께 설치된 구성 요소의 버전은 릴리스 5.36.2 구성 요소 버전을 참조하세요.
| Amazon EMR 릴리스 레이블 | Livy 버전 | Livy와 함께 설치된 구성 요소 |
|---|---|---|
emr-5.36.2 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
