Amazon에서 Zeppelin을 사용할 때 고려 사항 EMR - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon에서 Zeppelin을 사용할 때 고려 사항 EMR

  • 동일한 SSH 터널링 방법을 사용하여 Zeppelin에 연결하여 마스터 노드의 다른 웹 서버에 연결합니다. Zeppelin 서버는 포트 8890에 있습니다.

  • Amazon EMR 릴리스 버전 5.0.0 이상의 Zeppelin은 Shiro 인증 을 지원합니다.

  • Amazon EMR 릴리스 버전 5.8.0 이상의 Zeppelin은 Spark 의 메타스토어로 AWS Glue 데이터 카탈로그 사용을 지원합니다SQL. 자세한 내용은 Spark용 메타스토어로 AWS Glue 데이터 카탈로그 사용을 참조하세요SQL.

  • 를 spark.dynamicAllocation.enabled로 설정한 경우 실행기를 동적으로 할당YARN하도록 지시하더라도 Zeppelin은 클러스터의 spark-defaults.conf 구성 파일에 정의된 일부 설정을 사용하지 않습니다true. Zeppelin Interpreter(Zeppelin 인터프리터) 탭을 사용하여 실행기 설정(예: 메모리 및 코어)을 설정한 후 인터프리터를 다시 시작해야 이 설정을 사용할 수 있습니다.

  • Amazon은 Apache Flink와의 Apache Zeppelin 통합을 지원하는 6.10.0 이상을 EMR 릴리스합니다. 자세한 내용은 Amazon EMR의 Zeppelin에서 Flink 작업 섹션을 참조하세요.

  • Amazon의 ZeppelinEMR은 SparkR 해석기를 지원하지 않습니다.