使用 Spark Operator 執行 Spark 作業 - Amazon EMR

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

使用 Spark Operator 執行 Spark 作業

Amazon EMR 發布 6.10.0 及更高版本支持阿帕奇星火 Kubernetes 運營商,或星火運營商,作為 Amazon 的任務提交模型。EMR EKS使用 Spark 操作員,您可以在自己的 Amazon EKS 叢集上使用 Amazon EMR 發行執行階段部署和管理 Spark 應用程式。在 Amazon EKS 叢集中部署 Spark 操作員之後,您可以直接向操作員提交 Spark 應用程式。Operator 可管理 Spark 應用程式的生命週期。

注意

Amazon EMR EKS 根據 v CPU 和內存消耗在 Amazon 上計算定價。此計算適用於驅動程式和執行程式 Pod。此計算從您下載 Amazon EMR 應用程式映像時開始,直到 Amazon EKS 網繭終止並四捨五入到最接近的秒數為止。