本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
Amazon EMR 控制台
主控台提供更新的介面,可讓您以直覺的方式管理 Amazon EMR 環境,並讓您方便存取文件、產品資訊和其他資源。
控制台功能
Amazon EMR 主控台可從下列網址取得:
下表列出 Amazon EMR 主控台元件的主要狀態。
Amazon EMR 主控台元件 | 主控台 |
---|---|
EMR Studio |
✔ |
建立和管理叢集 |
✔ |
封鎖公有存取權 |
✔ |
監控 Amazon CloudWatch 活動 |
✔ |
安全組態 |
✔ |
虛擬叢集 (Amazon EMR on EKS) |
✔ |
檢視和管理您的 Amazon Virtual Private Cloud 子網路 1 | ✔ |
筆記本 2 |
✔ |
1 在主控台中,您可以在建立叢集時,在「聯網」區段中檢視和管理 Amazon VPC 子網路。
2 EMR Notebooks 可作為主控台中的 EMR Studio 工作區使用。主控台中的 [建立工作區] 按鈕可讓您建立新的筆記本。若要存取或建立工作區,EMR Notebooks 使用者需要其他 IAM 角色許可。有關更多信息,請參閱 Amazon EMR Notebooks 是控制台中的 Amazon EMR 工作室工作區和 Amazon EM R 控制台。
差異摘要
本節概述 Amazon EMR 主控台體驗的功能。這些功能分為以下幾類:
主控台中的叢集相容性
在某些情況下,您建立的叢集可能與主控台不相容。下列清單說明 Amazon EMR 主控台的相容性需求。
-
主控台支援在 Amazon EMR 5.20.1 及更新版本中建立的叢集。
-
您可以在主控台中複製使用自動調整規模的叢集,但只有在您想要手動擴展或使用受管擴展時,才能建立新叢集。
若要建立和使用 5.20.1 及更早版本的叢集,您可以使用 AWS Command Line Interface (AWS CLI) 或 AWS SDK。
建立叢集
功能 | 主控台 |
---|---|
術語:Amazon EMR 叢集節點類型 |
主要、核心、任務 |
Amazon EMR 5.20.1 版及更高版本 |
|
使用「摘要」面板下的「建立叢集」按鈕。您的叢集名稱不能包含 <、>、$、| 或 `(反引號) 字元。 |
|
為叢集中的每個機群定義逾時期間以佈建 Spot 執行個體。 |
|
主控台不會建立預設角色;您必須使用 IAM 主控台 |
|
在 Amazon EMR 主控台中,無法讓所有使用者都可以看到叢集;您的 IAM 政策會決定叢集存取權 | |
必須從各自的 Amazon S3 |
|
隨著 Amazon S3 在 2020 年 12 月 1 日發布了強大的 read-after-write 一致性,因此您不需要將 EMRFS 簡歷與 EMR 叢集搭配使用 |
|
您可以使用叢集詳細資料頁面上的應用程式 UI 介面來對作業進行偵錯 |
1 您無法在主控台中使用 Amazon EMR 5.20.1 之前的版本建立或編輯叢集,但使用 5.20.1 之前的版本建立的任何現有叢集都可以繼續運作。若要使用 5.20.1 之前的 Amazon EMR 版本建立和編輯叢集,請使用 API 或 CLI。您可以使用主控台檢視所有叢集,但是建立於 5.20.1 之前的主控台可能與較新的功能不相容。
檢視和搜尋叢集
下表重點說明如何使用 Amazon EMR 主控台檢視和搜尋叢集。
注意
將資料篩選套用至叢集清單會查詢整個資料庫。但是,當您在搜尋框中輸入文字字串時,搜尋僅適用於清單已加載用戶端的結果。
功能 | 主控台 |
---|---|
檢視叢集詳細資訊 |
可以選取叢集 ID 來檢視完整的叢集詳細資訊,例如組態選項、持續性應用程式 UI 和日誌。 |
搜尋叢集 |
使用單一搜尋欄位以輸入文字搜尋查詢,並建立和套用資料篩選條件,例如「狀態 = 任何作用中狀態」。 |
尋找失敗的叢集 |
若要搜尋失敗的叢集,請套用篩選條件狀態 = 因錯誤而終止。 |
檢視或編輯叢集詳細資訊
功能 | 主控台 |
---|---|
檢視執行個體群組和執行個體機群中的執行個體,以及擴展、佈建、調整大小和終止選項 |
在執行個體索引標籤中檢視執行個體選項和詳細資訊。在屬性索引標籤中檢視終止選項。 |
檢視應用程式 UI、日誌和組態 (Apache Spark |
在組態索引標籤中檢視叢集組態。啟動即時、持續的應用程式 UI,以便從應用程式索引標籤中查看應用程式日誌。 |
將叢集匯出至 CLI |
叢集詳細資訊和清單檢視「動作」功能表中可用的選項,「檢視用於複製叢集的命令」 |
使用安全組態時的差異
功能 | 主控台 |
---|---|
複製安全組態 |
✔ |
✔ |
|
✔ |
|
Amazon S3 存取點 |
|
AWS Lake Formation 存取控制 |
執行期角色 |
1 若要在步驟提交期間傳遞角色,您的叢集必須使用附接 IAM 許可政策的安全組態,以便使用者只能傳遞已核准的角色,並且您的作業可存取 Amazon EMR 資源。如需更多詳細資訊,請參閱 Amazon EMR 步驟的執行階段角色。