檢視高階應用程式歷史記錄 - Amazon EMR

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

檢視高階應用程式歷史記錄

注意

建議您使用持續性應用程式介面來改善使用者體驗,可將應用程式歷史記錄保留最多 30 天。新的 Amazon EMR 主控台 (https://console.aws.amazon.com/emr) 無法使用此頁面所述的高階應用程式歷程記錄。如需詳細資訊,請參閱檢視持續應用程式使用者介面

Amazon EMR 發行版本 5.8.0 到 5.36.0 和 6.x 版本最高可達 6.8.0,您可以從舊 Amazon 主控台的「應用程式使用者介面」索引標籤檢視高階應用程式歷史記錄。EMRAmazon EMR 應用程式使用者介面會在應用程式完成後保留應用程式歷史記錄摘要 7 天。

考量與限制

在舊 Amazon EMR 主控台中使用「應用程式使用者介面」索引標籤時,請考慮下列限制。

  • 您只能在使用 Amazon 5.8.0 至 5.36.0 版和 6.x 版本 (最高 6.8.0 EMR 版) 時存取高階應用程式歷程記錄功能。自 2023 年 1 月 23 日起,Amazon EMR 將停止所有版本的高階應用程式歷程記錄。如果您使用 Amazon 5.25.0 或更高EMR版本,建議您改用持續性應用程式使用者介面。

  • 高階應用程式歷史記錄功能不支援 Spark 串流應用程式。

  • 具有多個主節點的 Amazon 叢集或與之整合的 Amazon EMR 叢集目前無法使用一鍵式存取永久應用程式使用者界面 EMR AWS Lake Formation.

範例:檢視高階應用程式歷史記錄

下列順序示範使用舊主控台叢集詳細資料頁面上的 [YARN應用程式使用者介面] 索引標籤,向下鑽研 Spark 或應用程式至工作詳細資訊。

若要檢視叢集詳細資訊,請從叢集清單中選取叢集名稱。若要檢視YARN容器記錄的相關資訊,您必須啟用叢集的記錄功能。如需詳細資訊,請參閱設定叢集記錄和偵錯。對於 Spark 應用程式歷史記錄,摘要資料表中的資訊僅為透過 Spark 歷史記錄伺服器 UI 取得的資訊子集。

高階應用程式歷史記錄下的應用程式使用者介面索引標籤中,您可以展開一列以顯示 Spark 應用程式的診斷摘要,或選取應用程式 ID 連結以檢視不同應用程式的詳細資訊。

Application user interfaces tab showing persistent and on-叢集 UIs, with YARN application history.

當您選取應用程式 ID 連結時,UI 會變更為顯示該YARN應用程式的應用程式詳細資訊。在YARN應用程式詳細資訊的「作」標籤中,您可以選擇工作的「描述」連結,以顯示該工作的詳細資訊。

YARN application details showing job history with completed Spark tasks and their statuses.

在作業詳細資訊頁面中,可展開有關個別作業階段的資訊,然後選取說明連結以查看階段詳細資訊。

EMR 叢集 interface showing persistent and on-叢集 application UIs, with job details and stages.

在階段詳細資訊頁面中,可以檢視階段任務和執行程式的主要指標。也可以使用檢視日誌連結來檢視工作和執行程式日誌。

Application history page showing task metrics, executor details, and log access links for a Spark job.