建立已安裝 Hudi 的叢集

PDFRSS

使用 Amazon EMR 發行版本 5.28.0 及更新版本時，如果已安裝 Spark、Hive 或 Presto，依預設，Amazon EMR 會安裝 Hudi 元件。若要在 Amazon EMR 上使用 Hudi，請建立已安裝下列一或多個應用程式的叢集：

• Hadoop

• Hive

• Spark

• Presto

• Flink

您可以使用 AWS Management Console、 AWS CLI或 Amazon EMR API 建立叢集。

使用 建立具有 Hudi 的叢集 AWS Management Console

1. 導覽至新的 Amazon EMR 主控台，然後從側邊導覽選取切換至舊主控台。如需有關切換至舊主控台時預期情況的詳細資訊，請參閱使用舊主控台。

2. 選擇 Create cluster (建立叢集)，然後選擇 Go to advanced options (前往進階選項)。

3. 在「軟體組態」下，對於發行版本，選擇 emr-5.28.0 或更新版本，然後選擇 Hadoop、Hive、Spark、Presto 和 Tez 以及叢集需要的其他應用程式。

4. 視您的應用程式需要設定其他選項，然後選擇 Next (下一步)。

5. 視需要設定 Hardware (硬體) 和 General cluster settings (一般叢集設定) 選項。

6. 對於 Security Options (安全性選項)，我們建議您選取 EC2 key pair (EC2 金鑰對)，以便使用 SSH 連線到主節點命令列。這可讓您執行本指南中描述的 Spark Shell 命令、Hive CLI 命令和 Hudi CLI 命令。

7. 視需要設定其他安全選項，然後選擇 Create cluster (建立叢集)。

使用 建立具有 Hudi 的叢集 AWS Management Console

1. 導覽至新的 Amazon EMR 主控台，然後從側邊導覽選取切換至舊主控台。如需有關切換至舊主控台時預期情況的詳細資訊，請參閱使用舊主控台。

2. 選擇 Create cluster (建立叢集)，然後選擇 Go to advanced options (前往進階選項)。

3. 在「軟體組態」下，對於發行版本，選擇 emr-5.28.0 或更新版本，然後選擇 Hadoop、Hive、Spark、Presto 和 Tez 以及叢集需要的其他應用程式。

4. 視您的應用程式需要設定其他選項，然後選擇 Next (下一步)。

5. 視需要設定 Hardware (硬體) 和 General cluster settings (一般叢集設定) 選項。

6. 對於 Security Options (安全性選項)，我們建議您選取 EC2 key pair (EC2 金鑰對)，以便使用 SSH 連線到主節點命令列。這可讓您執行本指南中描述的 Spark Shell 命令、Hive CLI 命令和 Hudi CLI 命令。

7. 視需要設定其他安全選項，然後選擇 Create cluster (建立叢集)。