翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
Hudi
Apache Hudi
Hudi は、Apache Spark
Amazon EMRリリースバージョン 5.28.0 以降では、Spark、Hive、Presto、または Flink EMRがインストールされると、 はデフォルトで Hudi コンポーネントをインストールします。Spark または Hudi DeltaStreamer ユーティリティを使用して、Hudi データセットを作成または更新できます。Hive、Spark、Presto、または Flink を使用して、Hudi データセットをインタラクティブにクエリしたり、増分プルを使用してデータ処理パイプラインを構築したりできます。増分プルとは、2 つのアクション間で変更されたデータのみをプルする機能を指します。
これらの機能により、Hudi は以下のユースケースに適しています。
-
特定のデータの挿入および更新イベントを必要とするセンサーやその他のモノのインターネット (IoT) デバイスからのストリーミングデータを操作する。
-
ユーザーがデータの使用方法について忘れたり、同意を変更したりする可能性のあるアプリケーションのデータプライバシー規制を遵守する。
-
データセットに変更を経時的に適用できる変更データキャプチャ (CDC) システム
を実装します。
次の表に、Amazon 7.x シリーズの最新リリースに含まれている Hudi EMR のバージョンと、Amazon が Hudi と共にEMRインストールするコンポーネントを示します。
このリリースで Hudi と共にインストールされるコンポーネントのバージョンについては、「リリース 7.2.0 コンポーネントバージョン」を参照してください。
emr-7.2.0 の Hudi バージョン情報 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Amazon EMR リリースラベル | Hudi バージョン | Hudi でインストールされるコンポーネント | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emr-7.2.0 |
Hudi 0.14.1-amzn-1 |
Not available. |
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
次の表に、Amazon 6.x シリーズの最新リリースに含まれている Hudi EMR のバージョンと、Amazon が Hudi と共にEMRインストールするコンポーネントを示します。
このリリースで Hudi と共にインストールされるコンポーネントのバージョンについては、「リリース 6.15.0 コンポーネントバージョン」を参照してください。
emr-6.15.0 の Hudi バージョン情報 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Amazon EMR リリースラベル | Hudi バージョン | Hudi でインストールされるコンポーネント | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emr-6.15.0 |
Hudi 0.14.0-amzn-0 |
Not available. |
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
注記
Amazon EMRリリース 6.8.0 には Apache Hudihudi-spark3.3-bundle_2.12のオープンソースとも互換性があります。
次の表に、Amazon 5.x シリーズの最新リリースに含まれている Hudi EMR のバージョンと、Amazon が Hudi と共にEMRインストールするコンポーネントを示します。
このリリースで Hudi と共にインストールされるコンポーネントのバージョンについては、「リリース 5.36.2 コンポーネントバージョン」を参照してください。
emr-5.36.2 の Hudi バージョン情報 | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Amazon EMR リリースラベル | Hudi バージョン | Hudi でインストールされるコンポーネント | |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
emr-5.36.2 |
Hudi 0.10.1-amzn-1 |
Not available. |
|||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
トピック
