Amazon EMR 6.9.0 - Iceberg リリースノート - Amazon EMR

Amazon EMR 6.9.0 - Iceberg リリースノート

Amazon EMR 6.9.0 - Iceberg の変更点

説明
機能

Amazon EMR Flink と Iceberg の統合。

機能

Amazon EMR Hive と Iceberg の統合。

機能

Amazon FSx for Lustre で Iceberg メタデータファイルをキャッシュできるようになりました。これにより、クエリプランにかかる時間を短縮できます。

バックポート

PR 5050: Flink 1.15: インライン挿入 SQL コメントの書き込みオプションがサポートされました。

バックポート

PR 5282AWS: 新しいデータファイルストリームを開くことで PUT リトライが失敗する問題を修正しました。

バックポート

PR 5318: Flink 1.15: FlinkSource と IcebergSource (FLIP-27) の間のギャップを埋め、Flink SQL で FLIP-27 ソースを使用するオプトイン設定を追加しました。

バックポート

PR 5344: Flink 1.14: FlinkSource と IcebergSource (FLIP-27) の間のギャップを埋め、Flink SQL で FLIP-27 ソースを使用するオプトイン設定を追加しました。

バックポート

PR 5393: Flink 1.14、1.15: FLIP-27 ソースリーダーでは Iceberg MetricContext の Flink メトリクスへの変換を行いません。

バックポート

PR 5401: Flink 1.14、1.15: FLIP-27 ソースリーダーメトリクスに関する PR #5393 に IcebergSourceReader グループがありませんでした。

バックポート

PR 5679: Spark 3.2、3.3: MergeRows ノードでの null 値の伝播を修正しました。

バックポート

PR 5860: Spark 3.3: 日付パーティションテーブルで RewriteManifestProcedure を実行するとクエリが失敗する問題を修正しました。

バックポート

PR 5880: Spark 3.3: merge-on-read 射影の null 値を修正しました。

バックポート

PR 5917: Spark 3.2: merge-on-read 射影の null 値を修正しました。