翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。
Amazon EMR 6.9.0-ハイブリリースノート
Amazon EMR 6.9.0-ハイブの変更
| 型 | 説明 |
|---|---|
| Upgrade | Jetty を 9.4.48.v20220622 |
| Upgrade | Hadoop 3.3 のSupport |
| 特徴 | Amazon EMR Hive とLake Formation の統合により、GCSC API を使用したインタラクティブなワークロードを実現。 |
| 特徴 | Amazon EMR Hive とアイスバーグの統合。 |
| 改善 | Amazon EMR セキュリティ設定を使用して転送中の暗号化が有効になっている場合は、 HiveServer 2 で SSL を有効にします。 |
| 改善 | Hive EMRFS Amazon S3 最適化コミッターをデフォルトで有効にします。詳細については、「Hive EMRFS S3 向けに最適化されたコミッターを有効にする」を参照してください。 |
| 改善 | SPARK-34210HiveHBaseTableInputFormatV2 InputFormat hive.hbase.inputformat.v2true使用するように設定します。 |
| 改善 | TeZamを終了してすぐに新規起動するのではなく、hive.cli.tez.session.asyncを使用してバックグラウンドでTeZamが起動するのを待ってください。hive.emr.cli.tez.session.open.timeoutこのタイムアウトを秒単位で設定します。 |
| 改善 | 既存の制限付き構成リストにコンマで区切られた構成を追加するには、hive.conf.restricted.list.append オプションを追加しますhive.conf.restricted.list。 |
| 改善 | データベースにロケーションが定義されていないために Hive クエリが失敗したときのエラーメッセージがより明確になりました。 |
| バックポート | HIVE-24484 |
| バックポート | HIVE-22398 |
| バックポート | HIVE-23190 |
| バックポート | HIVE-22185 |
| バックポート | HIVE-21670mockito-allmockito-core 依存関係に置き換える。 |
| バックポート | HIVE-24542 |
| バックポート | HIVE-23751#mkdirs()ProxyFileSystem の後に整列するようにメソッドをオーバーライドしてください。 |
| バックポート | HIVE-21603 |
| バックポート | HIVE-24083hcatalog のエラー:認証タイプが必要です。 |
| バックポート | HIVE-24282 |
| バックポート | HIVE-20656 |
| バックポート | HIVE-25443 |
| バックポート | HIVE-19792 |
| バックポート | HIVE-20437 |
| バックポート | HIVE-21987 |
| バックポート | HIVE-20038 |
Amazon EMR 6.9.0-既知の問題
Amazon EMR 6.6.0 ～ 6.9.0 では、動的パーティションと ORDER BY 句または SORT BY 句を使用した INSERT クエリには必ず 2 つのリデューサーがあります。この問題は、OSS の HIVE-20703
の変更、つまり動的なソートパーティションの最適化がコストベースの判断の対象となることが原因です。ワークロードで動的パーティションのソートが不要な場合は、 hive.optimize.sort.dynamic.partition.threshold-1プロパティをに設定して新機能を無効にし、リデューサーの数を正しく計算することをおすすめします。この問題は HIVE-22269 の一部として OSS Hiveで修正されており、今後の Amazon EMR リリースで利用できるようになる予定です。詳細については、AWSサポートにお問い合わせください。
