での Apache Iceberg の使用 AWS

アマゾン ウェブ サービス (寄稿者）

2025 年 8 月 (ドキュメント履歴）

Apache Iceberg は、パフォーマンスを向上させながらテーブル管理を簡素化するオープンソースのテーブル形式です。Amazon EMR、Amazon Athena AWS Glue、Amazon Redshift などの AWS 分析サービスには Iceberg のネイティブサポートが含まれているため、Amazon Simple Storage Service (Amazon S3) 上にトランザクションデータレイクを簡単に構築できます AWS。

さらに、次世代の Amazon SageMaker は、データレイク、データウェアハウス、サードパーティーおよびフェデレーティッドソース間の AWS データアクセスを統合するオープンレイクハウスアーキテクチャ上に構築されています。レイクハウスは Iceberg と完全に互換性があり、Iceberg REST API を使用して、所定のデータに柔軟にアクセスしてクエリを実行できます。

このテクニカルガイドでは、さまざまな で Iceberg の使用を開始するためのガイダンスを提供します。また AWS のサービス、コストとパフォーマンスを最適化しながら、Iceberg AWS を大規模に実行するためのベストプラクティスと推奨事項が含まれています。

Iceberg の使用を開始したばかりのユーザーでも、既存の Iceberg ワークロードを最適化しようとしている経験豊富なユーザーでも AWS、このガイドはプロジェクトのすべての段階で貴重なインサイトを提供します。

このガイドの内容

• 最新のデータレイク

• Athena SQL での Iceberg テーブルの開始方法

• Amazon EMR での Iceberg の使用

• での Iceberg の使用 AWS Glue

• Spark を使用した Iceberg テーブルの操作

• Trino を使用した Iceberg テーブルの操作

• Amazon Data Firehose を使用した Iceberg テーブルの操作

• Athena SQL を使用した Iceberg テーブルの操作

• PyIceberg を使用した Iceberg テーブルの操作

• 既存のテーブルを Iceberg に移行する

• Iceberg ワークロードを最適化するためのベストプラクティス

• Iceberg ワークロードのモニタリング

• ガバナンスとアクセスコントロール

• リファレンスアーキテクチャ

• リソース

• 寄稿者