選取您的 Cookie 偏好設定

我們使用提供自身網站和服務所需的基本 Cookie 和類似工具。我們使用效能 Cookie 收集匿名統計資料,以便了解客戶如何使用我們的網站並進行改進。基本 Cookie 無法停用,但可以按一下「自訂」或「拒絕」以拒絕效能 Cookie。

如果您同意,AWS 與經核准的第三方也會使用 Cookie 提供實用的網站功能、記住您的偏好設定,並顯示相關內容,包括相關廣告。若要接受或拒絕所有非必要 Cookie,請按一下「接受」或「拒絕」。若要進行更詳細的選擇,請按一下「自訂」。

的已知問題 AWS Lake Formation

焦點模式
的已知問題 AWS Lake Formation - AWS Lake Formation

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

檢閱 的這些已知問題 AWS Lake Formation。

篩選資料表中繼資料的限制

AWS Lake Formation 資料欄層級許可可用來限制對資料表中特定資料欄的存取。當使用者使用 主控台或 等 API 擷取資料表的中繼資料時glue:GetTable,資料表物件中的資料欄清單只會包含他們可存取的欄位。請務必了解此中繼資料篩選的限制。

雖然 Lake Formation 提供資料欄許可的中繼資料給整合服務,但查詢回應中的資料欄實際篩選是整合服務的責任。支援資料欄層級篩選的 Lake Formation 用戶端,包括 Amazon Athena、Amazon Redshift Spectrum 和 Amazon EMR,會根據向 Lake Formation 註冊的資料欄許可來篩選資料。使用者將無法讀取他們不應存取的任何資料。目前,AWS GlueETL 不支援資料欄篩選。

注意

EMR 叢集未完全由 管理 AWS。因此,EMR 管理員有責任妥善保護叢集,以避免未經授權存取資料。

某些應用程式或格式可能會在Parameters地圖中將其他中繼資料存放為資料表屬性,包括資料欄名稱和類型。這些屬性會傳回未修改,且任何具有任何資料欄SELECT許可的使用者皆可存取。

例如,Avro SerDe 會將資料表結構描述的 JSON 表示法存放在名為 的資料表屬性中avro.schema.literal,可供可存取資料表的所有使用者使用。建議您避免將敏感資訊存放在資料表屬性中,並注意使用者可以了解 Avro 格式資料表的完整結構描述。此限制專屬於資料表的中繼資料。

AWS Lake Formation 如果發起人沒有資料表中所有資料欄的SELECT許可,則在回應 glue:GetTable或類似請求spark.sql.sources.schema時, 會移除以 開頭的任何資料表屬性。這可讓使用者無法存取使用 Apache Spark 建立之資料表的其他中繼資料。在 Amazon EMR 上執行時,Apache Spark 應用程式仍可讀取這些資料表,但可能不會套用某些最佳化,且不支援區分大小寫的資料欄名稱。如果使用者可存取資料表中的所有資料欄,Lake Formation 會傳回未修改且具有所有資料表屬性的資料表。

重新命名排除資料欄的問題

如果您使用資料欄層級許可來排除資料欄,然後重新命名資料欄,則不會再從查詢中排除資料欄,例如 SELECT *

刪除 CSV 資料表中的資料欄的問題

如果您使用 CSV 格式建立 Data Catalog 資料表,然後從結構描述中刪除資料欄,則查詢可能會傳回錯誤的資料,而且可能未遵守資料欄層級許可。

解決方法:改為建立新的資料表。

資料表分割區必須新增至通用路徑下

Lake Formation 預期資料表的所有分割區都位於資料表位置欄位中設定的常見路徑下。當您使用爬蟲程式將分割區新增至目錄時,這會順暢運作。但是,如果您手動新增分割區,且這些分割區不在父資料表中設定的位置下,則資料存取無法運作。

在工作流程建立期間建立資料庫的問題

使用 Lake Formation 主控台從藍圖建立工作流程時,如果目標資料庫不存在,您可以建立該資料庫。當您這樣做時,登入的使用者會取得所建立資料庫的CREATE_TABLE許可。不過,工作流程產生的爬蟲程式會在嘗試建立資料表時擔任工作流程的角色。這會失敗,因為角色在資料庫上沒有 CREATE_TABLE許可。

解決方法:如果您在工作流程設定期間透過 主控台建立資料庫,則在執行工作流程之前,您必須為與工作流程相關聯的角色提供您剛建立之資料庫的CREATE_TABLE許可。

刪除並重新建立使用者的問題

以下案例導致 傳回錯誤的 Lake Formation 許可lakeformation:ListPermissions

  1. 建立使用者並授予 Lake Formation 許可。

  2. 刪除使用者。

  3. 使用相同名稱重新建立使用者。

ListPermissions 會傳回兩個項目,一個用於舊使用者,另一個用於新使用者。如果您嘗試撤銷授予舊使用者的許可,則會撤銷新使用者的許可。

Data Catalog API 操作不會更新 IsRegisteredWithLakeFormation 參數的值

Data Catalog API 操作有已知的限制,例如 GetTablesSearchTables 不會更新 IsRegisteredWithLakeFormation 參數的值,並傳回預設值,這是 false。建議使用 GetTable API 來檢視 IsRegisteredWithLakeFormation 參數的正確值。

Lake Formation 操作不支援 AWS Glue 結構描述登錄檔

Lake Formation 操作不支援在 SchemaReference中包含StorageDescriptor要在結構描述註冊中使用的 的 AWS Glue 資料表。

隱私權網站條款Cookie 偏好設定
© 2025, Amazon Web Services, Inc.或其附屬公司。保留所有權利。