在 Amazon S3 物件上執行大規模批次操作

您可以使用 S3 批次作業對 Amazon S3 物件執行大規模的批次作業。S3 批次作業可以對您指定的 Amazon S3 物件清單執行單一作業。單一任務可在包含數 EB 資料的數以億計物件上執行指定的操作。Amazon S3 會追蹤進度、傳送通知，並存放所有動作的詳細完成報告，提供完整受管、可稽核、無伺服器的體驗。您可以透過 AWS Management Console、AWS CLI、Amazon SDK 或 REST API 使用 S3 批次操作。

使用 S3 批次作業來複製物件並設定物件標籤或存取控制清單 (ACL)。您也可以起始從 S3 Glacier Flexible Retrieval 還原物件，或叫用 AWS Lambda 函數來使用物件執行自訂動作。您可以對自訂物件清單執行這些操作，也可以使用 Amazon S3 庫存報告輕鬆產生物件清單。Amazon S3 批次作業使用的 Amazon S3 API 與您已在 Amazon S3 中使用的 API 相同，因此您會覺得介面很熟悉。

注意

如需將 Amazon S3 Express One Zone 儲存類別與目錄儲存貯體搭配使用的詳細資訊，請參閱 什麼是 S3 Express One Zone？ 和 目錄值區。如需使用 Batch Operations 搭配 S3 Express One Zone 和目錄儲存貯體的詳細資訊，請參閱 使用 Batch Operations 搭配 S3 Express One Zone。

S3 批次作業基礎知識

您可以使用 S3 批次作業對 Amazon S3 物件執行大規模的批次作業。S3 批次作業可以對您指定的 Amazon S3 物件清單執行單一作業或動作。

術語

本節使用術語 jobs (任務)、operations (操作) 和 tasks (任務)，這些術語的定義如下：

任務 (Job)

任務是 S3 批次作業的基本工作單位。任務包含所有針對資訊清單中所列出物件執行指定操作時的必要資訊。當您提供此資訊並請求開始任務後，任務會針對資訊清單中的每個物件執行操作。

操作

作業是您希望批次作業任務執行的 API 動作類型，例如複製物件。每個任務會在資訊清單中指定的所有物件上執行單一類型的操作。

任務

任務 (task) 是任務 (job) 的執行單位。任務代表呼叫一次 Amazon S3 或 AWS Lambda API 操作，對單一物件執行任務的操作。在任務的存留期間，S3 批次作業會為資訊清單中指定的每個物件各自建立一個任務。

S3 批次作業任務的運作方式

任務是 S3 批次作業的基本工作單位。任務包含所有針對物件清單執行指定操作的必要資訊。若要建立任務，您可以給予 S3 批次作業一個物件清單，然後指定要在這些物件上執行的動作。

如需 S3 批次操作支援之操作的相關資訊，請參閱S3 批次操作支援的操作。

批次作業會在資訊清單中包含的每個物件上執行指定操作。資訊清單會列出您希望批次任務處理的物件，並做為物件儲存在儲存貯體中。您可以使用逗號分隔值 (CSV) 格式的 Amazon S3 清查 報告做為資訊清單，輕鬆為儲存貯體中的物件建立大型清單。您也可以以簡易的 CSV 格式指定資訊清單，讓您在單一儲存貯體中包含的物件自訂清單上執行批次操作。

建立任務後，Amazon S3 便會處理資訊清單中的物件清單，並針對每個物件執行指定的作業。任務執行期間，您可以透過程式設計方式或 Amazon S3 主控台來監控進度。您也可以設定任務，在其完成時產生完成報告。完成報告會描述任務 (job) 所執行的每個任務 (task) 結果。如需監控任務的詳細資訊，請參閱 管理 S3 批次作業任務。

S3 批次操作教學課程

下列教學課 end-to-end 程介紹某些 Batch 作業工作的完整程序。

• 教學課程：使用 S3 Batch 操作進行 Batch 轉碼影片，以及 AWS LambdaAWS Elemental MediaConvert