本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
创建 Amazon S3 存储桶
亚马逊定位任务 API 要求将输入文件存储在 Amazon S3 中,并将输出文件写入指定的 Amazon S3 位置。您可以使用具有不同前缀的单个 Amazon S3 存储桶来存储输入和输出数据,也可以使用不同的存储桶。
重要
使用同一个存储桶进行输入和输出时,请为每个存储桶使用不同的前缀。运行多个作业时,请勿对输入和输出使用相同的前缀,以免一个作业的输出无意中读取为其他作业的输入。
注意
您创建的 Amazon S3 输入和输出存储桶必须与您计划运行任务的 AWS 区域 存储桶相同。您创建的 IAM 资源必须在同一个账户中创建。必须在存储桶上启用版本控制。
使用控制台创建 Amazon S3 存储桶
-
打开 Amazon S3 控制台,网址为 https://console.aws.amazon.com/s3/
。 -
选择 创建存储桶 。
-
在存储桶名称中,输入输入存储桶的唯一名称,例如
my-jobs-input。 -
对于AWS 区域,选择您计划运行亚马逊定位任务的区域。
-
保留其余选项的默认设置,或根据您的要求进行配置。
-
选择 创建存储桶 。
-
创建存储桶后,选择存储桶名称以打开其详细信息。
-
选择属性选项卡。
-
在 “存储桶版本控制” 部分,选择 “编辑”。
-
选择 “启用”,然后选择 “保存更改”。
-
重复步骤 2-10,为输出结果创建第二个存储桶,例如
my-jobs-output。
要使用创建 Amazon S3 存储桶 AWS CLI
-
创建输入桶:
aws s3api create-bucket \ --bucket my-jobs-input \ --region us-east-1注意
对于外部区域
us-east-1,请添加以下--create-bucket-configuration参数:aws s3api create-bucket \ --bucket my-jobs-input \ --region us-west-2 \ --create-bucket-configuration LocationConstraint=us-west-2 -
在输入存储桶上启用版本控制:
aws s3api put-bucket-versioning \ --bucket my-jobs-input \ --versioning-configuration Status=Enabled -
创建输出存储桶:
aws s3api create-bucket \ --bucket my-jobs-output \ --region us-east-1 -
在输出存储桶上启用版本控制:
aws s3api put-bucket-versioning \ --bucket my-jobs-output \ --versioning-configuration Status=Enabled -
验证存储桶是否已创建:
aws s3 ls | grep my-jobs -
验证版本控制是否已启用:
aws s3api get-bucket-versioning --bucket my-jobs-input aws s3api get-bucket-versioning --bucket my-jobs-output
创建存储桶后,准备输入数据。有关准备输入数据的信息,请参见准备输入数据。
例示例:两个单独的存储桶
my-jobs-input/ ├── data-batch-1.parquet ├── data-batch-2.parquet └── data-batch-3.parquet my-jobs-output/ └── (results are written here by the service)
例示例:具有不同前缀的单个存储桶
my-jobs-bucket/ ├── input/ │ ├── data-batch-1.parquet │ ├── data-batch-2.parquet │ └── data-batch-3.parquet └── output/ └── (results are written here by the service)