Amazon EMR 终端节点和配额 - AWS 一般参考

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Amazon EMR 终端节点和配额

以下是该服务的服务端点和服务限额。要以编程方式连接到 AWS 服务,请使用终端节点。除标准 AWS 终端节点外,某些 AWS 服务还在选定区域提供 FIPS 终端节点。有关更多信息,请参阅 AWS 服务端点。服务配额,也称为限制,是您的 AWS 账户的最大服务资源或操作数量。有关更多信息,请参阅 AWS 服务配额

服务端点

区域名称 区域 端点 协议
美国东部(俄亥俄州) us-east-2

elasticmapreduce.us-east-2.amazonaws.com

elasticmapreduce-fips.us-east-2.amazonaws.com

elasticmapreduce.us-east-2.api.aws

HTTPS

HTTPS

HTTPS

美国东部(弗吉尼亚州北部) us-east-1

elasticmapreduce.us-east-1.amazonaws.com

elasticmapreduce-fips.us-east-1.amazonaws.com

HTTPS

HTTPS

美国西部(加利福尼亚北部) us-west-1

elasticmapreduce.us-west-1.amazonaws.com

elasticmapreduce-fips.us-west-1.amazonaws.com

HTTPS

HTTPS

美国西部(俄勒冈州) us-west-2

elasticmapreduce.us-west-2.amazonaws.com

elasticmapreduce-fips.us-west-2.amazonaws.com

HTTPS

HTTPS

非洲(开普敦) af-south-1 elasticmapreduce.af-south-1.amazonaws.com HTTPS
亚太地区(香港) ap-east-1 elasticmapreduce.ap-east-1.amazonaws.com HTTPS
亚太地区(海得拉巴) ap-south-2 elasticmapreduce.ap-south-2.amazonaws.com HTTPS
亚太地区(雅加达) ap-southeast-3 elasticmapreduce.ap-southeast-3.amazonaws.com HTTPS
亚太地区(墨尔本) ap-southeast-4 elasticmapreduce.ap-southeast-4.amazonaws.com HTTPS
亚太地区(孟买) ap-south-1 elasticmapreduce.ap-south-1.amazonaws.com HTTPS
亚太地区(大阪) ap-northeast-3 elasticmapreduce.ap-northeast-3.amazonaws.com HTTPS
亚太地区(首尔) ap-northeast-2 elasticmapreduce.ap-northeast-2.amazonaws.com HTTPS
亚太地区(新加坡) ap-southeast-1 elasticmapreduce.ap-southeast-1.amazonaws.com HTTPS
亚太地区(悉尼) ap-southeast-2 elasticmapreduce.ap-southeast-2.amazonaws.com HTTPS
亚太地区(东京) ap-northeast-1 elasticmapreduce.ap-northeast-1.amazonaws.com HTTPS
加拿大(中部) ca-central-1

elasticmapreduce.ca-central-1.amazonaws.com

elasticmapreduce-fips.ca-central-1.amazonaws.com

HTTPS

HTTPS

加拿大西部(卡尔加里) ca-west-1

elasticmapreduce.ca-west-1.amazonaws.com

elasticmapreduce-fips.ca-west-1.amazonaws.com

HTTPS

HTTPS

欧洲地区(法兰克福) eu-central-1 elasticmapreduce.eu-central-1.amazonaws.com HTTPS
欧洲地区(爱尔兰) eu-west-1 elasticmapreduce.eu-west-1.amazonaws.com HTTPS
欧洲地区(伦敦) eu-west-2 elasticmapreduce.eu-west-2.amazonaws.com HTTPS
欧洲地区(米兰) eu-south-1 elasticmapreduce.eu-south-1.amazonaws.com HTTPS
欧洲地区(巴黎) eu-west-3 elasticmapreduce.eu-west-3.amazonaws.com HTTPS
欧洲(西班牙) eu-south-2 elasticmapreduce.eu-south-2.amazonaws.com HTTPS
欧洲地区(斯德哥尔摩) eu-north-1 elasticmapreduce.eu-north-1.amazonaws.com HTTPS
欧洲(苏黎世) eu-central-2 elasticmapreduce.eu-central-2.amazonaws.com HTTPS
以色列(特拉维夫) il-central-1 elasticmapreduce.il-central-1.amazonaws.com HTTPS
中东(巴林) me-south-1 elasticmapreduce.me-south-1.amazonaws.com HTTPS
中东(阿联酋) me-central-1 elasticmapreduce.me-central-1.amazonaws.com HTTPS
南美洲(圣保罗) sa-east-1 elasticmapreduce.sa-east-1.amazonaws.com HTTPS
AWS GovCloud (美国东部) us-gov-east-1

elasticmapreduce.us-gov-east-1.amazonaws.com

elasticmapreduce.us-gov-east-1.api.aws

HTTPS

HTTPS

AWS GovCloud (美国西部) us-gov-west-1

elasticmapreduce.us-gov-west-1.amazonaws.com

elasticmapreduce.us-gov-west-1.api.aws

HTTPS

HTTPS

如果您指定了通用终端节点(elasticmapreduce.amazonaws.com),Amazon EMR 会将您的请求转至默认区域中的终端节点。对于 2013 年 3 月 8 日或之后创建的账户而言,默认区域是 us-west-2;对于较早的账户而言,默认区域是 us-east-1。

服务限额

名称 默认值 可调整 描述
EMR WAL 工作区 每个受支持的区域:20 个 当前区域中此账户可同时使用的 Amazon EMR 预写日志 (EMR WAL) 工作区的最大数量。
AddInstanceFleet 通话补货率 每个受支持的区域:0.5 个 将代币添加到 AddInstanceFleet 存储桶的速率
AddInstanceGroups 通话补货率 每个受支持的区域:0.2 个 将代币添加到 AddInstanceGroups 存储桶的速率
AddJobFlowSteps 通话补货率 每个受支持的区域:0.5 个 将代币添加到 AddJobFlowSteps 存储桶的速率
AddTags 通话补货率 每个受支持的区域:0.5 个 将代币添加到 AddTags 存储桶的速率
CancelSteps 通话补货率 每个受支持的区域:0.5 个 将代币添加到 CancelSteps 存储桶的速率
CreateSecurityConfiguration 通话补货率 每个受支持的区域:0.5 个 将代币添加到 CreateSecurityConfiguration 存储桶的速率
DeleteSecurityConfiguration 通话补货率 每个受支持的区域:0.5 个 将代币添加到 DeleteSecurityConfiguration 存储桶的速率
DescribeCluster 通话补货率 每个受支持的区域:1 个 将代币添加到 DescribeCluster 存储桶的速率
DescribeJobFlows 通话补货率 每个受支持的区域:0.2 个 将代币添加到 DescribeJobFlows 存储桶的速率
DescribeSecurityConfiguration 通话补货率 每个受支持的区域:0.5 个 将代币添加到 DescribeSecurityConfiguration 存储桶的速率
DescribeStep 通话补货率 每个受支持的区域:0.5 个 将代币添加到 DescribeStep 存储桶的速率
ListBootstrapActions 通话补货率 每个受支持的区域:1 个 将代币添加到 ListBootstrapActions 存储桶的速率
ListClusters 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ListClusters 存储桶的速率
ListInstanceFleets 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ListInstanceFleets 存储桶的速率
ListInstanceGroups 通话补货率 每个受支持的区域:1 个 将代币添加到 ListInstanceGroups 存储桶的速率
ListInstances 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ListInstances 存储桶的速率
ListSecurityConfigurations 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ListSecurityConfigurations 存储桶的速率
ListSteps 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ListSteps 存储桶的速率
ModifyCluster 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ModifyCluster 存储桶的速率
ModifyInstanceFleet 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ModifyInstanceFleet 存储桶的速率
ModifyInstanceGroups 通话补货率 每个受支持的区域:0.5 个 将代币添加到 ModifyInstanceGroups 存储桶的速率
PutAutoScalingPolicy 通话补货率 每个受支持的区域:0.5 个 将代币添加到 PutAutoScalingPolicy 存储桶的速率
RemoveAutoScalingPolicy 通话补货率 每个受支持的区域:0.5 个 将代币添加到 RemoveAutoScalingPolicy 存储桶的速率
RemoveTags 通话补货率 每个受支持的区域:0.5 个 将代币添加到 RemoveTags 存储桶的速率
RunJobFlow 通话补货率 每个受支持的区域:0.5 个 将代币添加到 RunJobFlow 存储桶的速率
SetTerminationProtection 通话补货率 每个受支持的区域:0.2 个 将代币添加到 SetTerminationProtection 存储桶的速率
SetVisibleToAllUsers 通话补货率 每个受支持的区域:0.2 个 将代币添加到 SetVisibleToAllUsers 存储桶的速率
TerminateJobFlows 通话补货率 每个受支持的区域:0.5 个 将代币添加到 TerminateJobFlows 存储桶的速率
您每秒可以发出的最大 API 请求数量。 每个受支持的区域:每秒 25 个 在当前区域中,您可以在此账户下为所有 EMR 操作执行的每秒最大请求数量。
您每秒可以发出的最大 AddInstanceFleet API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 AddInstanceFleet 请求数。 AddInstanceFleet 向正在运行的集群添加实例队列。
您每秒可以发出的最大 AddInstanceGroups API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 AddInstanceGroups 请求数。将一个或多个实例组添加到正在运行的集群中。
您每秒可以发出的最大 AddJobFlowSteps API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 AddJobFlowSteps 请求数。 AddJobFlowSteps 为正在运行的集群添加新步骤。
您每秒可以发出的最大 AddTags API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 AddTags 请求数。将标签添加到 Amazon EMR 资源。
您每秒可以发出的最大 CancelSteps API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 CancelSteps 请求数。
您每秒可以发出的最大 CreateSecurityConfiguration API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 CreateSecurityConfiguration 请求数。 CreateSecurityConfiguration 创建安全配置,该配置存储在服务中,可以在创建集群时指定。
您每秒可以发出的最大 DeleteSecurityConfiguration API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 DeleteSecurityConfiguration 请求数。 DeleteSecurityConfiguration 删除安全配置。
您每秒可以发出的最大 DescribeCluster API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 DescribeCluster 请求数。 DescribeCluster 提供集群级别的详细信息,包括状态、硬件和软件配置、VPC 设置等。
您每秒可以发出的最大 DescribeJobFlows API 请求数。 每个受支持的区域:每秒 20 个 您可在当前区域的该账户中每秒执行的最大 DescribeJobFlows 请求数。此 API 已弃用,最终将被删除。我们建议您 ListBootstrapActions 改用 ListClusters DescribeCluster ListSteps、、 ListInstanceGroups 和。
您每秒可以发出的最大 DescribeSecurityConfiguration API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 DescribeSecurityConfiguration 请求数。 DescribeSecurityConfiguration 通过返回配置 JSON 来提供安全配置的详细信息。
您每秒可以发出的最大 DescribeStep API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 DescribeStep 请求数。 DescribeStep 提供了有关集群步骤的更多详细信息。
您每秒可以发出的最大 ListBootstrapActions API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 ListBootstrapActions 请求数。 ListBootstrapActions 提供了有关与集群关联的引导操作的信息。
您每秒可以发出的最大 ListClusters API 请求数。 每个受支持的区域:每秒 20 个 您可在当前区域的该账户中每秒执行的最大 ListClusters 请求数。 ListClusters 提供该 AWS 账户可见的所有集群的状态。
您每秒可以发出的最大 ListInstanceFleets API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 ListInstanceFleets 请求数。 ListInstanceFleets 列出了有关集群中实例队列的所有可用详细信息。
您每秒可以发出的最大 ListInstanceGroups API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 ListInstanceGroups 请求数。 ListInstanceGroups 提供了有关集群中实例组的所有可用详细信息。
您每秒可以发出的最大 ListInstances API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 ListInstances 请求数。 ListInstances 提供所有活跃的 EC2 实例和在过去 30 天内终止的 EC2 实例的信息,最多 2,000 个。
您每秒可以发出的最大 ListSecurityConfigurations API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 ListSecurityConfigurations 请求数。 ListSecurityConfigurations 列出了该账户可见的所有安全配置,并提供了其创建日期和时间以及名称。
您每秒可以发出的最大 ListSteps API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 ListSteps 请求数。 ListSteps 按相反顺序提供了群集的步骤列表。
您每秒可以发出的最大 ModifyCluster API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 ModifyCluster 请求数。 ModifyCluster 修改使用 clusterID 指定的集群可以同时执行的步骤数。
您每秒可以发出的最大 ModifyInstanceFleet API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 ModifyInstanceFleet 请求数。 ModifyInstanceFleet 修改实例队列的目标按需容量和目标竞价容量。
您每秒可以发出的最大 ModifyInstanceGroups API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 ModifyInstanceGroups 请求数。 ModifyInstanceGroups 修改实例组的节点数量和配置设置。
您每秒可以发出的最大 PutAutoScalingPolicy API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 PutAutoScalingPolicy 请求数。 PutAutoScalingPolicy 为 Amazon EMR 集群中的核心实例组或任务实例组创建或更新自动扩展策略。
您每秒可以发出的最大 RemoveAutoScalingPolicy API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 RemoveAutoScalingPolicy 请求数。 RemoveAutoScalingPolicy 从 EMR 集群内的指定实例组中移除自动扩展策略。
您每秒可以发出的最大 RemoveTags API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 RemoveTags 请求数。从 Amazon EMR 资源中删除标签。
您每秒可以发出的最大 RunJobFlow API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 RunJobFlow 请求数。 RunJobFlow 创建并开始运行新集群(任务流)。
您每秒可以发出的最大 SetTerminationProtection API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 SetTerminationProtection 请求数。 SetTerminationProtection 锁定集群(任务流),因此无法终止集群中的 EC2 实例。
您每秒可以发出的最大 SetVisibileToAllUsers API 请求数。 每个受支持的区域:每秒 5 个 您可在当前区域的该账户中每秒执行的最大 SetVisibleToAllUsers 请求数。设置该 VisibleToAllUsers 值,该值确定与集群关联的 AWS 账户的所有 IAM 用户是否都能看到该集群。
您每秒可以发出的最大 TerminateJobFlows API 请求数。 每个受支持的区域:每秒 10 个 您可在当前区域的该账户中每秒执行的最大 TerminateJobFlows 请求数。 TerminateJobFlows 关闭集群(任务流)列表。
可以同时运行的最大活动集群数量 每个受支持的区域:500 个 可以同时运行的最大活动集群数量。
每个实例组的最大活动实例数量。 每个受支持的区域:2,000 个 每个实例组的最大活动实例数。
存储桶对所有 EMR 操作的最大补给速率。 每个受支持的区域:5 个 存储桶对所有 EMR 操作的最大补给速率。
预写日志 (EMR WAL) 每个受支持的区域:2 万个 当前区域中此账户可同时使用的 Amazon EMR 预写日志 (EMR WAL) 的最大数量。

Amazon EMR 会按区域限制每个 AWS 账户的以下 API 请求。有关如何应用节流的更多信息,请参阅《Amazon EC2 API 参考》中的 API 请求限制