As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Monitorando EMR eventos da Amazon com CloudWatch
A Amazon EMR rastreia eventos e mantém informações sobre eles por até sete dias no EMR console da Amazon. A Amazon EMR registra eventos quando há uma mudança no estado de clusters, grupos de instâncias, frotas de instâncias, políticas de escalabilidade automática ou etapas. Os eventos capturam a data e a hora em que o evento ocorreu, detalhes sobre os elementos afetados e outros pontos de dados essenciais.
A tabela a seguir lista EMR os eventos da Amazon, junto com o estado ou a mudança de estado que o evento indica, a gravidade do evento, o tipo de evento, o código do evento e as mensagens do evento. EMRA Amazon representa eventos como JSON objetos e os envia automaticamente para um stream de eventos. O JSON objeto é importante quando você configura regras para processamento de CloudWatch eventos usando Eventos porque as regras buscam corresponder aos padrões do JSON objeto. Para obter mais informações, consulte Eventos e padrões de eventos e EMReventos da Amazon no Guia do usuário do Amazon CloudWatch Events.
nota
Para garantir que forneceremos as informações mais pertinentes, refinamos continuamente nossas mensagens de erro. Por isso, não é recomendável analisar o texto das mensagens para iniciar as próximas ações do fluxo de trabalho.
Eventos de início de cluster
Estado ou alteração de estado | Gravidade | Tipo de evento | Código do evento | Mensagem |
---|---|---|---|---|
CREATING |
WARN |
EMRprovisionamento de frota de instâncias | EC2provisionamento — Capacidade de instância insuficiente | Não podemos criar seu EMR cluster ClusterId
(ClusterName) da Amazon para a frota de instâncias. EC2 A InstanceFleetID Amazon tem capacidade spot insuficiente para o tipo de instância [Instancetype1, Instancetype2] e capacidade sob demanda insuficiente para o tipo de instância [Instancetype3,
Instancetype4] na zona [AvailabilityZone1,
AvaliabilityZone2] de disponibilidade. Confira aqui a documentação para obter mais informações sobre como responder a esse evento. |
CREATING |
WARN |
EMRaprovisionamento de grupos de instâncias | EC2provisionamento — Capacidade de instância insuficiente | Não podemos criar seu EMR cluster ClusterId
(ClusterName) da Amazon para o grupo de instâncias. EC2 A InstanceGroupID Amazon tem capacidade spot insuficiente para o tipo de instância [Instancetype1, Instancetype2] e capacidade sob demanda insuficiente para o tipo de instância [Instancetype3,
Instancetype4] na zona [AvailabilityZone1,
AvaliabilityZone2] de disponibilidade. Confira aqui a documentação para obter mais informações sobre como responder a esse evento. |
CREATING |
WARN |
EMRprovisionamento de frota de instâncias | EC2provisionamento - Endereços livres insuficientes na sub-rede | Não podemos criar o EMR cluster da Amazon ClusterId (ClusterName) que você solicitou, por exemplo, a frota InstanceFleetID porque a sub-rede especificada [Subnet1, Subnet2] não contém endereços IP privados gratuitos suficientes para atender à sua solicitação. Use a operação DescribeSubnets para consultar quantos endereços IP estão disponíveis (não usados) na sub-rede. Para obter informações sobre como responder a esse evento, consulte Códigos de erro da Amazon EC2 API |
CREATING |
WARN |
EMRaprovisionamento de grupos de instâncias | EC2provisionamento - Endereços livres insuficientes na sub-rede | Não podemos criar o EMR cluster da Amazon ClusterId (ClusterName) que você solicitou para o grupo de instâncias InstanceGroupID porque a sub-rede especificada [Subnet1, Subnet2] não contém endereços IP privados gratuitos suficientes para atender à sua solicitação. Use a operação DescribeSubnets para consultar quantos endereços IP estão disponíveis (não usados) na sub-rede. Para obter informações sobre como responder a esse evento, consulte Códigos de erro da Amazon EC2 API |
CREATING
|
WARN
|
EMRprovisionamento de frota de instâncias |
EC2Provisionamento — v CPU Limite excedido |
O fornecimento InstanceFleetID no EMR cluster da Amazon ClusterId (ClusterName) está atrasado porque você atingiu o limite do número de vCPUs (unidades de processamento virtual) atribuídas às instâncias em execução em seuaccount (accountId) . Para obter mais informações, Códigos de erro para a Amazon EC2 API |
CREATING
|
WARN
|
EMRaprovisionamento de grupos de instâncias |
EC2Provisionamento — v CPU Limite excedido |
O fornecimento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterId está atrasado porque você atingiu o limite do número de vCPUs (unidades de processamento virtual) atribuídas às instâncias em execução na sua conta(accountId) . Para obter mais informações, Códigos de erro para a Amazon EC2 API |
CREATING
|
WARN
|
EMRprovisionamento de frota de instâncias |
EC2Provisionamento — Limite de contagem de instâncias spot excedido |
O fornecimento da frota de instâncias InstanceFleetID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias spot que você pode iniciar no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
CREATING
|
WARN
|
EMRaprovisionamento de grupos de instâncias |
EC2Provisionamento — Limite de contagem de instâncias spot excedido |
O fornecimento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias spot que você pode iniciar no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
CREATING
|
WARN
|
EMRprovisionamento de frota de instâncias |
EC2Provisionamento — limite de instâncias excedido |
O fornecimento da frota de instâncias InstanceFleetID no EMR cluster da Amazon ClusterId (ClusterName) está atrasado porque você atingiu o limite do número de instâncias que você pode executar simultaneamente no seuaccount (accountID) . Para obter mais informações sobre os limites EC2 de serviço da Amazon, consulte Códigos de erro para a Amazon EC2 API. |
CREATING
|
WARN
|
EMRaprovisionamento de grupos de instâncias |
EC2Provisionamento — limite de instâncias excedido |
O fornecimento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterId (ClusterName) está atrasado porque você atingiu o limite do número de instâncias que você pode executar simultaneamente no seuaccount (accountID) . Para obter mais informações sobre os limites EC2 de serviço da Amazon, consulte Códigos de erro para a Amazon EC2 API. |
CREATING |
WARN |
EMRaprovisionamento de grupos de instâncias |
none |
O EMR cluster da Amazon - ou - O EMR cluster da Amazon notaUm cluster no estado |
STARTING
|
INFO
|
EMRmudança de estado do cluster |
none |
O EMR cluster da Amazon |
STARTING
|
INFO
|
EMRmudança de estado do cluster |
none |
notaAplica-se somente a clusters com a configuração de frotas de instâncias e várias zonas de disponibilidade selecionadas na AmazonEC2.
|
STARTING
|
INFO
|
EMRmudança de estado do cluster |
none |
O EMR cluster da Amazon |
WAITING
|
INFO
|
EMRmudança de estado do cluster |
none |
O EMR cluster da Amazon - ou - O EMR cluster da Amazon notaUm cluster no estado |
nota
Os eventos com código de evento são EC2 provisioning - Insufficient Instance
Capacity
emitidos periodicamente quando seu EMR cluster encontra um erro de capacidade insuficiente da Amazon EC2 para sua frota de instâncias ou grupo de instâncias durante a criação do cluster ou a operação de redimensionamento. Para obter informações sobre como responder a esses eventos, consulte Respondendo aos eventos de capacidade de instância insuficiente EMR do cluster da Amazon.
Eventos de término de clusters
Estado ou alteração de estado | Gravidade | Tipo de evento | Código do evento | Mensagem |
---|---|---|---|---|
TERMINATED
|
A gravidade depende do motivo da mudança de estado, conforme mostrado a seguir:
|
EMRmudança de estado do cluster |
none |
O Amazon EMR Cluster |
TERMINATED_WITH_ERRORS
|
CRITICAL
|
EMRmudança de estado do cluster |
none |
O Amazon EMR Cluster |
TERMINATED_WITH_ERRORS
|
CRITICAL
|
EMRmudança de estado do cluster |
none |
O Amazon EMR Cluster |
Eventos de alteração de estado da frota de instâncias
nota
A configuração de frotas de instâncias está disponível somente nas EMR versões 4.8.0 e posteriores da Amazon, excluindo 5.0.0 e 5.0.3.
Estado ou alteração de estado | Gravidade | Tipo de evento | Código do evento | Mensagem |
---|---|---|---|---|
De |
INFO
|
none | O provisionamento, por exemplo, da frota no EMR cluster |
|
De |
INFO
|
none | Um redimensionamento, por exemplo, da frota |
|
De |
INFO
|
none | A operação de redimensionamento, por exemplo, da frota |
|
De |
INFO
|
none | A operação de redimensionamento, por exemplo, da frota |
|
SUSPENDED
|
ERROR
|
none | A frota de instâncias |
|
RESIZING
|
WARNING
|
none | A operação de redimensionamento, por exemplo, da frota |
|
|
INFO
|
none | A operação de redimensionamento, por exemplo, da frota |
|
|
INFO
|
none | Uma operação de redimensionamento, por exemplo, da frota |
Eventos de redimensionamento da frota de instâncias
Tipo de evento | Gravidade | Código do evento | Mensagem |
---|---|---|---|
EMRredimensionamento da frota de instâncias |
ERROR |
Tempo limite de provisionamento spot |
A operação de redimensionamento da frota de instâncias |
EMRredimensionamento da frota de instâncias |
ERROR |
Tempo limite de provisionamento sob demanda |
A operação de redimensionamento da frota de instâncias |
EMRredimensionamento da frota de instâncias |
WARNING |
EC2provisionamento — Capacidade de instância insuficiente | Não podemos concluir a operação de redimensionamento da frota de instâncias |
EMRredimensionamento da frota de instâncias |
WARNING |
Tempo limite de provisionamento spot: redimensionamento contínuo |
Ainda estamos provisionando a capacidade spot para a operação de redimensionamento da frota de instâncias que foi iniciada, |
EMRredimensionamento da frota de instâncias |
WARNING |
Tempo limite de provisionamento sob demanda: redimensionamento contínuo |
Ainda estamos provisionando a capacidade sob demanda para a operação de redimensionamento da frota de instâncias que foi iniciada, |
EMRredimensionamento da frota de instâncias |
WARNING |
EC2Provisionamento - Endereço livre insuficiente na sub-rede |
Não podemos concluir a operação de redimensionamento, por exemplo, da frota InstanceFleetID no EMR cluster da Amazon ClusterId (ClusterName) porque a sub-rede especificada [Subnet1, Subnet2] não contém endereços IP privados gratuitos suficientes para atender à sua solicitação. Use a operação DescribeSubnets para exibir quantos endereços IP estão disponíveis (não usados) na sub-rede. Para obter informações sobre como responder a esse evento, consulte Códigos de erro da Amazon EC2 API. |
EMRredimensionamento da frota de instâncias |
WARNING |
EC2Provisionamento - v CPU Limite excedido |
O redimensionamento da frota de instâncias InstanceFleetID no EMR cluster da Amazon ClusterName está atrasado porque você atingiu o limite do número de vCPUs (unidades de processamento virtual) atribuídas às instâncias em execução no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
EMRredimensionamento da frota de instâncias |
WARNING |
EC2Provisionamento - Limite de contagem de instâncias spot excedido |
O fornecimento da frota de instâncias InstanceFleetID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias spot que você pode iniciar no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
EMRredimensionamento da frota de instâncias |
WARNING |
EC2Provisionamento — Limite de instâncias excedido |
O fornecimento da frota de instâncias InstanceFleetID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias sob demanda que você pode executar no seuaccount (accountId) . Para obter mais informações sobre códigos de erro para a Amazon EC2 API. |
nota
Os eventos de tempo limite de provisionamento são emitidos quando a EMR Amazon interrompe o provisionamento de capacidade spot ou sob demanda para a frota após o tempo limite expirar. Para obter informações sobre como responder a esses eventos, consulte Respondendo aos eventos de tempo limite de redimensionamento da frota de instâncias de EMR cluster da Amazon.
Eventos de instâncias de grupos
Tipo de evento | Gravidade | Código do evento | Mensagem |
---|---|---|---|
De |
INFO
|
none | A operação de redimensionamento do grupo de instâncias |
De |
INFO
|
none | Um grupo de redimensionamento, por exemplo, |
SUSPENDED
|
ERROR
|
none | O grupo de instâncias |
RESIZING
|
WARNING
|
none | A operação de redimensionamento do grupo de instâncias |
EMRredimensionamento do grupo de instâncias |
WARNING |
EC2provisionamento — Capacidade de instância insuficiente | Não conseguimos concluir a operação de redimensionamento que começou em |
EMRredimensionamento do grupo de instâncias |
WARNING |
EC2Provisionamento - Endereço livre insuficiente na sub-rede |
Não podemos concluir a operação de redimensionamento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterId (ClusterName) porque a sub-rede especificada [Subnet1, Subnet2] não contém endereços IP privados gratuitos suficientes para atender à sua solicitação. Use a operação DescribeSubnets para exibir quantos endereços IP estão disponíveis (não usados) na sub-rede. Para obter informações sobre como responder a esse evento, consulte Códigos de erro da Amazon EC2 API. |
EMRredimensionamento do grupo de instâncias |
WARNING |
EC2Provisionamento - v CPU Limite excedido |
O redimensionamento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterName está atrasado porque você atingiu o limite do número de vCPUs (unidades de processamento virtual) atribuídas às instâncias em execução no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
EMRredimensionamento do grupo de instâncias |
WARNING |
EC2Provisionamento - Limite de contagem de instâncias spot excedido |
O fornecimento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias spot que você pode iniciar no seuaccount (accountId) . Para obter mais informações, consulte Códigos de erro para a Amazon EC2 API. |
EMRredimensionamento do grupo de instâncias |
WARNING |
EC2Provisionamento — Limite de instâncias excedido |
O fornecimento do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterID (ClusterName) está atrasado porque você atingiu o limite do número de instâncias sob demanda que você pode executar no seuaccount (accountId) . Para obter mais informações sobre códigos de erro para a Amazon EC2 API. |
De |
INFO
|
none | Um redimensionamento para o grupo de instâncias |
nota
Com a Amazon EMR versão 5.21.0 e posterior, você pode substituir as configurações do cluster e especificar classificações de configuração adicionais para cada grupo de instâncias em um cluster em execução. Você faz isso usando o EMR console da Amazon, o AWS Command Line Interface (AWS CLI) ou AWS SDK o. Para obter mais informações, consulte Supplying a Configuration for an Instance Group in a Running Cluster.
A tabela a seguir lista EMR os eventos da Amazon para a operação de reconfiguração, junto com o estado ou a mudança de estado que o evento indica, a gravidade do evento e as mensagens do evento.
Estado ou alteração de estado | Gravidade | Mensagem |
---|---|---|
RUNNING
|
INFO
|
Uma reconfiguração para o grupo de instâncias |
De |
INFO
|
A operação de reconfiguração do grupo de instâncias |
De |
INFO
|
Uma reconfiguração para o grupo de instâncias |
RESIZING
|
INFO
|
A operação de reconfiguração para a versão de configuração do |
RECONFIGURING
|
INFO
|
A operação de redimensionamento em relação à contagem Num de instâncias do grupo de instâncias InstanceGroupID no EMR cluster da Amazon ClusterId (ClusterName) está temporariamente bloqueada Time porque o grupo de instâncias está dentroState . |
RECONFIGURING
|
WARNING
|
A operação de reconfiguração do grupo de instâncias |
RECONFIGURING
|
INFO
|
As configurações estão revertendo para o número da versão anterior bem-sucedida do grupo |
De |
INFO
|
As configurações foram revertidas com sucesso para a versão anterior bem-sucedida do |
De |
CRITICAL
|
Falha ao reverter para a versão anterior bem-sucedida do |
Eventos de política do Auto Scaling
Estado ou alteração de estado | Gravidade | Mensagem |
---|---|---|
PENDING
|
INFO
|
Uma política de Auto Scaling foi adicionada ao grupo de instâncias no EMR cluster - ou - A política de Auto Scaling para o grupo de instâncias no EMR cluster da |
ATTACHED
|
INFO
|
A política de Auto Scaling, por exemplo, para o grupo no EMR cluster |
|
INFO
|
A política de Auto Scaling para o grupo de instâncias no EMR cluster |
FAILED
|
ERROR
|
A política de Auto Scaling para o grupo de instâncias no EMR cluster - ou - A política de Auto Scaling para o grupo de instâncias no EMR cluster da |
Eventos de etapa
Estado ou alteração de estado | Gravidade | Mensagem |
---|---|---|
PENDING
|
INFO
|
A etapa |
CANCEL_PENDING
|
WARN
|
A etapa |
RUNNING
|
INFO
|
A etapa |
COMPLETED
|
INFO
|
A etapa |
CANCELLED
|
WARN
|
A solicitação de cancelamento foi bem-sucedida para a etapa de cluster |
FAILED
|
ERROR
|
A etapa |
Eventos de substituição de nós não íntegros
Tipo de evento | Gravidade | Código do evento | Mensagem |
---|---|---|---|
Substituição EMR insalubre de nós da Amazon |
INFO |
Detectado nó central não íntegro |
EMRA Amazon identificou que a instância principal |
Substituição EMR insalubre de nós da Amazon |
INFO |
Nó central não íntegro: substituição desabilitada |
EMRA Amazon identificou que a instância principal |
Substituição EMR insalubre de nós da Amazon |
WARN |
O nó central não íntegro não foi substituído |
A Amazon não EMR pode substituir sua instância notaO motivo pelo qual a Amazon não EMR pode substituir seu nó principal difere dependendo do seu cenário. Por exemplo, uma razão pela qual a Amazon não EMR pode excluir um nó é porque um cluster não teria nenhum nó principal restante. |
Substituição EMR insalubre de nós da Amazon |
INFO |
O nó central não íntegro foi recuperado |
EMRA Amazon recuperou suas instâncias |
Para obter mais informações sobre a substituição de nós não íntegros, consulte Replacing unhealthy nodes.
Visualização de eventos com o EMR console da Amazon
Para cada cluster, você pode visualizar uma lista simples de eventos no painel de detalhes, que lista os eventos em ordem decrescente de ocorrência. Você também pode visualizar todos os eventos para todos os clusters de uma região em ordem decrescente de ocorrência.
Se não quiser que um usuário veja todos os eventos de cluster para uma região, adicione uma instrução que negue permissão ("Effect": "Deny"
) para a ação elasticmapreduce:ViewEventsFromAllClustersInConsole
a uma política anexada a esse usuário.
Para exibir eventos de todos os clusters em uma região usando o console
-
Faça login no e abra AWS Management Console o EMR console da Amazon em https://console.aws.amazon.com/emr
. -
EMREm EC2 Ativado no painel de navegação esquerdo, escolha Eventos.
Para exibir os eventos de um determinado cluster usando o console
-
Faça login no e abra AWS Management Console o EMR console da Amazon em https://console.aws.amazon.com/emr
. -
EC2Em EMRAtivado, no painel de navegação esquerdo, escolha Clusters e, em seguida, escolha um cluster.
-
Para visualizar todos os seus eventos, selecione a guia Eventos na página de detalhes do cluster.