Criar um cluster com o Ganglia

nota

A última versão do Amazon EMR a incluir o Ganglia foi o Amazon EMR 6.15.0. Para monitorar seu cluster, versões superiores à 6.15.0 incluem o agente Amazon CloudWatch .

Para criar um cluster com o Ganglia usando o console

1. Navegue até o novo console do Amazon EMR e selecione Alternar para o console antigo na navegação lateral. Para obter mais informações sobre o que esperar ao alternar para o console antigo, consulte Usar o console antigo.

2. Selecione Criar cluster.

3. Em Software configuration (Configuração do software), escolha All Applications (Todos os aplicativos), Core Hadoop ou Spark.

4. Prossiga com a criação do cluster usando as configurações apropriadas.

Para adicionar o Ganglia a um cluster usando o AWS CLI

No AWS CLI, você pode adicionar o Ganglia a um cluster usando create-cluster com o --applications parâmetro. Se você especificar apenas o Ganglia usando o parâmetro --applications, o Ganglia será o único aplicativo instalado.

• Digite o seguinte comando para adicionar o Ganglia quando você criar um cluster e substitua myKey pelo nome do seu par de chaves do EC2.

  nota

  Os caracteres de continuação de linha do Linux (\) são incluídos para facilitar a leitura. Eles podem ser removidos ou usados ​​em comandos do Linux. No Windows, remova-os ou substitua-os por um sinal de interpolação (^).

  aws emr create-cluster --name "Spark cluster with Ganglia" --release-label emr-6.15.0; \
  --applications Name=Spark Name=Ganglia \
  --ec2-attributes KeyName=myKey --instance-type m5.xlarge \
  --instance-count 3 --use-default-roles

  Quando você especifica a contagem de instâncias sem usar o parâmetro --instance-groups, um único nó principal é executado, e as instâncias restantes são executadas como nós core. Todos os nós usam o tipo de instância especificado no comando.

  nota

  Se você não tiver criado o perfil de serviço padrão do EMR e o perfil de instância do EC2, digite aws emr create-default-roles para criá-los antes de digitar o subcomando create-cluster.

  Para obter mais informações sobre o uso dos comandos do Amazon EMR no AWS CLI, consulte. https://docs.aws.amazon.com/cli/latest/reference/emr