CloudWatch Agent Amazon - Amazon EMR

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

CloudWatch Agent Amazon

L' CloudWatch agent Amazon sur Amazon EMR est un outil qui permet de surveiller les instances Amazon EC2 de votre cluster EMR. Vous pouvez stocker et consulter les métriques que vous collectez avec l' CloudWatch agent dans CloudWatch. Pour plus d'informations sur l' CloudWatch agent, consultez le guide de CloudWatch l'utilisateur Amazon.

Note

Des frais supplémentaires vous seront facturés si vous en utilisez un autre Services AWS pour publier, consulter ou consulter les statistiques des CloudWatch agents Amazon. Consultez les pages suivantes pour plus d'informations sur les tarifs.

Ces métriques sont distinctes des métriques gratuites qu'Amazon EMR fournit sous l'espace de AWS/ElasticMapReduce noms dans. CloudWatch Pour plus d'informations sur les métriques que l' CloudWatch agent ne publie pas, consultez la section Surveillance des métriques Amazon EMR avec. CloudWatch

Avec Amazon EMR 7.0 et versions ultérieures, vous pouvez installer une version personnalisée de l' CloudWatch agent Amazon sur votre cluster pour collecter des métriques à partir de votre cluster EMR. L'agent collecte les métriques de tous les nœuds du cluster, les rassemble sur le nœud principal et publie les métriques de ce nœud dans le cloud.

Vous pouvez installer l’agent lorsque vous créez un cluster dans la console ou lorsque vous utilisez l’API create-cluster. Pour plus d’informations, consultez Créez un cluster EMR qui utilise l'agent Amazon CloudWatch . Par défaut, un cluster Amazon EMR qui exécute la série 7.x publie 34 métriques CloudWatch au niveau du système toutes les 60 secondes, mais vous pouvez configurer l'agent pour qu'il publie différentes métriques. Une autre option consiste à publier les statistiques sur Amazon Managed Service for Prometheus, et vous pouvez également choisir les mesures à publier. Pour différents cas d'utilisation et configurations, vous pouvez configurer l'agent pour afficher et interroger les métriques dans la CloudWatch console, Amazon Managed Grafana, ou via les API CloudWatch ou Amazon Managed Service pour Prometheus. Ils Services AWS entraînent des frais lorsque vous les utilisez pour stocker et interroger des métriques.

L' CloudWatch agent sur Amazon EMR peut publier des métriques système ainsi que des métriques JMX pour les services suivants sur votre cluster Amazon EMR.

  • Hadoop DataNode

  • Hadoop NameNode

  • Laine NodeManager

  • Laine ResourceManager

  • HBase Master — Amazon EMR 7.1 ou version ultérieure uniquement

  • HBase RegionServer — Amazon EMR 7.1 ou version ultérieure uniquement

  • HBase ThriftServer — Amazon EMR 7.1 ou version ultérieure uniquement

Pour plus d'informations sur les métriques disponibles et sur la façon de configurer l' CloudWatch agent sur Amazon EMR, consultez Configuration de l' CloudWatch agent pour Amazon EMR.

Le tableau suivant répertorie la version AmazonCloudWatchAgent incluse dans la dernière version de la série Amazon EMR 7.x, ainsi que les composants avec lesquels Amazon EMR est installé. AmazonCloudWatchAgent

Pour la version des composants installés AmazonCloudWatchAgent dans cette version, voir Versions des composants de la version 7.1.0.

AmazonCloudWatchAgent informations de version pour emr-7.1.0
Étiquette de version Amazon EMR AmazonCloudWatchAgent Version Composants installés avec AmazonCloudWatchAgent

emr-7.1.0

AmazonCloudWatchAgent 1.300032.2

adot-java-agent, emrfs, emr-amazon-cloudwatch-agent, emr-ddb, emr-goodies, emr-kinesis, emr-s3-dist-cp, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-httpfs-server, hadoop-kms-server, hadoop-mapred, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server