Soumettre le travail à un cluster - Amazon EMR

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Soumettre le travail à un cluster

Cette section décrit les méthodes permettant de soumettre du travail à un cluster Amazon EMR. Vous pouvez soumettre du travail à un cluster en ajoutant des étapes ou en soumettant de façon interactive des travaux Hadoop au nœud maître. Le nombre maximum autorisé d'étapes en attente (PENDING) et (RUNNING) pour un cluster s'élève à Vous pouvez soumettre des travaux de façon interactive au nœud maître même si 256 étapes actives sont en cours d'exécution sur le cluster. Vous pouvez soumettre un nombre illimité d'étapes pendant la durée de vie d'un cluster de longue durée, mais seules 256 étapes peuvent présenter l'état actif (ACTIVE) ou en attente (PENDING) à un moment donné.

Avec Amazon EMR 4.8.0 et versions ultérieures, à l'exception de la version 5.0.0, vous pouvez annuler les étapes qui sont en attente à l'aide de laAWS Management Console, leAWS CLI, ou l'API Amazon EMR.

Avec Amazon EMR versions 5.28.0 et ultérieures, vous pouvez annuler les étapes en attente et en cours d'exécution. Vous pouvez également choisir d'exécuter plusieurs étapes en parallèle pour améliorer l'utilisation du cluster et faire des économies.

Note

Pour de meilleures performances, nous vous recommandons de stocker des actions d'amorçage personnalisées, des scripts et d'autres fichiers que vous souhaitez utiliser avec Amazon EMR dans un compartiment Amazon S3 qui se trouve dans le mêmeRégion AWSen tant que cluster.