Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
SUS05-BP04 Optimiser votre utilisation des accélérateurs de calcul matériels
Optimisez votre utilisation des instances de calcul accéléré pour réduire les exigences d’infrastructure physique de votre charge de travail.
Anti-modèles courants :
-
Vous ne surveillez pas l’utilisation du GPU.
-
Vous utilisez une instance à usage général pour la charge de travail alors qu’une instance spécialement conçue peut fournir des performances supérieures, des coûts plus faibles et de meilleures performances par watt.
-
Vous utilisez des accélérateurs de calcul matériels pour les tâches où ils sont plus efficaces en utilisant des alternatives basées sur l’UC.
Avantages liés au respect de cette bonne pratique : en optimisant l’utilisation des accélérateurs matériels, vous pouvez réduire les exigences de votre charge de travail en matière d’infrastructure physique.
Niveau de risque encouru si cette bonne pratique n’est pas respectée : moyen
Directives d’implémentation
Si vous avez besoin d’une capacité de traitement élevée, vous pouvez bénéficier de l’utilisation d’instances de calcul accéléré, qui vous donnent accès à des accélérateurs de calcul matériels tels que des unités de traitement graphique (GPU) et des matrices de portes programmables sur site (FPGA). Ces accélérateurs matériels exécutent certaines fonctions comme le traitement graphique ou la correspondance de modèles de données plus efficacement que les alternatives basées sur l’UC. De nombreuses charges de travail accélérées, telles que le rendu, le transcodage et le machine learning, sont très variables en matière d’utilisation des ressources. Exécutez ce matériel uniquement pendant le temps nécessaire et mettez-le hors service grâce à l’automatisation lorsque vous n’en avez plus besoin afin de limiter les ressources consommées.
Étapes d’implémentation
-
Explorer les accélérateurs de calcul : identifiez les instances de calcul accéléré qui peuvent répondre à vos besoins.
-
Utiliser du matériel conçu spécialement : pour les charges de travail de machine learning, tirez parti d’un matériel conçu spécialement pour votre charge de travail, tel qu’AWS Trainum
, AWS Inferentia et Amazon EC2 DL1 . AWS Les instances Inferentia telles que les instances Inf2 offrent des performances par watt jusqu’à 50 % supérieures à celles des instances comparables . -
Surveiller les métriques d’utilisation : collectez des métriques d’utilisation pour vos instances de calcul accéléré. Par exemple, vous pouvez utiliser l’agent CloudWatch pour collecter des métriques telles que
utilization_gpu
etutilization_memory
pour vos GPU, comme indiqué dans Collecter les métriques des GPU NVIDIA avec Amazon CloudWatch. -
Redimensionner : optimisez le code, le fonctionnement du réseau et les paramètres des accélérateurs matériels pour veiller à ce que le matériel sous-jacent soit pleinement utilisé.
-
Maintenir à jour : utilisez les derniers pilotes GPU et bibliothèques à hautes performances.
-
Libérer les instances non requises : utilisez l’automatisation pour libérer les instances GPU lorsqu’elles ne sont pas utilisées.
Ressources
Documents connexes :
Vidéos connexes :
-
AWS re:Invent 2021 - How to select Amazon EC2 GPU instances for deep learning
-
AWS Online Tech Talks - Deploying Cost-Effective Deep Learning Inference
-
AWS re:Invent 2022 - [NEW LAUNCH!] Introducing AWS Inferentia2-based Amazon EC2 Inf2 instances
-
AWS re:Invent 2022 - Accelerate deep learning and innovate faster with AWS Trainium
-
AWS re:Invent 2022 - Deep learning on AWS with NVIDIA: From training to deployment