Statistiques d'utilisation d'Amazon SageMaker Debugger - Amazon SageMaker

Statistiques d'utilisation d'Amazon SageMaker Debugger

Tenez compte des éléments suivants lorsque vous utilisez des rapports générés automatiquement par Amazon SageMaker Debugger.

Utilisation du rapport de profilage de Debugger

Pour toutes les tâches d'entraînement SageMaker, Amazon SageMaker Debugger exécute la règle ProfilerReport et génère automatiquement un rapport Rapport de profilage SageMaker Debugger. La règle ProfilerReport fournit un fichier de bloc-notes Jupyter (profiler-report.ipynb) qui génère un fichier HTML correspondant (profiler-report.html).

Debugger collecte les statistiques d'utilisation des rapports de profilage en incluant du code dans le bloc-notes Jupyter qui collecte les données ProfilerReport uniques de l'ARN de la tâche de traitement de la règle si l'utilisateur ouvre le fichier final profiler-report.html.

Debugger collecte uniquement des informations indiquant si un utilisateur ouvre le rapport HTML final. Il NE COLLECTE PAS des informations provenant des tâches d'entraînement, des données d'entraînement, des scripts d'entraînement, des tâches de traitement, des journaux ou du contenu du rapport de profilage lui-même.

Vous pouvez désactiver la collecte des statistiques d'utilisation à l'aide de l'une des options suivantes.

(Recommandé) Option 1 : Désactiver la collecte avant d'exécuter une tâche d'entraînement

Pour désactiver la collecte, vous devez ajouter la règle Debugger ProfilerReport suivante à votre requête de tâche d'entraînement.

SageMaker Python SDK
estimator=sagemaker.estimator.Estimator( ... rules=ProfilerRule.sagemaker( base_config=rule_configs.ProfilerReport() rule_parameters={"opt_out_telemetry": "True"} ) )
AWS CLI
"ProfilerRuleConfigurations": [ { "RuleConfigurationName": "ProfilerReport-1234567890", "RuleEvaluatorImage": "895741380848.dkr.ecr.us-west-2.amazonaws.com/sagemaker-debugger-rules:latest", "RuleParameters": { "rule_to_invoke": "ProfilerReport", "opt_out_telemetry": "True" } } ]
AWS SDK for Python (Boto3)
ProfilerRuleConfigurations=[ { 'RuleConfigurationName': 'ProfilerReport-1234567890', 'RuleEvaluatorImage': '895741380848.dkr.ecr.us-west-2.amazonaws.com/sagemaker-debugger-rules:latest', 'RuleParameters': { 'rule_to_invoke': 'ProfilerReport', 'opt_out_telemetry': 'True' } } ]

Option 2 : Désactiver la collecte une fois la tâche d'entraînement terminée

Pour désactiver la collecte une fois l'entraînement terminé, vous devez modifier le fichier profiler-report.ipynb.

Note

Les rapports HTML générés automatiquement avant que vous ajoutiez l'option 1 à votre requête de tâche d'entraînement contiennent toujours les statistiques d'utilisation, même une fois que vous avez désactivé la collecte à l'aide de l'option 2.

  1. Suivez les instructions sur le téléchargement des fichiers de rapport de profilage Debugger sur la page Télécharger un rapport de profilage Debugger.

  2. Dans le répertoire /ProfilerReport-1234567890/profiler-output, ouvrez profiler-report.ipynb.

  3. Ajoutez opt_out=True à la fonction setup_profiler_report() dans la cinquième cellule de code, comme illustré dans l'exemple de code suivant :

    setup_profiler_report(processing_job_arn, opt_out=True)
  4. Exécutez la cellule de code pour terminer la désactivation.