Statistiques d'utilisation SageMaker d'Amazon Debugger

Tenez compte des points suivants lorsque vous utilisez des rapports générés automatiquement par Amazon SageMaker Debugger.

Utilisation du rapport de profilage de Debugger

Pour toutes les tâches de SageMaker formation, Amazon SageMaker Debugger exécute la ProfilerReport règle et génère automatiquement un. SageMaker Rapport de profilage du débogueur La règle ProfilerReport fournit un fichier de bloc-notes Jupyter (profiler-report.ipynb) qui génère un fichier HTML correspondant (profiler-report.html).

Debugger collecte les statistiques d'utilisation des rapports de profilage en incluant du code dans le bloc-notes Jupyter qui collecte les données ProfilerReport uniques de l'ARN de la tâche de traitement de la règle si l'utilisateur ouvre le fichier final profiler-report.html.

Debugger collecte uniquement des informations indiquant si un utilisateur ouvre le rapport HTML final. Il NE COLLECTE PAS des informations provenant des tâches d'entraînement, des données d'entraînement, des scripts d'entraînement, des tâches de traitement, des journaux ou du contenu du rapport de profilage lui-même.

Vous pouvez désactiver la collecte des statistiques d'utilisation à l'aide de l'une des options suivantes.

(Recommandé) Option 1 : Désactiver la collecte avant d'exécuter une tâche d'entraînement

Pour désactiver la collecte, vous devez ajouter la règle Debugger ProfilerReport suivante à votre requête de tâche d'entraînement.

SageMaker Python SDK

estimator=sagemaker.estimator.Estimator(
    ...

    rules=ProfilerRule.sagemaker(
        base_config=rule_configs.ProfilerReport()
        rule_parameters={"opt_out_telemetry": "True"}
    )
)

AWS CLI

"ProfilerRuleConfigurations": [ 
    { 
        "RuleConfigurationName": "ProfilerReport-1234567890",
        "RuleEvaluatorImage": "895741380848.dkr.ecr.us-west-2.amazonaws.com/sagemaker-debugger-rules:latest",
        "RuleParameters": {
            "rule_to_invoke": "ProfilerReport", 
            "opt_out_telemetry": "True"
        }
    }
]

AWS SDK for Python (Boto3)

ProfilerRuleConfigurations=[ 
    {
        'RuleConfigurationName': 'ProfilerReport-1234567890',
        'RuleEvaluatorImage': '895741380848.dkr.ecr.us-west-2.amazonaws.com/sagemaker-debugger-rules:latest',
        'RuleParameters': {
            'rule_to_invoke': 'ProfilerReport',
            'opt_out_telemetry': 'True'
        }
    }
]

Option 2 : Désactiver la collecte une fois la tâche d'entraînement terminée

Pour désactiver la collecte une fois l'entraînement terminé, vous devez modifier le fichier profiler-report.ipynb.

Note

Les rapports HTML générés automatiquement avant que vous ajoutiez l'option 1 à votre requête de tâche d'entraînement contiennent toujours les statistiques d'utilisation, même une fois que vous avez désactivé la collecte à l'aide de l'option 2.

1. Suivez les instructions sur le téléchargement des fichiers de rapport de profilage Debugger sur la page Téléchargez le rapport de SageMaker profilage du Debugger.

2. Dans le répertoire /ProfilerReport-1234567890/profiler-output, ouvrez profiler-report.ipynb.

3. Ajoutez opt_out=True à la fonction setup_profiler_report() dans la cinquième cellule de code, comme illustré dans l'exemple de code suivant :

   setup_profiler_report(processing_job_arn, opt_out=True)

4. Exécutez la cellule de code pour terminer la désactivation.