Ispeziona i report per rilevare eventuali deviazioni del bias dei dati

Se non riesci a controllare i risultati del monitoraggio nei report generati in SageMaker Studio, puoi stamparli come segue:

schedule_desc = model_bias_monitor.describe_schedule()
execution_summary = schedule_desc.get("LastMonitoringExecutionSummary")
if execution_summary and execution_summary["MonitoringExecutionStatus"] in ["Completed", "CompletedWithViolations"]:
    last_model_bias_monitor_execution = model_bias_monitor.list_executions()[-1]
    last_model_bias_monitor_execution_report_uri = last_model_bias_monitor_execution.output.destination
    print(f'Report URI: {last_model_bias_monitor_execution_report_uri}')
    last_model_bias_monitor_execution_report_files = sorted(S3Downloader.list(last_model_bias_monitor_execution_report_uri))
    print("Found Report Files:")
    print("\n ".join(last_model_bias_monitor_execution_report_files))
else:
    last_model_bias_monitor_execution = None
    print("====STOP==== \n No completed executions to inspect further. Please wait till an execution completes or investigate previously reported failures.")

Se ci sono violazioni rispetto alla linea di base, sono elencate qui:

if last_model_bias_monitor_execution:
    model_bias_violations = last_model_bias_monitor_execution.constraint_violations()
    if model_bias_violations:
        print(model_bias_violations.body_dict)

Se il modello è distribuito su un endpoint in tempo reale, è possibile visualizzare in SageMaker Studio le visualizzazioni dei risultati e delle CloudWatch metriche dell'analisi scegliendo la scheda Endpoints e facendo doppio clic sull'endpoint.