Schéma des statistiques (fichier statistics.json) - Amazon SageMaker

Schéma des statistiques (fichier statistics.json)

Le schéma défini dans le fichier statistics.json spécifie les paramètres statistiques à calculer pour la référence et les données capturées. Il configure également le compartiment qui sera utilisé par KLL, un croquis de quantiles très compact avec un schéma de compactage paresseux.

{ "version": 0, # dataset level stats "dataset": { "item_count": number }, # feature level stats "features": [ { "name": "feature-name", "inferred_type": "Fractional" | "Integral", "numerical_statistics": { "common": { "num_present": number, "num_missing": number }, "mean": number, "sum": number, "std_dev": number, "min": number, "max": number, "distribution": { "kll": { "buckets": [ { "lower_bound": number, "upper_bound": number, "count": number } ], "sketch": { "parameters": { "c": number, "k": number }, "data": [ [ num, num, num, num ], [ num, num ][ num, num ] ] }#sketch }#KLL }#distribution }#num_stats }, { "name": "feature-name", "inferred_type": "String", "string_statistics": { "common": { "num_present": number, "num_missing": number }, "distinct_count": number, "distribution": { "categorical": { "buckets": [ { "value": "string", "count": number } ] } } }, #provision for custom stats } ] }
Notes
  • Les métriques spécifiées sont reconnues par SageMaker dans les modifications de visualisation ultérieures. Le conteneur peut émettre davantage de métriques si nécessaire.

  • Le croquis KLL est le croquis reconnu. Les conteneurs personnalisés peuvent écrire leur propre représentation, mais ils ne seront pas reconnus par SageMaker dans les visualisations.

  • Par défaut, la distribution est matérialisée dans dix compartiments. Vous ne pouvez pas modifier cette valeur.