Exportation des données des journaux vers Amazon S3 - Amazon CloudWatch Logs

Exportation des données des journaux vers Amazon S3

Vous pouvez exporter les données des journaux de vos groupes de journaux vers un compartiment Amazon S3 et utilisez ces données pour procéder à une analyse et un traitement personnalisés, ou pour les charger dans d'autres systèmes.

L'exportation de données de journal vers des compartiments Amazon S3 qui sont chiffrés par AWS KMS n'est pas prise en charge.

Pour lancer le processus d'exportation, vous devez créer un compartiment S3 pour stocker les données de journal exportées. Vous pouvez stocker les fichiers exportés dans votre compartiment Amazon S3 et définir des règles du cycle de vie Amazon S3 pour archiver ou supprimer automatiquement les fichiers exportés.

L'exportation vers les compartiments S3 chiffrés avec AES-256 est prise en charge. L'exportation vers les compartiments S3 chiffrés avec SSE-KMS n'est pas prise en charge. Pour plus d'informations, consultez Comment activer le chiffrement par défaut pour un compartiment S3 ?.

Vous pouvez exporter les journaux de plusieurs groupes de journaux ou de plusieurs plages de temps dans le même compartiment S3. Pour séparer les données de journal pour chaque tâche d'exportation, vous pouvez spécifier un préfixe qui sera utilisé comme préfixe de clé Amazon S3 pour tous les objets exportés.

Un délai de 12 h peut s'avérer nécessaire pour que les données des journaux deviennent disponibles pour l'exportation. Pour procéder à une analyse quasiment en temps réel des données des journaux, consultez plutôt Analyse des données de journaux avec CloudWatch Logs Insights ou Traitement en temps réel des données du journal avec les abonnements.

Note

À partir du 15 février 2019, la fonctionnalité d'exportation vers Amazon S3 nécessitera des mandataires pour disposer d'un accès s3:PutObject au compartiment de destination.

Concepts

Avant de commencer, familiarisez-vous avec les concepts d'exportation suivants :

log group name

Nom du groupe de journaux associé à une tâche d'exportation. Les données dans ce groupe de journaux seront exportées dans le compartiment Amazon S3 spécifié.

de (horodatage)

Horodatage requis (en nombre de millisecondes) depuis le 1er janvier 1970 00:00:00 UTC. Tous les événements de journaux du groupe de journaux consignés après cette heure seront exportés.

à (horodatage)

Horodatage requis (en nombre de millisecondes) depuis le 1er janvier 1970 00:00:00 UTC. Tous les événements de journal du groupe de journaux consignés avant cette heure seront exportés.

compartiment de destination

Nom du compartiment Amazon S3 associé à une tâche d'exportation. Ce compartiment est utilisé pour exporter les données de journaux du groupe de journaux spécifié.

préfixe de destination

Attribut facultatif utilisé comme préfixe de clé S3 pour tous les objets exportés. Cela permet de créer une organisation de type dossier dans votre compartiment.