Configuration des paramètres de tâche - AWS DataSync

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Configuration des paramètres de tâche

Une fois que vous avez créé unAWS DataSync agent et configuré les emplacements source et de destination, vous pouvez configurer les paramètres pour une nouvelle tâche. Une tâche est un ensemble de deux emplacements (source et destination) et un ensemble d'options que vous utilisez pour contrôler le comportement de la tâche.

Vous configurez les paramètres des tâches lors de la création d'une nouvelle tâche dans leAWS DataSyncconsole Vous pouvez également modifier les paramètres des tâches en ouvrant laAWS DataSyncConsole àhttps://console.aws.amazon.com/datasync/, en sélectionnant la tâche à modifier et en choisissantModifier.

Dans la pageConfiguration des paramètresPage, pour.Nom de la tâche -optionnel, entrez un nom pour votre tâche. Nom de la tâcheest une étape facultative.

LeOptionscontient les options de configuration pour exécuter votre tâche. Les sections suivantes fournissent plus de détails sur ces options.

Options de vérification des données

Comme DataSync transfère des données, effectue toujours des vérifications de l'intégrité des données pendant le transfert. Vous pouvez activer une vérification supplémentaire pour comparer la source et la destination à la fin d'un transfert. Cette vérification supplémentaire permet de vérifier l'ensemble de données dans son intégralité ou uniquement les fichiers qui ont été transférés dans le cadre de l'exécution de la tâche. Pour les cas d'utilisation les plus courants, nous vous recommandons de vérifier uniquement les fichiers transférés.

Les options de vérification des données de tâche indiquent comment vérifier les données transférées par la tâche.

Les options de vérification des données sont les suivantes :

  • Vérifiez uniquement les données transférées (recommandé)— Cette option calcule la somme de contrôle des fichiers transférés et des métadonnées sur la source. Elle compare ensuite ce total de contrôle au total de contrôle calculé au niveau de ces fichiers à la destination à la fin du transfert. Nous recommandons cette option lors du transfert vers les classes de stockage S3 Glacier Flexible Retrieval ou S3 Glacier Deep Archive. Pour plus d'informations, consultez Considérations relatives à l'utilisation des classes de stockage Amazon S3 dans DataSync.

  • Vérification de l'ensemble des données de la destination— Cette option effectue une analyse à la fin du transfert de l'ensemble de la source et de la destination pour vérifier que la source et la destination sont entièrement synchronisées. Vous ne pouvez pas utiliser cette option lors du transfert vers les classes de stockage S3 Glacier Flexible Retrieval ou S3 Glacier Deep Archive. Pour plus d'informations, consultez Considérations relatives à l'utilisation des classes de stockage Amazon S3 dans DataSync.

  • Contrôle de l'intégrité pendant le transfert— Cette option n'effectue pas de vérification supplémentaire à la fin du transfert. Toutes les transmissions de données font toujours l'objet d'un contrôle d'intégrité grâce à la vérification du total de contrôle pendant le transfert.

Options liées à la propriété et aux autorisations

DataSync préserve les métadonnées entre les systèmes de stockage ayant des structures de métadonnées similaires. Différentes options sont utilisées pour configurer cette conservation des métadonnées en fonction du type de système de stockage.

Lors de la copie de données entre Amazon S3 et Network File System (NFS), Hadoop Distributed File System (HDFS), Amazon EFS, Amazon FSx for Lustre, Amazon FSx pour OpenZFS ou Amazon FSx pour NetApp ONTAP (via NFS), choisissez l'une des options suivantes (le cas échéant) :

  • ChoisissezPropriété de la copiepour disposer DataSync copie la propriété du fichier et du dossier POSIX, telle que l'ID de groupe des propriétaires du fichier et l'ID d'utilisateur du propriétaire du fichier.

  • ChoisissezAutorisations de copiepour disposer DataSync copie les autorisations POSIX pour les fichiers et dossiers de la source vers la destination.

Lors de la copie entre Server Message Block (SMB) et FSx for Windows File Server ou FSx pour ONTAP (à l'aide de SMB), entre FSx pour les systèmes de fichiers Windows File Server ou entre FSx pour les systèmes de fichiers ONTAP utilisant SMB, choisissez l'une des options suivantes (le cas échéant) :

  • ChoisissezPropriété de copie, DACL et SACLpour disposer DataSync copiez ce qui suit :

    • Propriétaire de l'objet.

    • Listes d'accès discrétionnaire NTFS (DACL), qui déterminent s'il faut accorder l'accès à un objet.

    • Listes de contrôle d'accès système NTFS (SACL), qui sont utilisées par les administrateurs pour consigner les tentatives d'accès à un objet sécurisé.

  • ChoisissezPropriété de copie et DACLpour DataSync pour copier les éléments suivants :

    • Propriétaire de l'objet.

    • Listes d'accès discrétionnaire NTFS (DACL), qui déterminent s'il faut accorder l'accès à un objet.

    DataSync ne copie pas les listes de contrôle d'accès système (SACL) NTFS lorsque vous choisissez cette option.

  • ChoisissezNe copiez pas la propriété ou les ACLsi tu veux DataSync de ne copier aucune donnée de propriété ou d'autorisation. Les objets qui DataSync les écritures sur votre emplacement de destination appartiennent à l'utilisateur dont les informations d'identification sont fournies pour DataSync pour accéder à l'emplacement de destination. Les autorisations de l'objet de destination sont déterminées en fonction des autorisations configurées sur le serveur de destination.

Pour plus d'informations sur la conservation des métadonnées avec DataSync, Voir,Comment DataSync gère les métadonnées et les fichiers spéciaux.

Options de gestion et de métadonnées de fichiers

Vous pouvez configurer comme vous voulez DataSync pour gérer certains aspects de vos fichiers et objets lors d'un transfert :

  • ChoisissezCopie d'horodatagepour disposer DataSync copie les métadonnées d'horodatage depuis la source vers la destination.

  • ChoisissezConserver les fichiers suppriméspour disposer DataSync conserve des fichiers dans la destination qui n'existent pas dans le système de fichiers source.

    Si votre tâche supprime des objets de votre compartiment Amazon S3, des frais de stockage minimum peuvent vous être facturés pour certaines classes de stockage. Pour plus d'informations, consultez Considérations relatives à l'utilisation des classes de stockage Amazon S3 dans DataSync.

  • ChoisissezÉcraser les fichierssi vous souhaitez que les fichiers de la destination soient remplacés par des fichiers de la source lorsque les données ou métadonnées sources sont différentes.

    Si vous ne choisissez pas cette option, le fichier de destination n'est pas remplacé par le fichier source, même si le fichier de destination diffère du fichier source.

    Si votre tâche remplace des objets, des frais supplémentaires peuvent vous être facturés pour certaines classes de stockage (par exemple, pour la récupération ou la suppression anticipée). Pour plus d'informations, consultez Considérations relatives à l'utilisation des classes de stockage Amazon S3 dans DataSync.

  • ChoisissezCopier les balises d'objetsi vous souhaitez conserver les balises associées à vos objets lors du transfert entre systèmes de stockage d'objets.

Options de bande passante

Vous pouvez configurer une limite de bande passante pour DataSync Tâches. Les options de limite de bande passante sont les suivantes :

  • ChoisissezUtilisation disponiblepour disposer DataSync utiliser toute la bande passante réseau disponible pour le transfert.

  • ChoisissezDéfinition de la limite de bande passante (Mio/s)pour limiter la bande passante maximale que vous souhaitez DataSync à utiliser pour cette tâche.

    Vous pouvez modifier les limites de bande passante pour l'exécution d'une tâche en cours. Pour plus d'informations, consultez Ajustement de la limitation de bande passante pour l'exécution d'une tâche.

Options de filtrage

Lorsque vous transférez des données depuis votre emplacement source vers votre emplacement de destination, vous pouvez appliquer des filtres pour transférer uniquement un sous-ensemble des fichiers figurant dans votre emplacement source. Les options de configuration pour le filtrage sont les suivantes.

  • DansConfiguration du transfert des données, utilisez la sectionModèles d'exclusionpour spécifier les fichiers, dossiers et objets à exclure de votre transfert. Pour inclure des fichiers, dossiers et objets spécifiques dans votre transfert, sélectionnezFichiers et dossiers spécifiquespuis utilisez leInclure les modèlesSection.

  • Pour ajouter des modèles supplémentaires à vos filtres, choisissezAjouter un. Pour plus d'informations sur le filtrage et la syntaxe pour créer des modèles, veuillez consulter Filtrage des données transférées parAWS DataSync.

  • Vous pouvez modifier les modèles de filtre lorsque vous modifiez une tâche. Vous pouvez également spécifier des modèles différents chaque fois que vous exécutez une tâche.

Options de planification et de mise en file d'attente

Vous pouvez planifier une DataSync tâche à exécuter à un moment précis. Si vous utilisez un seul agent pour exécuter plusieurs tâches, vous pouvez mettre ces tâches en file d'attente. Les options de configuration pour la planification sont les suivantes :

  • DansCalendrier (facultatif), configurez la tâche pour qu'elle s'exécute selon la planification que vous spécifiez, avec un intervalle minimum d'une heure.

  • Pour Fréquence, configurez la fréquence à laquelle vous souhaitez exécuter la tâche. Pour de plus amples informations sur les options de configuration de la fréquence, veuillez consulter Configuration d'une planification de tâche.

Si vous utilisez un seul agent pour exécuter plusieurs tâches, choisissezFILE d'ATTENTEpour que les tâches s'exécutent en série (premier entré, premier sorti). Pour plus d'informations, consultez Exécutions de mise en file d'attente de tâche.

Balises et options de journalisation

Vous pouvez ajouter une ou plusieurs balises à un DataSync Tâches. Une balise est une paire nom-valeur qui est associée à la tâche. Vous pouvez également sélectionner les options de journalisation pour DataSync publier des journaux pour des fichiers ou des objets individuels dans CloudWatch groupe de journaux que vous spécifiez. Les balises et les options de journalisation sont les suivantes :

  • DansÉtiquettessection, entrezCléetValeurpour étiqueter votre tâche. Une balise est une paire clé-valeur qui vous aide à gérer, filtrer et rechercher vos tâches. Nous vous recommandons de créer une étiquette de nom pour votre tâche.

  • ChoisissezJournalisation des taskspour disposer DataSync publier des journaux pour des fichiers ou des objets individuels dans CloudWatch groupe de journaux que vous spécifiez.

    Pour télécharger des journaux dans votre CloudWatch groupe de journaux, DataSync nécessite une stratégie de ressources qui accorde les autorisations suffisantes. Si vous ne disposez pas d'une stratégie dans la région actuelle, une case à cocher s'affiche afin que vous puissiez créer automatiquement la stratégie requise. Pour voir un exemple d'une telle stratégie, consultez Autoriser DataSync à télécharger des journaux vers des groupes de journaux Amazon CloudWatch Logs.

    Pour plus d'informations sur l'utilisation des groupes et des flux de journaux, consultezGestion des groupes de journaux et des flux de journauxdans leAmazon CloudWatch Guide de l'utilisateur de.

    Utilisation de l'Niveau de journalisationpour définir le niveau de détail qui est consigné dans CloudWatch Bûches. Les options de niveau de journal disponibles sont les suivantes :

    • ChoisissezEnregistrer les informations de base telles que les erreurs de transfertpour publier uniquement des informations de base (telles que des erreurs de transfert) dans CloudWatch.

    • ChoisissezConsigner tous les objets, fichiers et dossiers transféréspour publier des enregistrements de journaux CloudWatch Journaux pour tous les fichiers ou objets copiés par la tâche et les contrôles d'intégrité.

    • ChoisissezNe pas envoyer de journaux à CloudWatchsi tu ne veux pas DataSync journaux à publier CloudWatch.

Choisissez Suivant pour ouvrir la page Vérification.