Effectuer une migration de données volumineuse avec AWS DataSync

Les migrations de données à grande échelle peuvent impliquer le transfert de volumes importants de données comprenant des millions de fichiers ou d'objets de différents formats. AWS DataSync simplifie ces transferts complexes en gérant la planification, la surveillance, le chiffrement et la vérification des données.

Qu'est-ce qu'une migration de données volumineuse ?

Une migration de données de grande envergure implique généralement le transfert de téraoctets ou plus de données réparties entre différentes sources vers un nouvel environnement de stockage de destination (dans ce cas, AWS). Ces migrations nécessitent une planification et une coordination minutieuses au sein de votre organisation afin de transférer les données avec succès tout en minimisant les interruptions d'activité.

DataSync peut simplifier ces migrations, qui sont généralement de nature complexe. Parmi les avantages de l'utilisation DataSync pour votre migration, citons :

• Gestion automatisée des processus de transfert de données et de l'infrastructure requise pour des transferts de données performants et sécurisés.

• End-to-end sécurité, y compris le chiffrement et la validation de l'intégrité des données, pour garantir que vos données arrivent en toute sécurité, intactes et prêtes à être utilisées.

• Un protocole réseau spécialement conçu et une architecture parallèle et multithread pour accélérer les migrations.

Les étapes clés d'une migration de données volumineuses

Vous pouvez généralement décomposer une migration de grande envergure selon les étapes suivantes :

• (Étape 1) Planification de la migration des données - À ce stade, vous essayez de comprendre pourquoi vous effectuez la migration et sur quel type de données vous travaillez. Les activités de planification incluent :

  • Comprendre pourquoi vous souhaitez effectuer une migration

  • Constituer une équipe pour vous aider dans tous les aspects de la migration.

  • Identification des emplacements, des formats et des modèles d'utilisation des données

  • Évaluation des ressources matérielles disponibles et des exigences réseau (si vous migrez depuis un centre de données sur site)

  • Exécution de tests de preuve de concept (POC) DataSync pour estimer les délais de migration, planifier les périodes de transition et avoir une idée de la manière dont vous devez configurer DataSync

• (Étape 2) Mise en œuvre de votre migration de données volumineuses - À ce stade, vous validez votre plan et commencez la migration. Les activités de mise en œuvre incluent :

  • Validation du plan de migration

  • Exécution de découpes progressives qui incluent la surveillance et la vérification de vos transferts de données comme prévu

  • Optimisation et ajustement selon les besoins entre chaque découpage

  • Nettoyer les ressources inutilisées une fois que vous avez terminé

Ressources supplémentaires

AWS Prescriptive Guidance propose les ressources suivantes qui peuvent vous aider à planifier et à mettre en œuvre une migration de grande envergure. Utilisez ce guide pour comprendre comment cela DataSync peut fonctionner dans le contexte de processus et d'activités de migration courants.

• Migrations importantes vers le AWS cloud

• Stratégie et meilleures pratiques pour les AWS grandes migrations

• Migrer des systèmes de fichiers partagés dans le cadre d'une migration de AWS grande envergure — Cette ressource inclut un classeur SFS-Discovery-Workbook que vous pouvez télécharger et utiliser pour planifier une migration au niveau du partage de fichiers.