Migrieren vorhandener Dateien zu FSx for Windows File Server mit AWS DataSync

Wir empfehlen AWS DataSync die Verwendung zur Übertragung von Daten zwischen FSx for Windows File Server Server-Dateisystemen. DataSync ist ein Datenübertragungsdienst, der das Verschieben und Replizieren von Daten zwischen lokalen Speichersystemen und anderen AWS Speicherdiensten über das Internet vereinfacht, automatisiert und beschleunigt. AWS Direct Connect DataSync kann Ihre Dateisystemdaten und Metadaten wie Eigentum, Zeitstempel und Zugriffsberechtigungen übertragen.

DataSync unterstützt das Kopieren von NTFS-Zugriffskontrolllisten (ACLs) und unterstützt auch das Kopieren von Dateiüberwachungsinformationen, auch bekannt als NTFS-Systemzugriffskontrolllisten (SACLs), die von Administratoren verwendet werden, um die Auditprotokollierung von Benutzerzugriffsversuchen zu kontrollieren.

Sie können DataSync es verwenden, um Dateien zwischen zwei FSx for Windows File Server Server-Dateisystemen zu übertragen und auch Daten in ein Dateisystem in einem anderen AWS-Region AWS OR-Konto zu verschieben. Sie können Dateisysteme DataSync mit FSx for Windows File Server für andere Aufgaben verwenden. Sie können beispielsweise einmalige Datenmigrationen durchführen, regelmäßig Daten für verteilte Workloads aufnehmen und die Replikation für Datenschutz und Wiederherstellung planen.

In AWS DataSync ist ein Speicherort für FSx for Windows File Server ein Endpunkt für einen FSx for Windows File Server. Sie können Dateien zwischen einem Speicherort für FSx for Windows File Server und einem Speicherort für andere Dateisysteme übertragen. Weitere Informationen finden Sie im AWS DataSync Benutzerhandbuch unter Arbeiten mit Speicherorten.

DataSync greift über das Server Message Block (SMB) -Protokoll auf Ihren FSx for Windows File Server zu. Es authentifiziert sich mit dem Benutzernamen und dem Passwort, die Sie in der Konsole oder konfigurieren. AWS DataSync AWS CLI

Voraussetzungen

Um Daten in Ihr Amazon FSx for Windows File Server-Setup zu migrieren, benötigen Sie einen Server und ein Netzwerk, die die DataSync Anforderungen erfüllen. Weitere Informationen finden Sie unter Anforderungen für DataSync im AWS DataSync Benutzerhandbuch.

Wenn Sie eine große Datenmigration oder eine Migration mit vielen kleinen Dateien durchführen, empfehlen wir die Verwendung eines Amazon FSx-Dateisystems mit SSD-Speichertyp. Dies liegt daran, dass DataSync Aufgaben das Scannen von Dateimetadaten beinhalten, wodurch die Festplatten-IOPS-Grenzwerte von HDD-Dateisystemen ausgeschöpft werden können, was zu lang andauernden Migrationen und einer Beeinträchtigung der Dateisystemleistung führen kann. Weitere Informationen finden Sie unter: Bewährte Methoden für die Migration von vorhandenem Dateispeicher zu FSx for Windows File Server.

Wenn Ihr Datensatz hauptsächlich aus kleinen Dateien besteht, die Anzahl der Dateien in die Millionen geht oder wenn Sie mehr Netzwerkbandbreite zur Verfügung haben, als eine einzelne DataSync Aufgabe verbraucht, können Sie Ihre Datenübertragungen auch mit einer Scale-Out-Architektur beschleunigen. Weitere Informationen finden Sie unter: So beschleunigen Sie Ihre Datenübertragungen mit AWS DataSync Scale-Out-Architekturen.

Sie können die Festplatten-I/O-Auslastung Ihres Dateisystems mithilfe von FSx-Leistungsmetriken überwachen.

Grundlegende Schritte für die Migration von Dateien mit DataSync

Gehen Sie wie folgt vor, um Dateien von einem Quellverzeichnis an ein Zielverzeichnis mit DataSync zu übertragen:

• Laden Sie einen Agent herunter, stellen Sie ihn in Ihrer Umgebung bereit, und aktivieren Sie ihn.

• Erstellen und konfigurieren Sie einen Quell- und Zielspeicherort.

• Erstellen und konfigurieren Sie eine Aufgabe.

• Führen Sie die Aufgabe aus, um Dateien von der Quelle zum Ziel zu übertragen.

Informationen zum Übertragen von Dateien von einem vorhandenen lokalen Dateisystem auf Ihren FSx for Windows File Server finden Sie unter Datenübertragung zwischen selbstverwaltetem Speicher und AWS, Erstellen eines Speicherorts für SMB und Erstellen eines Speicherorts für Amazon FSx for Windows File Server im Benutzerhandbuch.AWS DataSync

Informationen zum Übertragen von Dateien von einem vorhandenen In-Cloud-Dateisystem auf Ihren FSx for Windows File Server finden Sie unter Deploy your agent as Amazon EC2 EC2-Instance im AWS DataSync Benutzerhandbuch.

Migration zwischen zwei Amazon FSx-Dateisystemen

Sie können DataSync es verwenden, um Daten zwischen zwei Amazon FSx-Dateisystemen zu migrieren. Dies kann hilfreich sein, wenn Sie Ihre Arbeitslast von einem vorhandenen Dateisystem auf ein neues Dateisystem mit einer anderen Konfiguration verschieben müssen, z. B. von einer Single-AZ- auf eine Multi-AZ-Konfiguration. Sie können es auch verwenden DataSync , um Ihre Arbeitslast auf zwei Dateisysteme aufzuteilen.

Hier ist ein Beispiel für einen Überblick über den Migrationsprozess:

1. Erstellen Sie DataSync Speicherorte für die Quell- und Zieldateisysteme. Beachten Sie, dass Quelle und Ziel derselben Active Directory-Domäne (AD) angehören müssen oder dass zwischen ihren Domänen eine AD-Vertrauensstellung besteht.

2. Erstellen und konfigurieren Sie eine DataSync Aufgabe zur Übertragung von Daten von der Quelle zum Ziel. Sie können die Aufgabe als einmalige Instanz ausführen oder die Aufgabe so einrichten, dass sie automatisch nach einem von Ihnen konfigurierten Zeitplan ausgeführt wird.

3. Nach erfolgreichem Abschluss der Aufgabe sind die Daten in Ihrem Zieldateisystem eine exakte Kopie Ihrer Quelle. Beachten Sie, dass Sie alle Schreibaktivitäten oder Dateiaktualisierungen in Ihrem Quelldateisystem vorübergehend unterbrechen müssen, um die Aufgabe abzuschließen. Sie können dann zu Ihrem Zieldateisystem wechseln und das Quelldateisystem löschen.

Vor der Migration von Ihrem Produktionsdateisystem können Sie den Migrationsprozess auf einem Dateisystem testen, das aus einer aktuellen Sicherung wiederhergestellt wurde. Auf diese Weise können Sie abschätzen, wie lange der Datenübertragungsprozess dauert, und DataSync Fehler im Voraus beheben.

Um die Umstellungszeit zu minimieren, können Sie DataSync Aufgaben im Voraus ausführen und dabei den Großteil Ihrer Daten von Ihrem Quelldateisystem in Ihr Zieldateisystem verschieben. Nachdem Sie den Datenverkehr zu Ihrem Quelldateisystem gestoppt haben, können Sie eine letzte Aufgabenübertragung durchführen, um alle Daten zu synchronisieren, die seit der Einstellung des Datenverkehrs neu aktualisiert wurden, und dann auf Ihr Zieldateisystem übertragen.

Sie können DataSync Tasks so konfigurieren, dass sie nur in bestimmten Verzeichnissen ausgeführt werden oder dass sie bestimmte Pfade ein- oder ausschließen. Dies kann nützlich sein, wenn Sie mehrere Aufgaben parallel ausführen oder wenn Sie eine Teilmenge Ihrer Daten migrieren möchten.

Sie können in Ihrem Zieldateisystem einen DNS-Alias erstellen, der dem DNS-Namen Ihres Quelldateisystems entspricht. Dadurch können Ihre Endbenutzer und Anwendungen weiterhin über den DNS-Namen Ihres Quelldateisystems auf Dateidaten zugreifen. Weitere Informationen zum Einrichten eines DNS-Alias finden Sie unter:Verwenden von DNS-Aliasen für den Zugriff auf Ihr Dateisystem.

Bei dieser Art der Migration empfehlen wir Folgendes:

• Planen Sie Ihre Migration so, dass Sie keine Dateisystem-Backups, Ihr wöchentliches Wartungsfenster und Data Deduplication Jobs vermeiden. Insbesondere empfehlen wir, den Data Deduplication GarbageCollection Job zu deaktivieren, wenn er mit Ihrer geplanten Migration zusammenfällt.

• Verwenden Sie einen SSD-Speichertyp sowohl für Ihr Quell- als auch für Ihr Zieldateisystem. Sie können zwischen HDD- und SSD-Speichertypen wechseln, indem Sie die Daten aus dem Backup wiederherstellen. Weitere Informationen finden Sie unter:Migration von vorhandenem Dateispeicher zu FSx for Windows File Server.

• Konfigurieren Sie Ihre Quell- und Zieldateisysteme mit ausreichender Durchsatzkapazität für die Datenmenge, die Sie übertragen müssen. Überwachen Sie bei DataSync Aufgabenprozessen die Leistungsauslastung sowohl des Quell- als auch des Zieldateisystems. Weitere Informationen finden Sie unter: Überwachung mit Amazon CloudWatch.

• Richten Sie die DataSync Überwachung ein, damit Sie den Fortschritt laufender Aufgaben besser nachvollziehen können. Sie können auch DataSync Protokolle an die Amazon CloudWatch Logs-Gruppe senden, um Sie beim Debuggen Ihrer Aufgaben zu unterstützen, falls Sie auf Fehler stoßen.