Como migrar arquivos atuais para o FSx para Windows File Server usando o AWS DataSync

Recomendamos usar AWS DataSync para transferir dados entre sistemas de arquivos FSx for Windows File Server. DataSync é um serviço de transferência de dados que simplifica, automatiza e acelera a movimentação e a replicação de dados entre sistemas de armazenamento locais e outros serviços de AWS armazenamento pela Internet ou. AWS Direct Connect DataSync pode transferir dados e metadados do sistema de arquivos, como propriedade, registros de data e hora e permissões de acesso.

DataSync suporta a cópia de listas de controle de acesso (ACLs) NTFS e também suporta a cópia de informações de controle de auditoria de arquivos, também conhecidas como listas de controle de acesso (SACLs) do sistema NTFS, que são usadas pelos administradores para controlar o registro de auditoria das tentativas do usuário de acessar arquivos.

Você pode usar DataSync para transferir arquivos entre dois sistemas de arquivos FSx for Windows File Server e também mover dados para um sistema de arquivos em uma conta AWS ou Região da AWS diferente. Você pode usar DataSync com o FSx for Windows File Server sistemas de arquivos para outras tarefas. Por exemplo, você pode executar migrações de dados únicas, ingerir dados periodicamente para workloads distribuídas e programar a replicação para proteção e recuperação de dados.

Em AWS DataSync, um local para FSx for Windows File Server é um endpoint para um FSx for Windows File Server. Você pode transferir arquivos entre um local para o FSx para Windows e um local para outros sistemas de arquivos. Para obter informações, consulte Trabalhar com locais no Guia do usuário do AWS DataSync .

DataSync acessa seu FSx for Windows File Server usando o protocolo Server Message Block (SMB). Ele se autentica com o nome de usuário e a senha que você configura no AWS DataSync console ou AWS CLI.

Pré-requisitos

Para migrar dados para a configuração do Amazon FSx for Windows File Server, você precisa de um servidor e uma rede que atendam aos requisitos DataSync . Para saber mais, consulte os requisitos DataSync no Guia do AWS DataSync usuário.

Se você estiver realizando uma grande migração de dados ou uma migração envolvendo muitos arquivos pequenos, recomendamos usar um sistema de arquivos do Amazon FSx com tipo de armazenamento SSD. Isso ocorre porque DataSync as tarefas envolvem varreduras de metadados de arquivos que podem esgotar os limites de IOPS de disco dos sistemas de arquivos HDD, causando migrações de longa duração e impacto no desempenho do sistema de arquivos. Para obter mais informações, consulte: Práticas recomendadas para migrar o armazenamento de arquivos atual para o FSx para Windows File Server.

Se seu conjunto de dados consistir principalmente em arquivos pequenos, contagens de arquivos na casa dos milhões ou se você tiver mais largura de banda de rede disponível do que uma única DataSync tarefa do que consumir, você também poderá acelerar suas transferências de dados com uma arquitetura escalável. Para obter mais informações, consulte: Como acelerar suas transferências de dados com arquiteturas de AWS DataSync expansão horizontal.

Você pode monitorar a utilização de E/S de disco do sistema de arquivos usando Métricas de performance do FSx.

Etapas básicas para migrar arquivos usando DataSync

Para transferir arquivos de um local de origem para um local de destino usando DataSync, siga as seguintes etapas básicas:

• Faça download e implante um agente em seu ambiente e ative-o.

• Crie e configure um local de origem e destino.

• Crie e configure uma tarefa.

• Execute a tarefa para transferir arquivos da origem para o destino.

Para saber como transferir arquivos de um sistema de arquivos local existente para seu FSx for Windows File Server, consulte Transferência de dados entre armazenamento autogerenciado e, Criação de um local para SMB AWS e Criação de um local para o Amazon FSx for Windows File Server no Guia do usuário.AWS DataSync

Para saber como transferir arquivos de um sistema de arquivos atual na nuvem para o FSx para Windows File Server, consulte Implantar o agente como uma instância do Amazon EC2 no Guia do usuário do AWS DataSync .

Como migrar entre dois sistemas de arquivos do Amazon FSx

Você pode usar DataSync para migrar dados entre dois sistemas de arquivos Amazon FSx. Isso pode ser útil se você precisar mover sua workload de um sistema de arquivos atual para um novo sistema de arquivos com uma configuração diferente, como de uma configuração single-AZ para uma configuração multi-AZ. Você também pode usar DataSync para dividir sua carga de trabalho entre dois sistemas de arquivos.

Veja um exemplo de visão geral do processo de migração:

1. Crie DataSync locais para os sistemas de arquivos de origem e destino. A origem e o destino precisam pertencer ao mesmo domínio do Active Directory (AD) ou ter uma relação de confiança do AD entre seus domínios.

2. Crie e configure uma DataSync tarefa para transferir dados da origem para o destino. Você pode executar a tarefa como uma instância única ou definir a tarefa para ser executada automaticamente de acordo com uma programação configurada por você.

3. Depois que a tarefa for concluída com êxito, os dados do sistema de arquivos de destino serão uma cópia exata da origem. Você precisará pausar temporariamente qualquer atividade de gravação ou de atualização de arquivos no sistema de arquivos de origem para concluir a tarefa. Em seguida, você pode mudar para o sistema de arquivos de destino e excluir o sistema de arquivos de origem.

Antes de migrar do seu sistema de arquivos de produção, você pode testar o processo de migração em um sistema de arquivos restaurado com base em um backup recente. Isso permite estimar quanto tempo leva o processo de transferência de dados e solucionar DataSync erros com antecedência.

Para minimizar o tempo de transição, você pode executar DataSync tarefas com antecedência, movendo a maioria dos dados do sistema de arquivos de origem para o sistema de arquivos de destino. Depois de interromper o tráfego para o sistema de arquivos de origem, você pode executar uma transferência de tarefa final para sincronizar todos os dados que foram atualizados recentemente desde que você interrompeu o tráfego e, em seguida, mudar para o sistema de arquivos de destino.

Você pode configurar DataSync tarefas para serem executadas somente em determinados diretórios ou para incluir ou excluir determinados caminhos. Isso pode ser útil se você estiver executando várias tarefas em paralelo ou se quiser migrar um subconjunto dos dados.

Você pode criar um alias de DNS no sistema de arquivos de destino que seja igual ao nome DNS do sistema de arquivos de origem. Isso permite que os usuários finais e as aplicações continuem acessando os dados do arquivo usando o nome DNS do sistema de arquivos de origem. Para obter mais informações sobre como configurar um alias de DNS, consulte: Usando aliases de DNS para acessar seu sistema de arquivos.

Ao realizar esse tipo de migração, recomendamos o seguinte:

• Programe a migração para evitar backups do sistema de arquivos, a janela de manutenção semanal e trabalhos Data Deduplication. Especificamente, recomendamos desativar o trabalho Data Deduplication GarbageCollection se ele coincidir com a migração planejada.

• Use um tipo de armazenamento SSD para os sistemas de arquivos de origem e de destino. Você pode alternar entre os tipos de armazenamento HDD e SSD ao restaurar com base em backup. Para obter mais informações, consulte: Como migrar o armazenamento de arquivos atual para o FSx para Windows File Server.

• Configure os sistemas de arquivos de origem e destino com capacidade de throughput suficiente para a quantidade de dados que você precisa transferir. Durante os processos de DataSync tarefas, monitore a utilização do desempenho dos sistemas de arquivos de origem e de destino. Para obter mais informações, consulte: Monitoramento com a Amazon CloudWatch.

• Configure o DataSync monitoramento para ajudar você a entender o progresso das tarefas em andamento. Você também pode enviar DataSync registros para o grupo Amazon CloudWatch Logs para ajudá-lo a depurar suas tarefas caso encontre algum erro.