Tarefas de repositório de dados - FSxpara Lustre

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Tarefas de repositório de dados

Ao usar tarefas de importação e exportação do repositório de dados, você pode gerenciar a transferência de dados e metadados entre seu sistema de arquivos FSx for Lustre e qualquer um de seus repositórios de dados duráveis no Amazon S3.

As tarefas do repositório de dados otimizam as transferências de dados e metadados entre seu sistema de arquivos FSx for Lustre e um repositório de dados no S3. Uma maneira de fazer isso é rastreando as alterações entre o sistema de FSx arquivos da Amazon e o repositório de dados vinculado. Elas também fazem isso ao usar técnicas de transferência paralela para transferir dados em velocidades de até centenas de GB/s. Você cria e visualiza tarefas do repositório de dados usando o FSx console da Amazon AWS CLI, o e o Amazon FSxAPI.

As tarefas do repositório de dados mantêm os metadados da Interface do Sistema Operacional Portátil (POSIX) do sistema de arquivos, incluindo propriedade, permissões e registros de data e hora. Como as tarefas mantêm esses metadados, você pode implementar e manter controles de acesso entre o sistema de arquivos FSx for Lustre e seus repositórios de dados vinculados.

Você pode usar uma tarefa de repositório de dados de liberação para liberar espaço no sistema de arquivos para novos arquivos ao liberar arquivos exportados para o Amazon S3. O conteúdo dos arquivos liberados é removido, mas os metadados dos arquivos liberados permanecem no sistema de arquivos. Os usuários e as aplicações ainda podem acessar um arquivo liberado ao realizar novamente a leitura do arquivo. Quando o usuário ou o aplicativo lê o arquivo lançado, o FSx for Lustre recupera de forma transparente o conteúdo do arquivo do Amazon S3.

Tipos de tarefas de repositório de dados

Existem três tipos de tarefas de repositório de dados:

  • Tarefas de exportação do repositório de dados que exportam de seu sistema de arquivos do Lustre para um bucket do S3 vinculado.

  • Tarefas de importação do repositório de dados que importam de um bucket do S3 vinculado para o seu sistema de arquivos do Lustre.

  • Tarefas de repositório de dados de liberação que liberam arquivos exportados para um bucket do S3 vinculado de seu sistema de arquivos do Lustre.

Para obter mais informações, consulte Como criar uma tarefa de repositório de dados.