Sistema de arquivos virtual Deadline Cloud

O suporte do sistema de arquivos virtual para anexos de tarefas no AWS Deadline Cloud permite que o software cliente dos funcionários se comunique diretamente com o Amazon Simple Storage Service. Os trabalhadores podem carregar arquivos somente quando necessário, em vez de baixar todos os arquivos antes do processamento. Os arquivos são armazenados localmente. Essa abordagem evita o download de ativos usados mais de uma vez várias vezes. Todos os arquivos são removidos após a conclusão do trabalho.

• O sistema de arquivos virtual fornece um aumento significativo no desempenho para perfis de trabalho específicos. Em geral, subconjuntos menores do total de arquivos com frotas maiores de trabalhadores mostram os maiores benefícios. Pequenos números de arquivos com menos trabalhadores têm tempos de processamento aproximadamente equivalentes.

• O suporte ao sistema de arquivos virtual está disponível somente para Linux trabalhadores em frotas gerenciadas por serviços.

• O sistema de arquivos virtual Deadline Cloud suporta as seguintes operações, mas não é compatível com POSIX:

  • Arquivocreate,delete,open,close,read,write,append,truncate,rename,move,copy,stat,fsync, e falloc

  • Diretório createdelete,rename,move,,copy, e stat

• O sistema de arquivos virtual foi projetado para reduzir a transferência de dados e melhorar o desempenho quando suas tarefas acessam somente parte de um grande conjunto de dados e não é otimizado para todas as cargas de trabalho. Você deve testar sua carga de trabalho antes de executar trabalhos de produção.

Ativar suporte ao VFS

O suporte ao sistema de arquivos virtual (VFS) está habilitado para cada trabalho. Uma tarefa retorna à estrutura padrão de anexos de tarefas nos seguintes casos:

• Um perfil de instância de trabalho não oferece suporte a um sistema de arquivos virtual.

• Problemas impedem o lançamento do processo do sistema de arquivos virtual.

• O sistema de arquivos virtual não pode ser montado.

Para habilitar o suporte ao sistema de arquivos virtual usando o remetente

1. Ao enviar um trabalho, escolha o botão Configurações para abrir o painel de configuração da estação de trabalho AWS Deadline Cloud.

2. No menu suspenso de opções do sistema de arquivos Job attachments, escolha VIRTUAL.

   

3. Para salvar suas alterações, escolha OK.

Para habilitar o suporte ao sistema de arquivos virtual usando o AWS CLI

• Use o comando a seguir ao enviar um trabalho salvo:

  deadline bundle submit-job --job-attachments-file-system VIRTUAL

Para verificar se o sistema de arquivos virtual foi lançado com sucesso para um trabalho específico, revise seus registros no Amazon CloudWatch Logs. Procure as seguintes mensagens:

Using mount_point mount_point
Launching vfs with command command
Launched vfs as pid PID number

Se o registro contiver a seguinte mensagem, o suporte ao sistema de arquivos virtual será desativado:

Virtual File System not found, falling back to COPIED for JobAttachmentsFileSystem.

Solução de problemas de suporte ao sistema de arquivos virtual

Você pode visualizar os registros do seu sistema de arquivos virtual usando o monitor Deadline Cloud. Para instruções, consulte Veja os registros da sessão e do trabalhador no Deadline Cloud.

Os registros do sistema de arquivos virtual também são enviados para o grupo CloudWatch Logs associado à fila compartilhada com a saída do agente de trabalho.