File system virtuale Deadline Cloud

Il supporto del file system virtuale per gli allegati di lavoro in AWS Deadline Cloud consente al software client sui lavoratori di comunicare direttamente con Amazon Simple Storage Service. I lavoratori possono caricare i file solo quando necessario invece di scaricare tutti i file prima dell'elaborazione. I file vengono archiviati localmente. Questo approccio evita di scaricare le risorse utilizzate più di una volta più volte. Tutti i file vengono rimossi al termine del processo.

• Il file system virtuale offre un significativo incremento delle prestazioni per profili professionali specifici. In generale, i sottoinsiemi più piccoli di file totali con flotte di lavoratori più grandi offrono i maggiori vantaggi. Un numero limitato di file con un minor numero di addetti ha tempi di elaborazione all'incirca equivalenti.

• Il supporto dei file system virtuali è disponibile solo per Linux i lavoratori delle flotte gestite dai servizi.

• Il file system virtuale Deadline Cloud supporta le seguenti operazioni, ma non è conforme a POSIX:

  • Filecreate,delete,,open,close,read,write,append,,truncate, renamemove, e copy stat fsync falloc

  • Directory createdelete,rename,move,copy, e stat

• Il file system virtuale è progettato per ridurre il trasferimento di dati e migliorare le prestazioni quando le attività accedono solo a una parte di un set di dati di grandi dimensioni e non è ottimizzato per tutti i carichi di lavoro. È necessario testare il carico di lavoro prima di eseguire i lavori di produzione.

Abilita il supporto VFS

Il supporto del file system virtuale (VFS) è abilitato per ogni processo. Un job torna al framework predefinito dei job attachments nei seguenti casi:

• Un profilo di istanza di lavoro non supporta un file system virtuale.

• I problemi impediscono l'avvio del processo del file system virtuale.

• Il file system virtuale non può essere montato.

Per abilitare il supporto del file system virtuale utilizzando il mittente

1. Quando invii un lavoro, scegli il pulsante Impostazioni per aprire il pannello di configurazione della workstation AWS Deadline Cloud.

2. Dal menu a discesa delle opzioni del file system Job attachments, scegli VIRTUAL.

   

3. Per salvare le modifiche, scegli OK.

Per abilitare il supporto del file system virtuale utilizzando il AWS CLI

• Utilizzate il seguente comando quando inviate un lavoro salvato:

  deadline bundle submit-job --job-attachments-file-system VIRTUAL

Per verificare che il file system virtuale sia stato avviato correttamente per un determinato lavoro, esamina i log in Amazon CloudWatch Logs. Cerca i seguenti messaggi:

Using mount_point mount_point
Launching vfs with command command
Launched vfs as pid PID number

Se il registro contiene il seguente messaggio, il supporto del file system virtuale è disabilitato:

Virtual File System not found, falling back to COPIED for JobAttachmentsFileSystem.

Risoluzione dei problemi relativi al supporto dei file system virtuali

Puoi visualizzare i log del tuo file system virtuale utilizzando il monitor Deadline Cloud. Per istruzioni, consulta Visualizza i registri delle sessioni e dei lavoratori in Deadline Cloud.

I log del file system virtuale vengono inoltre inviati al gruppo CloudWatch Logs associato alla coda condivisa con l'output del worker agent.