Virtuelles Dateisystem Deadline Cloud

Die Unterstützung virtueller Dateisysteme für Jobanhänge in AWS Deadline Cloud ermöglicht es der Client-Software auf Mitarbeitern, direkt mit Amazon Simple Storage Service zu kommunizieren. Mitarbeiter können Dateien nur bei Bedarf laden, anstatt alle Dateien vor der Verarbeitung herunterzuladen. Dateien werden lokal gespeichert. Durch diesen Ansatz wird vermieden, dass Ressourcen heruntergeladen werden, die mehrmals als einmal verwendet wurden. Alle Dateien werden nach Abschluss des Jobs entfernt.

• Das virtuelle Dateisystem bietet eine erhebliche Leistungssteigerung für bestimmte Jobprofile. Im Allgemeinen bieten kleinere Teilmengen aller Dateien mit einer größeren Mitarbeiterflotte den größten Nutzen. Eine geringe Anzahl von Dateien mit weniger Mitarbeitern hat ungefähr die gleiche Bearbeitungszeit.

• Die Unterstützung virtueller Dateisysteme ist nur für Linux Mitarbeiter in vom Service verwalteten Flotten verfügbar.

• Das virtuelle Dateisystem von Deadline Cloud unterstützt die folgenden Operationen, ist jedoch nicht POSIX-konform:

  • Dateicreate,delete,open,close,read,write,,append,truncate,rename,move,copy, statfsync, und falloc

  • Verzeichniscreate,delete,rename,move,copy, und stat

• Das virtuelle Dateisystem wurde entwickelt, um die Datenübertragung zu reduzieren und die Leistung zu verbessern, wenn Ihre Aufgaben nur auf einen Teil eines großen Datensatzes zugreifen. Es ist nicht für alle Workloads optimiert. Sie sollten Ihre Arbeitslast testen, bevor Sie Produktionsjobs ausführen.

Aktivieren Sie die VFS-Unterstützung

Die Unterstützung virtueller Dateisysteme (VFS) ist für jeden Job aktiviert. In den folgenden Fällen greift ein Job auf das Standard-Framework für Jobanhänge zurück:

• Ein Worker-Instanzprofil unterstützt kein virtuelles Dateisystem.

• Probleme verhindern das Starten des virtuellen Dateisystemprozesses.

• Das virtuelle Dateisystem kann nicht gemountet werden.

Um die Unterstützung virtueller Dateisysteme mithilfe des Absenders zu aktivieren

1. Wenn Sie einen Job einreichen, wählen Sie die Schaltfläche Einstellungen, um das Konfigurationsfenster der AWS Deadline Cloud-Workstation zu öffnen.

2. Wählen Sie in der Dropdownliste Dateisystemoptionen für Jobanhänge die Option VIRTUELL aus.

   

3. Um Ihre Änderungen zu speichern, wählen Sie OK.

Um die Unterstützung virtueller Dateisysteme zu aktivieren, verwenden Sie AWS CLI

• Verwenden Sie den folgenden Befehl, wenn Sie einen gespeicherten Job einreichen:

  deadline bundle submit-job --job-attachments-file-system VIRTUAL

Um zu überprüfen, ob das virtuelle Dateisystem für einen bestimmten Job erfolgreich gestartet wurde, überprüfen Sie Ihre Protokolle in Amazon CloudWatch Logs. Suchen Sie nach den folgenden Meldungen:

Using mount_point mount_point
Launching vfs with command command
Launched vfs as pid PID number

Wenn das Protokoll die folgende Meldung enthält, ist die Unterstützung für virtuelle Dateisysteme deaktiviert:

Virtual File System not found, falling back to COPIED for JobAttachmentsFileSystem.

Problembehandlung bei der Unterstützung virtueller Dateisysteme

Mit dem Deadline Cloud-Monitor können Sie Protokolle für Ihr virtuelles Dateisystem anzeigen. Detaillierte Anweisungen finden Sie unter Sehen Sie sich Sitzungs- und Worker-Protokolle in Deadline Cloud an.

Virtuelle Dateisystemprotokolle werden auch an die Gruppe CloudWatch Logs gesendet, die der Warteschlange zugeordnet ist, die gemeinsam mit der Ausgabe des Worker-Agents genutzt wird.