Uso de las tareas del repositorio de datos para importar los cambios - FSx para Lustre

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Uso de las tareas del repositorio de datos para importar los cambios

La tarea de importación del repositorio de datos importa los metadatos de los objetos nuevos o modificados en el repositorio de datos de S3, lo que crea una nueva lista de archivos o directorios para cualquier objeto nuevo del repositorio de datos de S3. Para cualquier objeto que se haya modificado en el repositorio de datos, la lista de archivos o directorios correspondiente se actualiza con los nuevos metadatos. No se realiza ninguna acción con los objetos que se han eliminado del repositorio de datos.

Utilice los siguientes procedimientos para importar los cambios en los metadatos mediante la consola Amazon FSx y la CLI. Tenga en cuenta que puede utilizar una tarea de repositorio de datos para varias DRA.

  1. Abra la consola de Amazon FSx en https://console.aws.amazon.com/fsx/.

  2. En el panel de navegación, elija File systems y, a continuación, elija su sistema de archivos Lustre.

  3. Elija la pestaña Data repository.

  4. En el panel Data repository associations, elija las asociaciones de repositorios de datos para las que desea crear la tarea de importación.

  5. En el menú Actions, elija Import task. Esta opción no está disponible si el sistema de archivos no está vinculado a un repositorio de datos. Aparece la página de Create import data repository task.

  6. (Opcional) Especifique hasta 32 directorios o archivos para importar desde los buckets de S3 vinculados proporcionando las rutas a dichos directorios o archivos en Data repository paths to import.

    nota

    Si la ruta que proporciona no es válida, la tarea devuelve un error.

  7. (Opcional) Elija Enable en el Completion report para generar un informe de finalización de la tarea una vez finalizada la tarea. Un task completion report proporciona detalles sobre los archivos procesados por la tarea que cumplen con el alcance indicado en el Report scope. Para especificar la ubicación en la que Amazon FSx entregará el informe, introduzca una ruta relativa en un repositorio de datos de S3 vinculado para la Report path.

  8. Seleccione Crear.

    Una notificación en la parte superior de la página de File systems muestra la tarea que acaba de crear en curso.

Para ver el estado y los detalles de la tarea, desplácese hacia abajo hasta el panel Data Repository Tasks de la pestaña Data Repository del sistema de archivos. El orden predeterminado muestra la tarea más reciente en la parte superior de la lista.

Para ver un resumen de la tarea en esta página, elija el Task ID de la tarea que acaba de crear. Aparece la página de Summary de la tarea.

  • Utilice el comando create-data-repository-task de la CLI para importar los cambios de metadatos en su sistema de archivos de FSx para Lustre. La operación de API correspondiente es CreateDataRepositoryTask.

    $ aws fsx create-data-repository-task \
    --file-system-id fs-0123456789abcdef0 \
    --type IMPORT_METADATA_FROM_REPOSITORY \
    --paths s3://bucketname1/dir1/path1 \
    --report Enabled=true,Path=s3://bucketname1/dir1/path1,Format=REPORT_CSV_20191124,Scope=FAILED_FILES_ONLY

    Después de crear correctamente la tarea de repositorio de datos, Amazon FSx devuelve la descripción de la tarea en formato JSON.

Después de crear la tarea para importar metadatos del repositorio de datos vinculado, puede comprobar el estado de la tarea de importación del repositorio de datos. Para obtener más información sobre cómo ver las tareas del repositorio de datos, consulte Acceder a las tareas del repositorio de datos.