Montaje dinámico de un sistema de archivos paralelo de OBS
Descripción
Parallel File System (Sistema de archivos paralelo, PFS) es un sistema de archivos optimizado de alto rendimiento proporcionado por Object Storage Service (OBS). Para obtener más detalles, véase Acerca de PFS.
El montaje dinámico de OBS utiliza una herramienta de montaje para convertir el protocolo de almacenamiento de objetos en el protocolo de archivo POSIX. El almacenamiento de OBS se simula como un sistema de archivos local y se monta dinámicamente en un contenedor de notebook en ejecución en ModelArts. Después del montaje, puede realizar operaciones de aplicación en los objetos de OBS del contenedor del notebook.
Escenarios de aplicación
Escenario 1: Después de montar el almacenamiento de OBS en el que se almacena el conjunto de datos de destino en la instancia de notebook, puede obtener una vista previa y realizar operaciones en el conjunto de datos, como operar un sistema de archivos local.
Escenario 2: Al entrenar datos en una instancia de notebook, puede utilizar el conjunto de datos montado en un contenedor de notebook.
Restricciones
OBS proporciona bucket de objetos y PFS para el almacenamiento.
El notebook de ModelArts de la nueva versión solo admite el montaje de un sistema de archivos paralelo de OBS a /data/ de un contenedor de notebook.
Procedimiento
Método 1: Con la consola de gestión de ModelArts
- Inicie sesión en la consola de gestión de ModelArts. En el panel de navegación izquierdo, seleccione DevEnviron > Notebook.
- Seleccione una instancia de notebook en ejecución y haga clic en su nombre. En la página de detalles de la instancia de notebook, haga clic en la ficha Storage. Desde allí, haga clic en Mount Storage y configure los parámetros de montaje.
- Establezca un directorio de montaje local. Escriba un nombre de carpeta en /data/, por ejemplo, demo. El sistema creará automáticamente la carpeta en /data/ del contenedor del notebook para montar el sistema de archivos de OBS.
- Seleccione la carpeta para almacenar el sistema de archivos paralelos de OBS y haga clic en OK.
Figura 1 Montaje dinámico de un sistema de archivos paralelo de OBS
- Vea el resultado del montaje en la página de detalles de la instancia del notebook.
Figura 2 Montaje exitoso