OBS 对象存储服务 （Object Storage Service，OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。详情参考帮助文档。本次实践，使用OBS来存储xxxx服务平台上传的图片、文件或者通过接口调用生成的json文件。 登录华为云OBS管理控制台

查看更多 →

"91dd2d3f-2d92-475f-a375-04636af26cc9", "category" : "OBSFS", "mount_path" : "/data/wang/", "uri" : "obs://authoring-test/wang/", "status" : "MOUNTING"

查看更多 →

如果您想了解更多本方案相关信息，或在方案使用过程中存在疑问，可通过方案咨询渠道，寻求专业人员支持。 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践

查看更多 →

准备工作 准备资源 准备数据 准备权重 准备代码 准备镜像 父主题： 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.907）

查看更多 →

在高可用部署场景下需要创建SFS Turbo提供文件共享功能。请参考表1在公有云平台创建SFS Turbo。

查看更多 →

Cluster 输出 属性 参数类型 描述 status string sfs卷的状态 clusterId string sfs卷关联的集群Id refID string sfs卷的UID refName string sfs卷的名称 blueprint样例 样例1： tosca_definitions_version:

查看更多 →

CCI.Storage.SFS 模型说明 CCI.Storage.SFS用于在指定的Namespace下创建文件存储卷。 模型属性 表1 模型定义属性说明 属性 是否必选 描述 k8sManifest 否 sfs的k8s原生manifest对象，基于此也可以创建sfs资源，替代其余配置项

查看更多 →

创建SFS Turbo 操作场景 在分布式部署及分布式高可用部署场景下需要创建SFS Turbo提供文件共享功能。请参考表1在公有云平台创建SFS Turbo。 创建SFS Turbo 登录管理控制台。 在管理控制台左上角单击，选择区域和项目。 在左侧导航栏，单击，选择“存储 >

查看更多 →

Arts训练容器中预置的环境变量。训练容器环境变量详细介绍可参考查看训练容器环境变量。 通过obsutils，将代码文件夹放到OBS上，然后通过OBS将代码传至SFS相应目录中。 在SFS中将代码文件Swin-Transformer-main设置归属为ma-user。 chown

查看更多 →

+普通OBS桶（存放代码）”，采用分布式训练。 当使用SFS+OBS的存储方案可以实现存储加速，该方案的端到端实践案例请参见面向AI场景使用OBS+SFS Turbo的存储加速实践。 表1 不同场景所需服务及购买推荐 场景 OBS SFS SWR DEW ModelArts VPC

查看更多 →

常见错误原因和解决方法 显存溢出错误 网卡名称错误 父主题： 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.908）

查看更多 →

常见错误原因和解决方法 显存溢出错误 网卡名称错误 保存ckpt时超时报错 父主题： 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.907）

查看更多 →

如何在弹性文件服务SFS和对象存储服务OBS之间进行数据迁移？ 背景知识 对象存储服务OBS是华为云提供的稳定、安全、高效、易用的云存储服务，具备标准Restful API接口，可存储任意数量和形式的非结构化数据。 弹性文件服务SFS是华为云提供的按需扩展的高性能文件存储（NAS），

查看更多 →

namespace：指定secret的命令空间 fsType 文件类型，支持“obsfs”与“s3fs”，取值为s3fs时创建是obs对象桶；取值为obsfs时创建的是obs并行文件系统。 volumeHandle 对象存储的桶名称。 创建PV。 kubectl create -f pv-example

查看更多 →

对象。 通过控制台、API、SDK、OBS Browser+、obsutil、obsfs方式上传同名文件到OBS，会导致OBS内已有文件被覆盖。 如果您在生命周期规则中配置了定期删除文件的规则，OBS会根据生命周期的配置定期删除符合条件的文件。详情请参见生命周期管理。 如果您配置

查看更多 →

PyTorch NPU训练指导（6.3.909） 主流开源大模型基于Standard+OBS适配PyTorch NPU训练指导（6.3.909） 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.909） 主流开源大模型基于Lite Cluster适配PyTorch

查看更多 →

训练启动脚本说明和参数配置 训练的数据集预处理说明 训练的权重转换说明 训练tokenizer文件说明 父主题： 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.907）

查看更多 →

说明 type 是 String 存储类型。 当前支持“obs”、“obsfs” 和“evs”，其中，obsfs类型当前仅支持部分专属资源池。若您需要挂载OBS并行文件系统，请提工单。 location 否 Object 存储位置，如果type为“obs”类型，该参数必须填写，如表5所示数据结构，如缺省值为“NULL”。

查看更多 →

None 服务介绍 弹性文件服务 SFS 视频介绍 01:54 弹性文件服务SFS介绍 云容器引擎 CCE 简介 07:25 云容器引擎简介 云容器引擎 CCE 服务介绍 03:23 云容器引擎服务介绍 操作指导 弹性文件服务 SFS 创建并挂载文件系统到Linux 云服务器 05:22

查看更多 →

创建SFS Turbo 功能介绍 SFS Turbo提供按需扩展的高性能文件存储（NAS），可为云上多个弹性云 服务器 （Elastic Cloud Server，E CS ），容器（CCE&CCI），裸金属服务器（BMS）提供共享访问，能够弹性伸缩至320TB规模，具备高可用性和持久性

查看更多 →

/v2/{project_id}/sfs/{share_id}/tags sfs:tags:addShareTags √ × 删除共享标签 DELETE /v2/{project_id}/sfs/{share_id}/tags/{key} sfs:tags:deleteShareTags

查看更多 →