PyTorch NPU训练指导（6.3.911） 主流开源大模型基于Standard+OBS适配PyTorch NPU训练指导（6.3.911） 主流开源大模型基于Standard+OBS+SFS适配PyTorch NPU训练指导（6.3.911） 主流开源大模型基于Lite Cluster适配PyTorch

查看更多 →

图1 基于OBS+SFS Turbo的华为云AI云存储解决方案 方案优势 华为云AI云存储解决方案的主要优势如下表所示。 表1 华为云AI云存储解决方案的主要优势 序号 主要优势 详细描述 1 存算分离，资源利用率高 GPU/NPU算力和SFS Turbo存储解耦，各自按需扩容，资源利用率提升。

查看更多 →

容。 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践

查看更多 →

"category" : "OBSFS", "id" : "91dd2d3f-2d92-475f-a375-04636af26cc9", "mount_path" : "/data/wang/", "status" : "UNMOUNTING", "uri" : "obs://authoring-test/wang/"

查看更多 →

容。 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践

查看更多 →

容。 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践

查看更多 →

创建SFS Turbo 其中，文件系统类型推荐选用500MB/s/TiB或1000MB/s/TiB，应用于AI大模型场景中。存储容量推荐使用 6.0~10.8TB ，以存储更多模型文件。 图2 SFS类型和容量选择 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS

查看更多 →

创建SFS Turbo 其中，文件系统类型推荐选用500MB/s/TiB或1000MB/s/TiB，应用于AI大模型场景中。存储容量推荐使用 6.0~10.8TB ，以存储更多模型文件。 图2 SFS类型和容量选择 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS

查看更多 →

文件存储（SFS） 文件存储概述 通过静态存储卷使用已有文件存储 通过动态存储卷使用文件存储 通过动态存储卷创建SFS子目录 设置文件存储挂载参数 将容器应用从SFS 1.0迁移到通用文件系统（SFS 3.0）或SFS Turbo 父主题： 存储

查看更多 →

SFS1.0迁移至SFS 3.0 使用须知 准备工作 创建集群 （可选）网络打通 创建存储迁移工作流 （可选）清理集群 父主题： 存储迁移相关最佳实践

查看更多 →

OBS 对象存储服务 （Object Storage Service，OBS）是一个基于对象的海量存储服务，为客户提供海量、安全、高可靠、低成本的数据存储能力。详情参考帮助文档。本次实践，使用OBS来存储xxxx服务平台上传的图片、文件或者通过接口调用生成的json文件。 登录华为云OBS管理控制台

查看更多 →

nt/sfs_turbo路径下。 图4 SFS Turbo基本信息 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS Turbo HPC型文件系统、OBS对象存储服务和ModelArts资源池。如果要使用训练作业挂载SFS Tur

查看更多 →

nt/sfs_turbo路径下。 图4 SFS Turbo基本信息 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS Turbo HPC型文件系统、OBS对象存储服务和ModelArts资源池。如果要使用训练作业挂载SFS Tur

查看更多 →

nt/sfs_turbo路径下。 图4 SFS Turbo基本信息 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS Turbo HPC型文件系统、OBS对象存储服务和ModelArts资源池。如果要使用训练作业挂载SFS Tur

查看更多 →

管理SFS Turbo文件系统与OBS桶的存储联动 概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下，您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。您可以指定SFS T

查看更多 →

管理SFS Turbo文件系统与OBS桶的存储联动 概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下，您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。您可以指定SFS T

查看更多 →

nt/sfs_turbo路径下。 图4 SFS Turbo基本信息 ModelArts网络关联SFS Turbo OBS-SFS Turbo联动方案涉及VPC、SFS Turbo HPC型文件系统、OBS对象存储服务和ModelArts资源池。如果要使用训练作业挂载SFS Tur

查看更多 →

"91dd2d3f-2d92-475f-a375-04636af26cc9", "category" : "OBSFS", "mount_path" : "/data/wang/", "uri" : "obs://authoring-test/wang/", "status" : "MOUNTING"

查看更多 →

文件存储（SFS） 文件存储概述 通过静态存储卷使用已有文件存储 通过动态存储卷使用文件存储 设置文件存储挂载参数 父主题： 存储

查看更多 →

如果您想了解更多本方案相关信息，或在方案使用过程中存在疑问，可通过方案咨询渠道，寻求专业人员支持。 父主题： 面向AI场景使用OBS+SFS Turbo的存储加速实践

查看更多 →

SFS.FileSystem 模型说明 弹性文件服务，提供按需扩展的高性能文件存储，可供云上多个弹性云 服务器 共享访问。 模型属性 表1 模型定义属性说明 属性 是否必选 描述 size 是 存储空间大小，单位GB, 最小值为1，最大值为511800 参数类型：integer 取值说明：取值范围为[1

查看更多 →