购买存储资源
存储资源是AI DataLake提供的按需购买的存储介质,按容量和时长计费,用于承载作业运行过程中产生的各类数据,如临时数据、缓存、中间结果、模型文件等。
存储资源本身是一种通用的“存储介质”,各引擎基于自身的作业类型,在该存储介质中存放不同的内容。
推荐您配置存储资源,如果未配置存储资源,端点只能使用资源池关联的容器资源自带的本地磁盘来存储数据,存储空间无法保证,且无法通过单独的存储资源实现数据共享。
本节操作介绍购买存储资源的操作步骤。
约束与限制
- 一个账号最多创建10个存储资源。
- 仅在创建端点时支持配置存储资源,暂不支持端点创建后关联存储资源。
购买存储资源
- 登录AI DataLake管理控制台。
- 在左侧导航栏选择“资源管理 > 存储资源”进入存储资源页面。
- 单击界面右上角的“购买”。
- 在“购买存储资源”界面,填写具体参数,参数填写参考如下。
表1 参数说明 参数名称
描述
区域
区域指存储资源的物理数据中心所在的位置,请就近选择靠近您业务的区域,可减少网络时延,提高访问速度。
存储资源创建后不能更换区域,也不支持迁移至其他区域,请谨慎选择。
资源类型
选择存储资源的资源类型。当前仅支持“高性能弹性文件服务”。
高性能弹性文件服务支持海量文件并发处理与多引擎端点共享,实现数据极速读写。
计费模式
选择存储资源的计费模式:
按需计费:后付费模式,按实际存储容量和性能规格计费。
自创建起根据选购的存储规格按自然小时收费,按小时结算。
名称
存储资源的具体名称。
长度为1~63个字符,只能包含小写字母、数字、中划线,且只能以小写字母开头,字母或数字结尾。
描述
如果需要添加描述内容,请单击“添加描述”并输入描述信息。
该参数可选。
存储规格
在存储规格列表中,选择存储资源的规格名称,并显示对应规格的容量可选范围。
当前支持选择的规格及其容量可选范围如下:
- aidatalake.storage.fuse.20MBps:3.6TiB~1PiB
- aidatalake.storage.fuse.40MBps:1.2TiB~1PiB
- aidatalake.storage.fuse.125MBps:1.2TiB~1PiB
- aidatalake.storage.fuse.250MBps:1.2TiB~1PiB
- aidatalake.storage.fuse.500MBps:1.2TiB~1PiB
- aidatalake.storage.fuse.1000MBps:1.2TiB~1PiB
容量
选择存储规格后,需要配置容量大小,单位:TiB。
容量的取值范围与所选“存储规格”的“容量可选范围”一致,并且以1.2TiB步长进行增加。
AI DataLake网络
规划计算资源池所属的网段,计算资源池网段与数据源网段不能重合。
一个AI DataLake工作空间内仅支持一个网络,如果没有可用网络,单击“创建网络”新增。
- 参数填写完成后,单击“立即购买”。
- 等待存储资源状态变成“可用”表示当前存储资源创建成功。
后续操作
创建端点时绑定存储资源:在创建端点时,选择已购买的存储资源作为存储资源。
端点配置的存储资源均属于临时存储,请勿在其上保留需要持久化存储的数据。
| 端点类型 | 是否必选 | 存储资源中主要存放的内容 | 配置方法 | 操作指导 |
|---|---|---|---|---|
| AuraJobV2 | 必选 | 存放作业过程中的临时下盘、临时缓存等,包括中间结果或模型文件等。 | 创建端点时,在“存储配置 > 选择临时文件存储”区域选择已创建的存储资源。 | 详细操作请参考创建Aura引擎端点。 |
| AuraJob | 可选 | 存放作业过程中的临时下盘、临时缓存等,包括中间结果或模型文件等。 | 创建端点时,在“存储配置 > 选择临时文件存储”区域选择已创建的存储资源。 | 详细操作请参考创建Aura引擎端点。 |
| RayCluster | 可选 | 存放作业运行中的临时数据。 | 创建端点时,勾选“存储配置”,配置“选择临时存储”,选择已创建的存储资源,配置存储路径和挂载路径。 | 详细操作请参考创建Ray引擎端点。 |