配置云存储 云存储说明 配置并行文件系统 配置存储桶 配置通用型文件系统 编辑云存储挂载 删除云存储挂载 父主题： 组件配置

查看更多 →

云存储 获取云存储列表 授权云存储 解绑云存储 父主题： CAE API

查看更多 →

key，当前access key应该包含访问授权云存储的权限。 secret 否 String 用户secret key，当前secret key应该包含访问授权云存储的权限。 响应参数 无 请求示例 授权云存储，云存储类型为“obs”，存储桶名称为“test-bucket”。 POST

查看更多 →

单击“授权”，完成通用文件系统授权。 云存储解绑 若已授权存储对象云存储已绑定组件，解除绑定时，请先在“组件配置 > 云存储配置”中删除相应组件中挂载，具体操作请参考删除云存储挂载。 登录CAE控制台。 在左侧导航栏中选择“系统设置”。 单击“云存储授权”模块中的“编辑”，进入“已授权云存储”页面。 选择

查看更多 →

云存储说明 CAE支持对并行文件系统、存储桶和通用文件系统三种类型的云存储，每种云存储的主要特点及应用场景参考表1。 表1 云存储对比 对比维度 对象存储OBS-并行文件系统 对象存储OBS-存储桶 通用文件系统 概念 并行文件系统是OBS提供的一种经过优化的高性能文件系统，提供

查看更多 →

云存储优化与提升服务 产品介绍 常见问题 计费说明 父主题： 优化与提升

查看更多 →

如何使用云存储？ 如果您使用控制台界面创建，请参见存储概述。 您还可以使用kubectl创建云存储，具体请参见使用PersistentVolumeClaim申请持久化存储。 父主题： 存储管理类

查看更多 →

删除云存储挂载 当您不需要挂载云存储时，可删除云存储挂载配置。 删除云存储挂载配置后，文件系统中存放的数据不会删除。如需重新挂载，请配置云存储挂载路径。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择待操作的组件。 图1 选择组件

查看更多 →

存储配置 参数 描述 默认值 hoodie.parquet.max.file.size Hudi写阶段生成的parquet文件的目标大小。对于DFS，这需要与基础文件系统块大小保持一致，以实现最佳性能。 120 * 1024 * 1024 byte hoodie.parquet.block

查看更多 →

组件名称。 请求示例 解绑云存储。 DELETE https://{endpoint}/v1/{project_id}/cae/volumes/{id} 响应示例 状态码： 200 返回{}表示成功，返回组件信息，表明这些组件挂载了当前云存储，当前云存储不能解绑。 { "api_version"

查看更多 →

编辑云存储挂载 已配置云存储挂载后，您如需更新挂载路径、读写权限、文件掩码等，可参考以下步骤进行操作。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择待操作的组件。 图1 选择组件 单击“云存储配置”模块中的“编辑”，进入云存储配置页面。

查看更多 →

产品介绍。 弹性文件服务 弹性文件服务（Scalable File Service，SFS）提供按需扩展的高性能文件存储，可供云上多个云 服务器 共享访问。SFS提供标准的文件访问协议，用户可以将现有应用和工具与SFS无缝集成。同时，SFS还具备高可靠和高可用的特点，性能随容量增加而提升。

查看更多 →

云存储优化与提升服务优势？ AI大模型训练加速：提供AI原生存储的三级缓存联动加速，具有数据加载快、模型训练快、故障备份恢复快特点。 丰富的云存储性能诊断经验：凭借积累的多种复杂场景经验和专家团队的应对能力，能够快速准确地定位性能瓶颈问题。 专业的云存储性能优化实践：拥有丰富的各

查看更多 →

对应的存储桶中。 具体操作请参考上传对象。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择需要操作的组件。 图1 选择组件 单击“云存储配置”模块中的“编辑”，进入云存储配置页面。 单击选择“配置存储桶”。 图2 配置存储桶 从下拉框中选择已授权的存储桶名称。

查看更多 →

“批量配置数据存储”，进入“批量配置数据存储”页面。 或在“主机监控”页面，勾选需要“配置数据存储”弹性云服务器，单击“批量配置数据存储”，进入“批量配置数据存储”页面。 在“配置数据存储”或“批量配置数据存储”页面，按照表1配置参数： 表1 配置数据存储参数 参数 说明 样例 OBS转储

查看更多 →

配置NFS服务器存储NameNode元数据 操作场景 本章节适用于 MRS 3.x及后续版本。 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS

查看更多 →

配置NFS服务器存储NameNode元数据 操作场景 本章节适用于MRS 3.x及后续版本。 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS

查看更多 →

正确配置存储资源来更好的支撑业务。 为此，华为云推出云存储优化与提升服务，通过诊断客户存储性能，提供优化方案，帮助客户高效利用云存储，降低成本、提升效率，满足不同场景下的存储需求。 父主题： 关于服务咨询

查看更多 →

云存储优化与提升服务可以提供哪些服务？ 云存储AI大模型性能诊断与优化服务：面向有AI大模型训练云存储性能瓶颈的客户提供性能诊断与性能优化方案设计服务，助力加速AI大模型训练并降低成本。 云存储性能诊断与优化服务：面向有云存储性能瓶颈的客户提供性能诊断与性能优化方案设计服务，如为

查看更多 →

Volume objects 云存储列表。 表5 Volume 参数 参数类型 描述 id String 云存储ID。 resource_info Map<String,String> 存储资源详情。 resource_name String 云存储名称。 resource_type

查看更多 →

配置了云存储配置后，为什么实例异常了？ 当配置云存储的并行文件系统时，如果选择的并行文件系统中的并没有创建相应的子路径，则实例会为异常。 示例： 图1 挂载信息 图2 相应的并行文件系统中并没有test文件夹或文件 图3 报错事件 解决方法 登录OBS控制台。 选择“并行文件系统

查看更多 →