配置云存储 云存储说明 配置并行文件系统 配置存储桶 配置通用型文件系统 编辑云存储挂载 删除云存储挂载 父主题： 组件配置

查看更多 →

存储配置 参数 描述 默认值 hoodie.parquet.max.file.size Hudi写阶段生成的parquet文件的目标大小。对于DFS，这需要与基础文件系统块大小保持一致，以实现最佳性能。 120 * 1024 * 1024 byte hoodie.parquet.block

查看更多 →

云存储 获取云存储列表 授权云存储 解绑云存储 父主题： CAE API

查看更多 →

单击配置数据存储，弹出配置数据存储页面。 图1 配置数据存储 在如图2所示的计算单元列表中，找到所需查看的计算单元，单击“配置数据存储”为该计算单元配置监控数据的存储路径。 在弹出的“配置数据存储”页面，配置如下参数，然后单击“确定”。 表1 数据存储参数说明 参数名称 说明 样例

查看更多 →

对应的存储桶中。 具体操作请参考上传对象。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择需要操作的组件。 图1 选择组件 单击“云存储配置”模块中的“编辑”，进入云存储配置页面。 单击选择“配置存储桶”。 图2 配置存储桶 从下拉框中选择已授权的存储桶名称。

查看更多 →

表1 配置数据存储参数 参数 说明 样例 OBS转储 是否配置OBS转储，可选择“转储”和“不转储”。 转储 新创建OBS桶 若已有OBS桶，可不用创建。 是 转储OBS桶 若没有OBS桶，输入需要创建的OBS桶名。 已有OBS桶时，选择已有的桶。 ecs-0615 监控数据文件前缀

查看更多 →

key，当前access key应该包含访问授权云存储的权限。 secret 否 String 用户secret key，当前secret key应该包含访问授权云存储的权限。 响应参数 无 请求示例 授权云存储，云存储类型为“obs”，存储桶名称为“test-bucket”。 POST

查看更多 →

云存储授权 云存储是为应用提供存储的服务，CAE支持多种类型的云存储挂载，将云存储按需挂载到容器，保障应用的高可靠性。 授权后，云存储将供给各组件使用，但需在对应组件配置中完成配置。 授权并行文件系统 仅支持授权和创建数据冗余存储策略为多AZ存储、类型为标准存储的并行文件系统。

查看更多 →

配置NFS 服务器 存储NameNode元数据 操作场景 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS服务，本操作提供集群侧的配置指导，为可选任务。

查看更多 →

配置NFS服务器存储NameNode元数据 操作场景 本章节适用于 MRS 3.x及后续版本。 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS

查看更多 →

云存储说明 CAE支持对并行文件系统、存储桶和通用文件系统三种类型的云存储，每种云存储的主要特点及应用场景参考表1。 表1 云存储对比 对比维度 对象存储OBS-并行文件系统 对象存储OBS-存储桶 通用文件系统 概念 并行文件系统是OBS提供的一种经过优化的高性能文件系统，提供

查看更多 →

配置OBS存储功能 资产提供方上传资产时，需要保存资产的相关文件，因此需要用到存储。 公有云场景建议使用OBS。 前提条件 使用OBS之前，您需要拥有一个华为云账号或一个可用于访问OBS的IAM用户，本节将介绍如何注册华为云并实名认证、创建IAM用户、充值以及购买资源包，具体操作请参见使用OBS前需要做的准备工作。

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录 FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置云上和云下的通信 在完成下载eBackup镜像模板后，需要通过网络配置，用于云上和云下的网络通信。 背景说明 配置云上和云下的网络通信方式有两种，适用于两种不同的场景。您需要根据实际的业务情况进行配置。 通过 VPC终端节点 通信 如果您的本地数据中心已通过VPN或者云专线与VP

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置了云存储配置后，为什么实例异常了？ 当配置云存储的并行文件系统时，如果选择的并行文件系统中的并没有创建相应的子路径，则实例会为异常。 示例： 图1 挂载信息 图2 相应的并行文件系统中并没有test文件夹或文件 图3 报错事件 解决方法 登录OBS控制台。 选择“并行文件系统

查看更多 →

如何使用云存储？ 如果您使用控制台界面创建，请参见存储概述。 您还可以使用kubectl创建云存储，具体请参见使用PersistentVolumeClaim申请持久化存储。 父主题： 存储管理类

查看更多 →

删除云存储挂载 当您不需要挂载云存储时，可删除云存储挂载配置。 删除云存储挂载配置后，文件系统中存放的数据不会删除。如需重新挂载，请配置云存储挂载路径。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择待操作的组件。 图1 选择组件

查看更多 →

编辑云存储挂载 已配置云存储挂载后，您如需更新挂载路径、读写权限、文件掩码等，可参考以下步骤进行操作。 操作步骤 登录CAE控制台。 在左侧导航栏中选择“组件配置”。 在“组件配置”页面上方的下拉框中选择待操作的组件。 图1 选择组件 单击“云存储配置”模块中的“编辑”，进入云存储配置页面。

查看更多 →