存储配置 参数 描述 默认值 hoodie.parquet.max.file.size Hudi写阶段生成的parquet文件的目标大小。对于DFS，这需要与基础文件系统块大小保持一致，以实现最佳性能。 120 * 1024 * 1024 byte hoodie.parquet.block

查看更多 →

配置云存储 云存储说明 配置并行文件系统 配置存储桶 配置通用型文件系统 编辑云存储挂载 删除云存储挂载 父主题： 组件配置

查看更多 →

挂载路径及挂载路径下文件，有“读写”、“只读”两种权限。 图3 存储桶配置 （可选）单击“添加挂载路径”，可配置多条挂载路径。 单击“确定”，完成存储桶配置。 在“云存储配置”页面中可查看配置好的存储桶。 使配置生效。 如已完成组件部署，单击页面上方“生效配置”。在右侧弹框中确认配置信息，并单击“确定”，使配置生效。

查看更多 →

作 > 配置数据存储”，进入“配置数据存储”页面。 （可选）批量配置数据存储。 在“云服务监控”页面，勾选需要“配置数据存储”的云服务资源，单击“批量配置数据存储”，进入“批量配置数据存储”页面。 或在“主机监控”页面，勾选需要“配置数据存储”弹性云 服务器 ，单击“批量配置数据存储”，进入“批量配置数据存储”页面。

查看更多 →

读写模式 独享型实例测试列表 表1 读写模式测试数据（X86架构多AZ场景） 模型 表数量 表数据量 线程 规格 TPS QPS 读写模式 25 250000 64 2c8g 1708.43 34168.62 64 2c16g 1645.88 32917.69 128 4c16g

查看更多 →

Spark读写Hudi资源配置建议 Spark读写Hudi任务资源配置规则，内存和CPU核心的比例2:1，堆外内存和CPU核心比例0.5:1；即一个核心，需要2G堆内存，0.5G堆外内存 Spark初始化入库场景，由于处理的数据量比较大，上述资源配比需要调整，内存和Core的比例

查看更多 →

配置NFS服务器存储NameNode元数据 操作场景 本章节适用于 MRS 3.x及后续版本。 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS

查看更多 →

配置NFS服务器存储NameNode元数据 操作场景 本章节适用于MRS 3.x及后续版本。 用户在部署集群前，可根据需要规划Network File System（简称NFS）服务器，用于存储NameNode元数据，以提高数据可靠性。 如果您已经部署NFS服务器，并已配置NFS

查看更多 →

便进行数据文件的操作。 配置说明 参考进入租户管理员配置界面进入租户管理员配置界面，在租户管理员界面上，单击“连接器配置”下的“OBS”，跳转到OBS列表页。 单击“新建”。 参考界面和表1配置必选参数。 表1 OBS存储配置参数说明 字段 说明 如何配置 基本信息 名称 OBS连接器的名称，用户自定义。

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录 FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

配置存储迁移方案 迁移中心为多种资源的不同迁移方案配置模板，可以面向迁移工作流进行一站式配置，并按应用显示配置进度。本节介绍为对象存储批量迁移配置迁移方案的方法。 对象存储批量迁移：适用于源端有多个对象存储桶资源需要迁移的场景。如果只有单个对象存储桶资源需要迁移，请直接创建单个 对象存储迁移 工作流。

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →

云硬盘读写慢或IO升高怎么办 问题现象 当您感知到业务变慢时，可以通过以下方法进行检查： Windows：查看“任务管理器”中的“平均响应时间”。 Linux：执行iostat -dx命令查看IO性能。 如果云硬盘出现读写慢、IO升高、await值变大等现象，说明云硬盘的性能出现了瓶颈。

查看更多 →

配置 DLI 读写外部数据源数据 配置DLI读写外部数据源数据的操作流程 配置DLI与数据源网络连通（增强型跨源连接） 使用DEW管理数据源访问凭证 使用DLI的跨源认证管理数据源访问凭证 管理增强型跨源连接 典型场景示例：配置DLI与内网数据源的网络联通 典型场景示例：配置DLI 与公网网络连通

查看更多 →

读写分离 场景四： 如上图，实线为DCG指示激活AZ1，虚线为DCG指示激活为AZ2。跟场景三不同之处在于，场景四中存在从库，进行读写分离，写操作在主库，读操作在从库进行。 配置如下： # 基础信息 - 可选项, 当配置etcd后为必选 props: version: v1

查看更多 →

单边读写 此模式为MAS-Mongo-SDK的默认路由模式，在单边读写模式下，对Mongo的读写操作都在同一Mongo数据库(dc1或dc2)进行，通过配置文件中的active字段或MAS界面配置活跃节点来指定。（通过注解指定数据源的场景例外，注解强制指定路由见强制路由）。 配置示例：

查看更多 →

配置Elasticsearch集群读写分离 场景描述 读写分离支持将写入主集群（Leader）的数据自动同步到从集群（Follower），实现主集群承担写入任务，从集群承担查询任务。读写分离可以将读写压力分开，提高查询的性能。当主集群无法提供服务时，可以通过主从切换使用从集群提供写入和查询服务，保证业务可以正常进行。

查看更多 →

数据读写类 CloudTable HBase存储的是原始数据吗？ 为什么HBase无法写入数据？ HBase集群写入数据大小不能超过多少？ HBase表格存储的每日新增数据使用量怎么查看? 怎么查看catalog指定数据库下的列表？ 访问CloudTable HBase集群报错，hmaster 域名 不识别？

查看更多 →

单边读写 这种路由算法场景下，对数据库的读写操作都只在一边（数据中心1或者数据中心2）进行，根据active指示，在相应的那边数据中心操作。（通过注解指定的场景例外，注解指定见强制路由） 路由算法不支持动态切换，更改路由算法，需要重启服务。 无从库 读写分离 父主题： 使用场景

查看更多 →