中软国际数据治理专业服务解决方案实践

通过设置数据分片提升性能 对于DDS集群实例，如果某个集合的存储量很高，建议对该集合设置数据分片。分片是将数据按照某种方式拆分，将其分散存放在不同的机器上，以充分利用各分片节点的存储空间和计算性能。 设置数据分片 下面以数据库mytable，集合mycoll，字段“name”为分片键举例说明。

查看更多 →

通过设置数据分片提升性能 对于DDS集群实例，如果某个集合的存储量很高，建议对该集合设置数据分片。分片是将数据按照某种方式拆分，将其分散存放在不同的机器上，以充分利用各分片节点的存储空间和计算性能。 设置数据分片 下面以数据库mytable，集合mycoll，字段“name”为分片键举例说明。

查看更多 →

上传采集机采集数据分片 功能介绍 将采集到的数据分片上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/sliceUploading 参数说明 无。 请求 请求样例 POST https://ip:port

查看更多 →

什么是入图调度的数据起止时间和数据分片间隔？ 数据起止时间是确定入图的数据范围，数据分片则是定义了系统从后台取数据的粒度。用户可以基于自己实际的业务数据情况，灵活制定入图的数据起止时间和数据分片间隔，可以达到一个最优的性能。 假设用户选择的数据起止时间为2022-08-01 00:00:00到2022-08-03

查看更多 →

分片变更 特性和应用场景介绍 变更评估 预检查 分片变更操作指导

查看更多 →

实例状态为正常、恢复检查中时可以添加分片。 实例进行添加分片时，该实例不可被删除。 添加分片成功后，系统会自动扩容新增分片数*分片规格（GB）的存储容量。 添加分片目前只支持集群版实例。 方法一 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Redis 接口”。 在“实例管理”页面，选择指定的实例，单击实例名称。

查看更多 →

源数据库分片键配置检查 MongoDB迁移场景 表1 源数据库分片键配置检查 预检查项 源数据库分片键配置检查。 描述 检查用户提供的目标数据库账号权限是否符合迁移要求，若权限不够，会导致迁移失败。 不通过提示及处理建议 待确认原因：源数据库是副本集，没有分片键配置。 处理建议：

查看更多 →

上传分片文件 功能介绍 上传分片文件 URI POST /v1/{project_id}/sbc/task/multipart 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id 最小长度：32 最大长度：32 请求参数

查看更多 →

并将数据块均衡地分布到所有分片中。为了按照片键划分数据块，MongoDB数据库使用基于范围的分片方式或者基于哈希的分片方式。 表1 分片键分类 分片键类型 描述 使用场景 基于范围的分片键 基于范围的分片键是根据分片键值把数据分成一个个邻接的范围，如果没有指定特定的分片类型，则基于范围的分片键是默认的分片类型。

查看更多 →

集群分片倒换 功能介绍 集群分片倒换，适用于proxy和cluster实例。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/instance/{instance_id}/groups/{group_id}/replications/{nod

查看更多 →

分片与副本 设置备节点优先级 域名 摘除IP 查询分片信息 批量查询实例节点信息 查询实例节点信息 获取副本状态 父主题： API V2（推荐）

查看更多 →

InstanceGroupListInfo objects 分片列表。 group_count Integer 实例分片总数。 表3 InstanceGroupListInfo 参数 参数类型 描述 group_id String 分片ID。 group_name String 分片名称。 replication_list

查看更多 →

group_count String 实例分片总数。 group_list Array of objects 分片列表。具体参数请参见表2。 表2 group_list参数说明 参数 参数类型 描述 group_id String 分片id group_name String 分片名称 replication_list

查看更多 →

DN分片扩容 功能介绍 数据库DN分片扩容。 该接口计划于2025-03-31下线，建议及时切换到新接口CN横向扩容/DN分片扩容/磁盘扩容。 调用接口前，您需要了解API 认证鉴权。 调用接口前，您需要提前获取到地区和终端节点，即下文中的Endpoint值。 DN分片扩容期间会有闪断，请谨慎操作。

查看更多 →

日期函数(字段名)”，数据表字段必须是日期类型（date、datetime、timestamp），日期函数适用于需要按时间（年、月、日、周及其组合）对数据进行拆分的场景。 DDM根据拆分键与拆分算法计算路由结果，对拆分表的数据进行自动水平拆分，分发到数据分片中。 选取拆分算法与拆分键一般遵循以下规则：

查看更多 →

会将实例设置为只读，无法再写入数据，实例进入盘满只读状态。您可以通过指定数据分片磁盘扩容功能扩容数据库指定分片的磁盘。磁盘扩容期间，服务不中断。 注意事项 在最大值的允许范围内，扩容磁盘后磁盘使用率不能仍然高于阈值（默认85%）。 节点状态需要为正常，否则应先联系运维人员修复节点。

查看更多 →

数据量在1000万条以上的表，建议分片。将数据分片存储后，既能解决单张表容量过大带来的性能瓶颈，同时提高并发支持。注意要选择合适的拆分键，提前做好规划。 业务读取尽量少用多表JOIN，同一个事务避免跨分片。 查询条件尽量带上拆分键，避免全拆分表扫描。 父主题： DDM使用类

查看更多 →

不建议在显示事务中使用join语句，为保证事务内数据可见性，可能无法使用最优join执行计划。 Union SQL调优建议 不建议大表间进行union（不包含union all）操作，避免去重时超出临时表限制。 不建议union中使用order by 和group by。 临时表调优建议 跨数据分片在执行join、union、group

查看更多 →

参考：作业分片维度 CDM 在进行作业分片时，根据源端数据源的差异，分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务（DWS） 支持按表字段分片。 不支持按表分区分片。 数据湖探索（ DLI ） 支持分区表的分区信息分片。

查看更多 →

在逻辑库列表页面，单击“操作”列“分片变更”。 图1 选择分片变更操作 在“分片变更”页面，填选对应参数，单击“测试”。 图2 分片变更 表1 参数说明 参数名称 说明 已有实例和分片 展示已有实例和分片数的信息。 变更后逻辑库总分片数 默认显示的是当前已有的总分片数，如果需要增加分片，请填写增加后

查看更多 →

参考：作业分片维度 CDM在进行作业分片时，根据源端数据源的差异，分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务（DWS） 支持按表字段分片。 不支持按表分区分片。 数据湖探索（DLI） 支持分区表的分区信息分片。

查看更多 →