中软国际数据治理专业服务解决方案实践

示例： 选择合适的分片键 背景 分片集群中数据的分片以集合为基础单位，集合中的数据通过分片键被分成多个部分。分片键是在集合中选择的一个合适的字段，数据拆分时以该分片键的值为依据均衡地分布到所有分片中。如果您没有选择到合适的的分片键，可能会降低集群的使用性能，出现执行分片语句时执行过程卡住的问题。

查看更多 →

分片变更 特性和应用场景介绍 变更评估 预检查 分片变更操作指导

查看更多 →

实例状态为正常、恢复检查中时可以添加分片。 实例进行添加分片时，该实例不可被删除。 添加分片成功后，系统会自动扩容新增分片数*分片规格（GB）的存储容量。 添加分片目前只支持集群版实例。 方法一 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Redis 接口”。 在“实例管理”页面，选择指定的实例，单击实例名称。

查看更多 →

示例： 选择合适的分片键 背景 分片集群中数据的分片以集合为基础单位，集合中的数据通过分片键被分成多个部分。分片键是在集合中选择的一个合适的字段，数据拆分时以该分片键的值为依据均衡地分布到所有分片中。如果您没有选择到合适的的分片键，可能会降低集群的使用性能，出现执行分片语句时执行过程卡住的问题。

查看更多 →

上传分片文件 功能介绍 上传分片文件 URI POST /v1/{project_id}/sbc/task/multipart 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id 最小长度：32 最大长度：32 请求参数

查看更多 →

上传采集机采集数据分片 功能介绍 将采集到的数据分片上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/sliceUploading 参数说明 无。 请求 请求样例 POST https://ip:port/

查看更多 →

源数据库分片键配置检查 MongoDB迁移场景 表1 源数据库分片键配置检查 预检查项 源数据库分片键配置检查。 描述 检查用户提供的目标数据库账号权限是否符合迁移要求，若权限不够，会导致迁移失败。 不通过提示及处理建议 待确认原因：源数据库是副本集，没有分片键配置。 处理建议：

查看更多 →

并将数据块均衡地分布到所有分片中。为了按照片键划分数据块，MongoDB数据库使用基于范围的分片方式或者基于哈希的分片方式。 表1 分片键分类 分片键类型 描述 使用场景 基于范围的分片键 基于范围的分片键是根据分片键值把数据分成一个个邻接的范围，如果没有指定特定的分片类型，则基于范围的分片键是默认的分片类型。

查看更多 →

集群分片倒换 功能介绍 集群分片倒换，适用于proxy和cluster实例。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/instance/{instance_id}/groups/{group_id}/replications/{nod

查看更多 →

分片与副本 设置备节点优先级 域名 摘除IP 查询分片信息 批量查询实例节点信息 查询实例节点信息 获取副本状态 父主题： API V2（推荐）

查看更多 →

InstanceGroupListInfo objects 分片列表。 group_count Integer 实例分片总数。 表3 InstanceGroupListInfo 参数 参数类型 描述 group_id String 分片ID。 group_name String 分片名称。 replication_list

查看更多 →

group_count String 实例分片总数。 group_list Array of objects 分片列表。具体参数请参见表2。 表2 group_list参数说明 参数 参数类型 描述 group_id String 分片id group_name String 分片名称 replication_list

查看更多 →

DN分片扩容 功能介绍 数据库DN分片扩容。 该接口计划于2025-03-31下线，建议及时切换到新接口CN横向扩容/DN分片扩容/磁盘扩容。 调用接口前，您需要了解API 认证鉴权。 调用接口前，您需要提前获取到地区和终端节点，即下文中的Endpoint值。 DN分片扩容期间会有闪断，请谨慎操作。

查看更多 →

参考：作业分片维度 CDM 在进行作业分片时，根据源端数据源的差异，分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务（DWS） 支持按表字段分片。 不支持按表分区分片。 数据湖探索（ DLI ） 支持分区表的分区信息分片。

查看更多 →

根据指定的表字段将数据平均拆分到各个分片上。 根据指定的表字段+日期函数将数据平均拆分到各个分片上。 表字段必须是日期类型（date、datetime、timestamp）。 将数据表内的记录按照算法元数据定义的规则将数据拆分到指定的分片上。 根据指定的表字段+日期函数将数据按照算法元数据的规则将数据拆分到各个分片上。

查看更多 →

在逻辑库列表页面，单击“操作”列“分片变更”。 图1 选择分片变更操作 在“分片变更”页面，填选对应参数，单击“测试”。 图2 分片变更 表1 参数说明 参数名称 说明 已有实例和分片 展示已有实例和分片数的信息。 变更后逻辑库总分片数 默认显示的是当前已有的总分片数，如果需要增加分片，请填写增加后

查看更多 →

参考：作业分片维度 CDM在进行作业分片时，根据源端数据源的差异，分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务（DWS） 支持按表字段分片。 不支持按表分区分片。 数据湖探索（DLI） 支持分区表的分区信息分片。

查看更多 →

写ES报timeout waiting for connection from pool错误怎么解决？ 问题描述 写ES报timeout waiting for connection from pool，且日志中输出多个es_rejected_execution_exception。

查看更多 →

使用JavaScript调用API报“{error_msg: "The API does not exist or has not been published in an environment",…}”错误 原因分析 可能是以下三种原因导致，请逐一排查： API未发布到环境。

查看更多 →

什么是入图调度的数据起止时间和数据分片间隔？ 数据起止时间是确定入图的数据范围，数据分片则是定义了系统从后台取数据的粒度。用户可以基于自己实际的业务数据情况，灵活制定入图的数据起止时间和数据分片间隔，可以达到一个最优的性能。 假设用户选择的数据起止时间为2022-08-01 00:00:00到2022-08-03

查看更多 →

创建上传分片文件任务 功能介绍 创建上传分片文件任务 URI POST /v1/{project_id}/sbc/task/multipart/create 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id 最小长度：32

查看更多 →