中软国际数据治理专业服务解决方案实践

当为list分布表时，表示当前boundary在某个分片内的位置。 interval text[] 预留字段。 transitboundary text[] 预留字段。 transitno integer 预留字段。 nodeoid oid 当relname为分片名时，表示该分片的数据存放在哪个DN上，nodeoid表示这个DN的oid。

查看更多 →

nodeoid oid 当relname为分片名时，表示该分片的数据存放在哪一个DN上，nodeoid表示这个DN的oid。 boundaries text[] 当relname为分片名时，对应该分片的边界值。 specified boolean 当前分片对应的DN是否是用户在DDL中显示指定的。

查看更多 →

最小队列数 个 可用于并行发送到远程存储的分片数的最小值 期望队列数 个 分片队列期望基于输入样本和输出样本的比率运行的分片数 队列容量 个 用于并行发送到远程存储的队列每个分片的容量 挂起中的样本数 个 用于并行发送到远程存储的队列中每个分片的容量 TSDB当前段 段 TSDB当前正在写入的WAL段索引

查看更多 →

failed, cause by: shard table=`%s`.`%s` failed 可能原因 源库性能不足或网络不稳定导致源库数据分片超时。 解决方案 查看任务状态是否正常。 任务状态正常，该报错为日志中显示，无需处理。 任务状态异常，执行2。 在管理控制台右上角，选择“工单

查看更多 →

续Key的数据会放到迁移机的内存Buffer中，如果阻塞时间太久，则会导致迁移失败。 容易造成集群分片不均的情况。 各分片内存使用不均。例如某个分片占用内存较高甚至首先使用满，导致该分片Key被逐出，同时也会造成其他分片的资源浪费。 各分片的带宽使用不均。例如某个分片被频繁流控，其他分片则没有这种情况。

查看更多 →

执行DN主备倒换 操作场景 GaussDB 实例状态正常时支持对分片内的DN做主备切换，可以选择同一分片内的备DN进行升主操作。 约束限制 实例节点状态为异常时不能执行该操作。 同一分片内只能指定一个备节点升主。 单节点实例不支持DN分片主备倒换操作。 主备倒换过程中，以下操作不可进行： 实例重启

查看更多 →

如果您的DN节点是RDS实例，无需解决。 广播表数据一致性检查 保证广播表数据一致后再执行分片变更。 请联系DDM运维人员。 源物理分片的字符集和排序规则检查 保证分片变更后字符的展示和排序一致。 请联系DDM运维人员。 物理表建表语句检查 保证各物理分片上的表结构保持一致。 请先使用check

查看更多 →

PARTITION参数：指定扫描某个数据分片，当SCAN命令返回的cursor游标为0时，说明该数据分区已扫描完成。 partition_index: 是全部数据分片ID的字典序号，从0开始。例如：当实例中共有4个数据分区，则全部分区的partition_index为[0,3]；当实例中有240个数据分区，则

查看更多 →

table shard occur! Table is %s .Error code is %s. 可能原因 源库性能不足或网络不稳定导致源库数据分片超时。 解决方案 查看任务状态是否正常。 任务状态正常，该报错为日志中显示，无需处理。 任务状态异常，执行2。 在管理控制台右上角，选择“工单

查看更多 →

无数据：当前分片节点上该表没有数据。 已同步：当前分片节点上该表有数据，并且分片下多个副本实例间的数据一致。 未同步：当前分片节点上该表有数据，但分片下多个副本实例间的表数据不一致。 详情 数据表在对应ClickHouseServer实例上的表数据同步详情。 过滤条件 选择“按数据表查询”，搜索框输入对应的数据表表名进行过滤查询。

查看更多 →

分片大小，决定了全量阶段单个分片最大数据的数据条数以及分片个数。分片大小越大，单个分片数据条数越多，分片个数越小。 当表的条数过多时，作业会划分较多的分片，从而占用过多的内存导致内存问题，请解决表的条数适当调整该值。 当scan.incremental.snapshot.backfill.skip为f

查看更多 →

什么是源端映射和目标端映射？ 什么是增量字段？ 关系型数据库映射配置中DelFlag字段的作用是什么？ 创建数据质量任务时，怎么选不出数据实体？ 在LinkX-F中，为什么xDM-F来源的实例数据的最后更新时间显示与xDM-F中不一致 什么是入图调度的数据起止时间和数据分片间隔？ 聚合服务编排中非纯脚本

查看更多 →

提升使用效率。 数据查询流程 图1 数据查询流程 如图1所示，以Elasticsearch集群为例，介绍客户端往Elasticsearch或OpenSearch集群发送查询请求的流程。图中的P表示主分片Primary，R表示副本分片Replica，主副分片在数据节点Node里是随机分配的，但是不能在同一个节点里。

查看更多 →

分片大小，决定了全量阶段单个分片最大数据的数据条数以及分片个数。分片大小越大，单个分片数据条数越多，分片个数越小。 当表的条数过多时，作业会划分较多的分片，从而占用过多的内存导致内存问题，请解决表的条数适当调整该值。 当scan.incremental.snapshot.backfill.skip为f

查看更多 →

其他规避建议： 对于集群模式，建议开启数据库的分片功能，再对其中的集合进行分片。 对于未开启分片功能的数据库。在删除数据库或集合之后，不建议创建同名的数据库或集合。 如果因业务需求，需要创建同名的数据库或集合，请在删除数据库或集合之后，创建同名的数据库或集合之前，登录到所有的mongos节点上，执行刷新路由表的操作。

查看更多 →

二进制成分分析 创建上传分片文件任务 上传分片文件 结束上传分片文件任务 创建二进制成分分析扫描任务 获取任务状态 停止任务 删除任务 获取开源漏洞分析报告 获取开源漏洞分析统计数据 获取密钥和信息泄露统计数据 获取安全编译选项统计数据 获取安全配置统计数据 创建报告PDF 查看报告PDF状态

查看更多 →

发送音频数据 在收到“开始识别”的响应之后，可以开始发送音频数据。为节省流量，音频以二进制数据帧形式（binary message）的方式发送。 音频数据将分片发送，也即在获得一定量音频数据的同时就可以发送一个binary message，每个分片建议在50ms~1000ms之间

查看更多 →

表3 手工调度配置参数说明 参数 说明 数据起止时间 确定入图的数据范围，即数据起始时间和数据终止时间。 非首次制定计划数据起止时间根据上次调度数据结束时间与系统当前时间自动填充。 数据分片间隔 数据分片定义了系统从后台取数据的粒度，数据分片间隔根据选择单位和计数器制定。 分钟从5起步，自增长步长为5，最大不超过60。

查看更多 →

拆分键的类型只支持整型类型、日期类型和日期函数结合，如果使用日期函数，拆分键的数据类型必须是date、datetime、timestamp其一。 路由方式 根据拆分键，按照算法元数据的规则将数据行存储到相应的分片上。 建表时要设定元数据，假如逻辑库分8个分片，则元数据可以设定的范围为：1-2=0，3-4=1，5-

查看更多 →

不均，具体可通过以下方法进行定位分析。 检查分片（shard）数据量是否过大。 单个分片数据量过大，可能引起Bulk Reject，建议单个分片大小控制在20GB - 50GB左右。可在kibana控制台，通过如下命令查看索引各个分片的大小。 GET _cat/shards?index=index_name&v

查看更多 →

单机：不允许跨分片事务。 FREE：跨分片事务commit时部分失败无法回滚，导致数据不一致。 XA分布式事务：两阶段提交，跨分片事务commit时部分失败会自动回滚，保证事务内数据一致性。 数据导入导出 支持外部数据导入，帮助用户实现数据库平滑上云。支持DDM实例数据按业务需求导出。

查看更多 →