中软国际数据治理专业服务解决方案实践

分片上传文件（API名称：uploadRiskBigFile） 功能介绍 该接口用于分片上传文件。 URL 请求方式 HTTPS地址 消息体类型 POST https://AppCube 域名 /service/ISDP__SecurityRiskBO/1.0.1/uploadRiskBigFile

查看更多 →

分片文件上传（API名称：file/uploadBigFile） 功能介绍 该接口用于大文件的分片文件上传。 相关接口 接口名称 调用说明 获取Token 调用该接口获取到Token，再调用其他接口时，需要在请求消息头中添加“Authorization”，其值即为Token。 URL

查看更多 →

count 是 Integer 新增DN分片的数量。 表6 enlarge_volume字段数据结构说明 名称 是否必选 参数类型 说明 size 是 Integer GaussDB 磁盘大小要求（分片数*4GB）的倍数；取值范围：（分片数*40GB）~（分片数*24TB）。 响应参数 表7

查看更多 →

有查询条件，也必须创建对应的索引。 对于DDS集群实例，如果某个集合的存储量很高，需要对该集合设置合理的数据分片，详情请参考通过设置数据分片提升性能。 对于数据库和集合的元数据信息（如文档数量、存储大小等），可以使用db.stats()和db.<collection_name>.

查看更多 →

负载均匀，数据分片的个数和范围与源表的数据无关，而是由源表的存储结构（数据块）确定，颗粒度可以达到“每个数据块一个分区”。 性能稳定，完全消除“数据偏斜”和“绑定变量窥探”导致的“索引失效”。 查询速度快，数据分片的查询速度比用索引快。 水平扩展性好，如果数据量越大，产生的分片就越多

查看更多 →

减少性能损耗。 分片设计规范 对于使用DDS分片集群，建议尽可能的使用分片集合以充分利用性能，详情请参见设置数据分片以充分利用分片性能。 分片集合使用上建议如下： 对于大数据量（数据量过百万），并有较高读写请求的业务场景，数据量随着业务量增大而增大的，建议采用分片。 对于采用ha

查看更多 →

负载均匀，数据分片的个数和范围与源表的数据无关，而是由源表的存储结构（数据块）确定，颗粒度可以达到“每个数据块一个分区”。 性能稳定，完全消除“数据偏斜”和“绑定变量窥探”导致的“索引失效”。 查询速度快，数据分片的查询速度比用索引快。 水平扩展性好，如果数据量越大，产生的分片就越多

查看更多 →

直播录制支持的ts分片大小是多少？ 直播录制支持的ts分片大小为30秒。 父主题： 直播录制

查看更多 →

减少性能损耗。 分片设计规范 对于使用DDS分片集群，建议尽可能的使用分片集合以充分利用性能，详情请参见设置数据分片以充分利用分片性能。 分片集合使用上建议如下： 对于大数据量（数据量过百万），并有较高读写请求的业务场景，数据量随着业务量增大而增大的，建议采用分片。 对于采用ha

查看更多 →

num*replication num）秒。如果创建较多的数据分片，并且其中有分片创建失败，则可能导致等待较长超时后，才会返回错误。 正常情况下，建表语句会在几秒或十几秒内返回。如果超过一分钟，建议直接取消掉这个操作，前往FE或BE的日志查看相关错误。 父主题： 数据分区和分桶

查看更多 →

同时ClickHouse使用了关系模型，所以将构建在传统关系型数据库或数据仓库之上的系统迁移到ClickHouse的成本会变得更低。 数据分片与分布式查询 ClickHouse集群由1到多个分片组成，而每个分片则对应了ClickHouse的1个服务节点。分片的数量上限取决于节点数量（1个分片只能对应1个服务节点）。 ClickHouse提供了本地表

查看更多 →

性能调优 参数调优 数据库读写性能提升 实例CPU使用率高问题排查 磁盘使用率高问题排查 内存使用率高问题排查 集群实例负载不均衡问题排查 慢请求定位方法 优化数据库语句方法 通过设置数据分片提升性能

查看更多 →

DDS在分片节点扩容期间服务是否可用 可用，文档数据库服务的扩容操作是在实例中增加新的分片，原实例中的分片不变，不影响服务的可用性。 父主题： 扩容及规格变更

查看更多 →

在需要规格变更的实例右侧，单击“操作”栏下的“更多 > 变更规格”，进入到变更实例规格页面。 选择“规格选择模式”为“自定义分片”，并选择需要的“单分片容量”。 如果未开启该特性的白名单，默认仅支持选择不大于当前单分片容量的数值。 父主题： 扩容缩容与实例升级

查看更多 →

采集机相关接口（机机接口） 注册采集机 更新采集机状态 上报采集机采集数据 上传采集机采集数据分片 下载探针包到采集机 上报采集状态 上报采集机升级状态 下载kafka证书到采集机 采集机注册时上传csv文件 上报采集过程 父主题： 数据接入

查看更多 →

imary节点的服务端口。 database：鉴权数据库名，即数据库账号所属的数据库。 username：登录数据库的账号。 password：登录数据库的密码。 如果您有多个数据库，您需要重复执行步骤2和步骤3，分别为每个数据库的每个Shard节点清理孤立文档。 父主题： 实时迁移

查看更多 →

如何查看 CSS 集群的分片数以及副本数？ 登录 云搜索 控制台。 在集群管理页面，选择需要查看的集群操作列的Kibana。 登录Kibana界面，选择Dev Tools。 在Dev Tools的Console界面中执行GET _cat/indices?v命令，查询集群分片数和副本数。如图，

查看更多 →

tition个数。 任务容易出现内存溢出：部分数据分片较大，单个task处理数据过大，或者executor中并行度不足，单个task内存不足导致。此时应减少executor数量，增大数据分片。 数据量少，但小文件数量多：减少数据分片，在reduce算子后执行coalesce算子，以减少task数量，减少cpu负载。

查看更多 →

DDM支持以下三种不同的分片变更方式，以满足不同的应用场景。 方式一：分片数不变，增加数据节点数量 该变更方式不改变当前分片数，只增加数据节点数量。将原数据节点的部分分片平移到新增数据节点上，分片数据进行平移，数据相对位置不需要重新分布，所以变更速度最快，推荐您优先使用此方式进行分片变更。 该

查看更多 →

DES如何保证数据不会被盗用？ Teleport防尘防水、抗震抗压、安全锁功能确保数据在寄送途中的万无一失。 数据上传需要由您手工输入访问密钥（AK/SK）自动触发，全程无人接触密钥和数据。 通过DES传输的数据最终保存在 对象存储服务 OBS中，OBS服务将数据分片随机存储在不同硬

查看更多 →

其他云MongoDB迁移到DDS 介绍DDS数据迁移的操作。 本地MongoDB迁移到DDS E CS 自建MongoDB迁移DDS 如何实现副本集高可用和读写分离 介绍如何连接副本集实例以实现高可用性能。 通过设置数据分片提升性能 介绍如何设置集群分片来提高数据库性能。 如何通过SQL优化来提升DDS性能

查看更多 →