中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    数据分片 更多内容
  • 指定数据分片磁盘扩容

    在“实例管理”页面,选择指定的实例,单击实例的名称。 在“基本信息”页面,“数据库信息”模块的“分片数量”处,单击“磁盘扩容”,进入“磁盘扩容”页面。 图1 基本信息 在“磁盘扩容”页面,选择对应的分片并选择空间大小,点击“添加分片磁盘容量”,单击“下一步”。 图2 指定数据分片磁盘扩容 选择空间大小时,需要考虑扩容

    来自:帮助中心

    查看更多 →

  • 通过设置数据分片提升性能

    通过设置数据分片提升性能 对于DDS集群实例,如果某个集合的存储量很高,建议对该集合设置数据分片分片是将数据按照某种方式拆分,将其分散存放在不同的机器上,以充分利用各分片节点的存储空间和计算性能。 设置数据分片 下面以数据库mytable,集合mycoll,字段“name”为分片键举例说明。

    来自:帮助中心

    查看更多 →

  • 通过设置数据分片提升性能

    通过设置数据分片提升性能 对于DDS集群实例,如果某个集合的存储量很高,建议对该集合设置数据分片分片是将数据按照某种方式拆分,将其分散存放在不同的机器上,以充分利用各分片节点的存储空间和计算性能。 设置数据分片 下面以数据库mytable,集合mycoll,字段“name”为分片键举例说明。

    来自:帮助中心

    查看更多 →

  • 上传采集机采集数据分片

    上传采集机采集数据分片 功能介绍 将采集到的数据分片上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/sliceUploading 参数说明 无。 请求 请求样例 POST https://ip:port

    来自:帮助中心

    查看更多 →

  • 分片变更

    分片变更 特性和应用场景介绍 变更评估 预检查 分片变更操作指导

    来自:帮助中心

    查看更多 →

  • 分片缩容

    GaussDB ”,进入云数据库 GaussDB信息页面。 在“实例管理”页面,选择指定的实例,单击实例的名称。 在“基本信息”页面,“数据库信息”模块,单击“分片数量”后的“删除”。 图1 分片缩容 选择删除分片数量。单击“下一步”。 图2 分片缩容 确认无误后,单击“提交”进行分片数量缩容。

    来自:帮助中心

    查看更多 →

  • 上传分片文件

    上传分片文件 功能介绍 上传分片文件 URI POST /v1/{project_id}/sbc/task/multipart 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id 最小长度:32 最大长度:32 请求参数

    来自:帮助中心

    查看更多 →

  • 源数据库分片键配置检查

    数据分片键配置检查 MongoDB迁移场景 表1 源数据分片键配置检查 预检查项 源数据分片键配置检查。 描述 检查用户提供的目标数据库账号权限是否符合迁移要求,若权限不够,会导致迁移失败。 不通过提示及处理建议 待确认原因:源数据库是副本集,没有分片键配置。 处理建议:

    来自:帮助中心

    查看更多 →

  • 如何设置MongoDB数据库分片集群的分片键

    并将数据块均衡地分布到所有分片中。为了按照片键划分数据块,MongoDB数据库使用基于范围的分片方式或者基于哈希的分片方式。 表1 分片键分类 分片键类型 描述 使用场景 基于范围的分片键 基于范围的分片键是根据分片键值把数据分成一个个邻接的范围,如果没有指定特定的分片类型,则基于范围的分片键是默认的分片类型。

    来自:帮助中心

    查看更多 →

  • 查询分片信息

    InstanceGroupListInfo objects 分片列表。 group_count Integer 实例分片总数。 表3 InstanceGroupListInfo 参数 参数类型 描述 group_id String 分片ID。 group_name String 分片名称。 replication_list

    来自:帮助中心

    查看更多 →

  • 集群分片倒换

    集群分片倒换 功能介绍 集群分片倒换,适用于proxy和cluster实例。 调用方法 请参见如何调用API。 URI POST /v2/{project_id}/instance/{instance_id}/groups/{group_id}/replications/{nod

    来自:帮助中心

    查看更多 →

  • 分片与副本

    分片与副本 设置备节点优先级 域名 摘除IP 查询分片信息 批量查询实例节点信息 查询实例节点信息 获取副本状态 父主题: API V2(推荐)

    来自:帮助中心

    查看更多 →

  • 查询分片信息

    group_count String 实例分片总数。 group_list Array of objects 分片列表。具体参数请参见表2。 表2 group_list参数说明 参数 参数类型 描述 group_id String 分片id group_name String 分片名称 replication_list

    来自:帮助中心

    查看更多 →

  • DN分片扩容

    DN分片扩容 功能介绍 数据库DN分片扩容。 该接口计划于2025-03-31下线,建议及时切换到新接口CN横向扩容/DN分片扩容/磁盘扩容。 调用接口前,您需要了解API 认证鉴权。 调用接口前,您需要提前获取到地区和终端节点,即下文中的Endpoint值。 DN分片扩容期间会有闪断,请谨慎操作。

    来自:帮助中心

    查看更多 →

  • 合理制定分片策略

    日期函数(字段名)”,数据表字段必须是日期类型(date、datetime、timestamp),日期函数适用于需要按时间(年、月、日、周及其组合)对数据进行拆分的场景。 DDM根据拆分键与拆分算法计算路由结果,对拆分表的数据进行自动水平拆分,分发到数据分片中。 选取拆分算法与拆分键一般遵循以下规则:

    来自:帮助中心

    查看更多 →

  • DDM如何进行分片

    数据量在1000万条以上的表,建议分片。将数据分片存储后,既能解决单张表容量过大带来的性能瓶颈,同时提高并发支持。注意要选择合适的拆分键,提前做好规划。 业务读取尽量少用多表JOIN,同一个事务避免跨分片。 查询条件尽量带上拆分键,避免全拆分表扫描。 父主题: DDM使用类

    来自:帮助中心

    查看更多 →

  • 跨分片复杂SQL调优

    不建议在显示事务中使用join语句,为保证事务内数据可见性,可能无法使用最优join执行计划。 Union SQL调优建议 不建议大表间进行union(不包含union all)操作,避免去重时超出临时表限制。 不建议union中使用order by 和group by。 临时表调优建议 跨数据分片在执行join、union、group

    来自:帮助中心

    查看更多 →

  • 参考:作业分片维度

    参考:作业分片维度 CDM 在进行作业分片时,根据源端数据源的差异,分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务(DWS) 支持按表字段分片。 不支持按表分区分片数据湖探索( DLI ) 支持分区表的分区信息分片。

    来自:帮助中心

    查看更多 →

  • 分片变更操作指导

    在逻辑库列表页面,单击“操作”列“分片变更”。 图1 选择分片变更操作 在“分片变更”页面,填选对应参数,单击“测试”。 图2 分片变更 表1 参数说明 参数名称 说明 已有实例和分片 展示已有实例和分片数的信息。 变更后逻辑库总分片数 默认显示的是当前已有的总分片数,如果需要增加分片,请填写增加后

    来自:帮助中心

    查看更多 →

  • 参考:作业分片维度

    参考:作业分片维度 CDM在进行作业分片时,根据源端数据源的差异,分片维度有所不同。详情如表1所示。 表1 不同源端数据源的作业分片维度 数据源分类 源端数据源 作业分片原理 数据仓库 数据仓库服务(DWS) 支持按表字段分片。 不支持按表分区分片数据湖探索(DLI) 支持分区表的分区信息分片。

    来自:帮助中心

    查看更多 →

  • 业务侧原本做了数据分片,切换到GeminiDB Redis后如何处理这部分逻辑

    业务侧原本做了数据分片,切换到GeminiDB Redis后如何处理这部分逻辑 充分考虑到业务后期的规模扩张,GeminiDB Redis采用存算分离架构,在计算层实现了动态数据分片管理,提供强劲的平滑扩缩容能力。因此,接入GeminiDB Redis实例后,业务侧无需再做数据分片。 父主题:

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了