MySQL分库分表迁移到DDM 方案概述 资源规划 通过DRS迁移MySQL分库分表总流程 实施步骤 父主题： 实时迁移

查看更多 →

，详细情况可参考表3。DRS会根据用户选择，在“预检查”阶段对迁移对象进行自动检查。 表3 支持的迁移对象 类型名称 使用须知 迁移对象范围 支持选择表级迁移。 目前只支持迁移源库的数据，不支持迁移源库表结构及其他数据库对象。 仅支持MyISAM和InnoDB表的迁移。 不支持系统库的迁移以及事件状态的迁移。

查看更多 →

paceCheck 检查分区表是否在共享表空间。 目标版本不支持在共享表空间中使用分区表，请通过ALTER TABLE语句修改分区表的表空间。 partitionsReferencedCheck 检查分区表是否被普通表通过外键引用。 分区表不可被普通表引用，请删除外键引用。 pa

查看更多 →

通过DRS迁移MySQL分库分表总流程 本实践的主要任务流如图1所示： 图1 操作流程 表1 迁移流程 序号 步骤 说明 1 迁移前构造数据 迁移前在源端数据库构造数据，供迁移后查看是否迁移成功。 2 目标端DDM准备 创建VPC和安全组：为创建实例准备网络资源。 创建DDM实例：创建目标端DDM实例。

查看更多 →

使用mysqldump导出大表的注意事项 在使用mysqldump导出数据时，倘若添加–q(--quick) 参数时，select出来的结果将不会存放在缓存中，而是直接导出到标准输出中。如果不添加该参数，则会把select的结果放在本地缓存中，然后再输出给客户端。 如果只是备份小

查看更多 →

使用mysqldump导出大表的注意事项 在使用mysqldump导出数据时，倘若添加–q(--quick) 参数时，select出来的结果将不会存放在缓存中，而是直接导出到标准输出中。如果不添加该参数，则会把select的结果放在本地缓存中，然后再输出给客户端。 如果只是备份小

查看更多 →

通过DDM对RDS for MySQL实例进行分库分表 方案概述 RDS for MySQL准备 DDM准备 创建DRS迁移任务

查看更多 →

数据分区和分桶 Doris支持两层的数据划分。第一层是Partition（分区），支持Range（按范围）和List（按枚举值）的划分方式。第二层是Bucket（分桶），仅支持Hash的划分方式。分区和分桶都是对数据进行横向分割。 也可以仅使用一层分区。使用一层分区时，只支持Bu

查看更多 →

点查询场景。 AutoBucket: 根据数据量，计算分桶数。 对于分区表，可以根据历史分区的数据量、机器数、盘数，确定一个分桶。 分桶的数量理论上没有上限。 父主题： 数据分区和分桶

查看更多 →

RDS for MySQL支持分库分表及读写分离的业务功能吗 RDS支持分库分表及读写分离功能，具体如下： 分库分表功能依赖于所使用的分布式数据库中间件（Distributed Database Middleware，简称DDM），用于解决存储空间或者性能拓展的问题，详见通过DDM对RDS

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

新建数据大屏 大屏概述 新建大屏 大屏全局参数配置 大屏组件 预览大屏 发布大屏 复制大屏 大屏分享协作 管理大屏 典型场景示例

查看更多 →

分单（委派） 功能介绍 针对合同物流，介绍货主将运输需求委派给承运商的方式。 应用场景 场景一：订单给到承运商，承运商组合线路运输，无固定承运商合同且单量少 在自有运力无法满足现有业务情况下，货主会向外寻找第三方车辆完成运输任务。 运输合同一般是按照运输线路，运输货量等形式签订，

查看更多 →

方案概述 应用场景 传统数据库面临硬件成本高，维护难度大等问题，企业上云诉求强烈，本章介绍如何通过DRS服务，将MySQL分库分表数据库迁移至华为云DDM。 方案架构 本示例源端为一个分库分表关联两个MySQL实例，目标端为一个DDM关联两个RDS for MySQL实例，通过DRS将

查看更多 →

大容量数据库 大容量数据库背景介绍 表分区技术 数据分区查找优化 数据分区运维管理 父主题： 分区表

查看更多 →

使用mysqldump将表结构导出至SQL文件。 mysql数据库是云数据库RDS服务管理所必须的数据库，导出表结构时，禁止指定--all-database参数，否则会造成数据库故障。 mysqldump--databases<DB_NAME>--single-transaction --order-by-primary

查看更多 →

示。 映射MySQL表和Hive表字段，Hive表比MySQL表多三个字段y、ym、ymd，即是Hive的分区字段。由于没有源表字段直接对应，需要配置表达式从源表的StartDate字段抽取。 图7 Hive字段映射 单击进入转换器列表界面，再选择“新建转换器 > 表达式转换”，如图8所示。

查看更多 →

示。 映射MySQL表和Hive表字段，Hive表比MySQL表多三个字段y、ym、ymd，即是Hive的分区字段。由于没有源表字段直接对应，需要配置表达式从源表的StartDate字段抽取。 图9 Hive字段映射 单击进入转换器列表界面，再选择“新建转换器 > 表达式转换”，如图10所示。

查看更多 →

分桶统计 概述 对数据集的某些列，进行分桶，即直方图统计。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型，dataframe为pyspark中的DataFrame类型对象 输出 统计结果数据集 参数说明 参数 子参数 参数说明 select_columns_str

查看更多 →