快速查询响应：高性能查询是CarbonData关键技术的优势之一。CarbonData查询速度大约是Spark SQL查询的10倍。CarbonData使用的专用数据格式围绕高性能查询进行设计，其中包括多种索引技术、全局字典编码和多次的Push down优化，从而对TB级数据查询进行最快响应。

查看更多 →

CDL基本原理 CDL简介 CDL（全称Change Data Loader）是一个基于Kafka Connect框架的实时数据集成服务。 CDL服务能够从各种OLTP数据库中捕获数据库的Data Change事件，并推送到kafka，再由sink connector推送到大数据生态系统中。

查看更多 →

StarRocks节点及角色说明 名称 说明 Client Application StarRocks兼容MySQL协议，支持标准SQL语法，用户可通过各类MySQL客户端和常用BI工具对接。 FE StarRocks的前端节点，主要负责管理元数据、管理客户端连接、进行查询规划、查询调度等工作。

查看更多 →

工作负载伸缩原理 HPA工作原理 HPA（Horizontal Pod Autoscaler）是用来控制Pod水平伸缩的控制器，HPA周期性检查Pod的度量数据，计算满足HPA资源所配置的目标数值所需的副本数量，进而调整目标资源（如Deployment）的replicas字段。

查看更多 →

0)字段映射到DWS的SMALLINT。 图1 自动建表的字段映射 CDM 在Hive中自动建表时，Hive表与源表的字段类型映射关系参见表1、表2、表3及表4。例如使用CDM将MySQL整库迁移到Hive，CDM在Hive上自动建表，会将Oracle的YEAR字段映射到Hive的DATE。 针对DECIMAL

查看更多 →

主备复制延迟持续增长后自动恢复 场景描述 实例只读复制延迟很大，且在一段时间内持续增长，然后自动恢复。 查看CES指标实时复制时延，下图仅供参考： 原因分析 根据MySQL主备复制延迟场景及解决方案和MySQL主备复制原理简介的相关分析，可以推测此场景为大事务或DDL操作导致。 可以通过分析全量日志或慢日志，观察是否有大事务或DDL操作：

查看更多 →

略详情。 任务创建成功后，您可以单击任务名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。 对于创建失败的任务，DRS默认保留3天，超过3天将会自动结束任务。 录制回放实例创建成功后，在“源库及目标库”页面，填选源库信息、流量文件、目标库信息和任务配置后，单

查看更多 →

略详情。 任务创建成功后，您可以单击任务名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。 对于创建失败的任务，DRS默认保留3天，超过3天将会自动结束任务。 录制回放实例创建成功后，在“源库及目标库”页面，填选源库信息、流量文件、目标库信息和任务配置后，单

查看更多 →

完善SQL语法使用限制。 2021-11-11 第七次正式发布。 修改DDM实现原理图。 2021-01-15 第六次正式发布。 增加常用概念。 完善MySQL实例使用限制。 2020-12-28 第五次正式发布。 刷新DDM实现原理图。 2020-10-20 第四次正式发布。 刷新产品功能、网络访问使用限制等内容。

查看更多 →

步骤一：购买DDM实例及RDS for MySQL实例 本章节主要介绍如何在控制台上购买DDM实例和RDS for MySQL实例。 购买DDM实例 在华为云控制台登录页，输入账号及密码，登录华为云控制台。 单击管理左上角的，选择对应Region。 在管理控制页面单击，选择“数据库

查看更多 →

介绍如何创建RDS for MySQL实例。 介绍RDS for MySQL实例如何通过DRS服务搭建异地单主灾备。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 实现原理 RDS跨Region容灾实现原理说明： 在两个数据中心独立部署RDS for MySQL实例，通过DRS服务将生产中心RDS

查看更多 →

介绍如何创建RDS for MySQL实例。 介绍RDS for MySQL实例如何通过DRS服务搭建异地单主灾备。 前提条件 拥有华为云实名认证账号。 账户余额大于等于0元。 实现原理 RDS跨Region容灾实现原理说明： 在两个数据中心独立部署RDS for MySQL实例，通过DRS服务将生产中心RDS

查看更多 →

MySQL主备复制延迟场景及解决方案 RDS for MySQL的默认备库、只读实例、自建从库、DRS链路灾备实例均基于MySQL的Binlog复制技术，也称为MySQL主备复制或主从复制技术。主备复制实现又分为异步复制或半同步复制，无论哪种方式，由于业务执行的语句的原因，不可避免的存在主备复制延迟。

查看更多 →

任务创建成功后，您可以单击任务名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。 对于创建失败的任务，DRS默认保留3天，超过3天将会自动结束任务。 同步实例创建成功后，默认会进入到正向任务的“源库及目标库”。在正向任务的“源库及目标库”页面，填选源库信息和目标库信息后

查看更多 →

策略详情。 任务创建成功后，您可以单击任务名称，在“标签”页签下查看对应标签。关于标签的详细操作，请参见标签管理。 对于创建失败的任务，DRS默认保留3天，超过3天将会自动结束任务。 同步实例创建成功后，在“源库及目标库”页面，填选源库信息和目标库信息后，单击“源库和目标库”处的

查看更多 →

需要具备如下最小权限： SELECT、SHOW VIEW、EVENT。 用户迁移时，如果源数据库为8.0版本，需要有mysql.user表的SELECT权限；如果为5.7及以下版本，则需要mysql系统库的SELECT权限。 需要具备如下最小权限： SELECT、SHOW VIEW、EVENT、LOCK

查看更多 →

灾备数据库 相关文档 本地自建MySQL数据库 E CS 自建MySQL数据库 其他云上MySQL数据库 RDS for MySQL RDS for MySQL MySQL到MySQL单主灾备 MySQL到MySQL双主灾备 GaussDB (for MySQL) MySQL到GaussDB(for

查看更多 →

DBService基本原理 DBService简介 DBService是一个高可用性的关系型数据库存储系统，适用于存储小量数据（10GB左右），比如：组件元数据。DBService仅提供给集群内部的组件使用，提供数据存储、查询、删除等功能。 DBService是集群的基础组件，H

查看更多 →

ClickHouse基本原理 ClickHouse简介 ClickHouse是一款开源的面向联机分析处理的列式数据库，其独立于Hadoop大数据体系，最核心的特点是压缩率和极速查询性能。同时，ClickHouse支持SQL查询，且查询性能好，特别是基于大宽表的聚合分析查询性能非常优异，比其他分析型数据库速度快一个数量级。

查看更多 →

IoTDB基本原理 IoTDB（物联网数据库）是一体化收集、存储、管理与分析物联网时序数据的软件系统。 Apache IoTDB采用轻量式架构，具有高性能和丰富的功能。 IoTDB从存储上对时间序列进行排序，索引和chunk块存储，大大的提升时序数据的查询性能。通过Raft协议，

查看更多 →

Ranger基本原理 Apache Ranger提供一个集中式安全管理框架，提供统一授权和统一审计能力。它可以对整个Hadoop生态中如HDFS、Hive、HBase、Kafka、Storm等进行细粒度的数据访问控制。用户可以利用Ranger提供的前端WebUI控制台通过配置相关策略来控制用户对这些组件的访问权限

查看更多 →