Upsert数据写入 本章节主要介绍ClickHouse数据写入时数据去重写入功能的SQL基本语法和使用说明。 本章节仅适用于 MRS 3.3.0及之后版本。 基本语法 方法一：使用INSERT VALUES方式进行数据写入。 UPSERT INTO [database_name.]table

查看更多 →

导入包含API信息的EXCEL文件 功能介绍 导入包含API信息的EXCEL文件。 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/service/import/excel 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →

GaussDB (for MySQL)多主实例简介 GaussDB(for MySQL)提供了多主版实例，在一个实例中通过多个读写节点来实现多写多读。多主版实例包含最少2个最多63个读写节点，没有只读节点。 在多主版实例中，读写节点通过共享元数据的方式对实例的元数据进行统一管理，用

查看更多 →

增量同步过程中，分库分表场景下，在多个分表执行的DDL，会同步多条数据到Kafka的Topic中。 常见故障排查： 在任务创建、启动、全量同步、增量同步、结束等过程中，如有遇到问题，可先参考常见问题章节进行排查。 其他限制 重命名表仅支持rename后库表在同步范围中的DDL操作（例如：RENAME

查看更多 →

目的端作业配置 目的连接名称：选择创建DWS连接中的连接“dwslink”。 模式或表空间：选择待写入数据的DWS数据库。 自动创表：只有当源端和目的端都为关系数据库时，才有该参数。 表名：待写入数据的表名，可以手动输入一个不存在表名， CDM 会在DWS中自动创建该表。 是否压缩：DWS提供的

查看更多 →

目的端作业配置 目的连接名称：选择创建DWS连接中的连接“dwslink”。 模式或表空间：选择待写入数据的DWS数据库。 自动创表：只有当源端和目的端都为关系数据库时，才有该参数。 表名：待写入数据的表名，可以手动输入一个不存在表名，CDM会在DWS中自动创建该表。 是否压缩：DWS提供的

查看更多 →

目的端作业配置 目的连接名称：选择创建DWS连接中的连接“dwslink”。 模式或表空间：选择待写入数据的DWS数据库。 自动创表：只有当源端和目的端都为关系数据库时，才有该参数。 表名：待写入数据的表名，可以手动输入一个不存在表名，CDM会在DWS中自动创建该表。 是否压缩：DWS提供的

查看更多 →

目标表中的数据不会自动回滚。 说明： 如果“导入开始前”选择“清除部分数据”或“清除全部数据”，CDM的事务模式不会回滚已经删除的数据。 否 扩大字符字段长度 选择自动创表时，迁移过程中可将字符类型的字段长度扩大为原来的3倍，再写入到目的表中。如果源端数据库与目的端数据库字符编码

查看更多 →

//源表数据结构转换为目标表的数据结构。该源表如果需要和Hive进行关联操作，可以直接在SQL中通过表名来进行关联操作；该源表如果需要和Hudi表关联操作，需要先指定Hudi表的路径，然后在SQL中通过表名来进行关联操作。 父主题： Hudi写操作

查看更多 →

Spark如何将数据写入到 DLI 表中 使用Spark将数据写入到DLI表中，主要设置如下参数： fs.obs.access.key fs.obs.secret.key fs.obs.impl fs.obs.endpoint 示例如下： import logging from operator

查看更多 →

查看并导出FlexusRDS for MySQL备份信息 操作场景 FlexusRDS for MySQL支持导出备份，用户可以通过导出备份功能将备份信息（备份ID、备份名称、备份类型、备份方式、备份开始/结束时间、状态、大小、描述）导出到Excel中，方便用户查看并分析备份信息。 如

查看更多 →

FlinkSQL写入JDBC数据支持ignoreDelete 本章节适用于MRS 3.3.0及以后版本。 使用场景 FlinkSQL写入JDBC数据时可以过滤掉DELETE和UPDATE_BEFORE状态的数据。 使用方法 在创建的JDBC Connector Sink流表中添加“filter

查看更多 →

目标表中的数据不会自动回滚。 说明： 如果“导入开始前”选择“清除部分数据”或“清除全部数据”，CDM的事务模式不会回滚已经删除的数据。 否 扩大字符字段长度 选择自动创表时，迁移过程中可将字符类型的字段长度扩大为原来的3倍，再写入到目的表中。如果源端数据库与目的端数据库字符编码

查看更多 →

该指标用于统计Innodb平均每秒从文件中读的次数，以次/秒为单位。 ≥ 0 counts/s 测量对象：数据库 监控实例类型：MySQL实例 rds016_innodb_write_count InnoDB文件写入频率 该指标用于统计Innodb平均每秒向文件中写的次数，以次/秒为单位。 ≥

查看更多 →

取并发数可以提升迁移效率，配置原则请参见性能调优。这里保持默认值“1”。 是否写入脏数据：如果需要将作业执行过程中处理失败的数据、或者被清洗过滤掉的数据写入OBS中，以便后面查看，可通过该参数配置，写入脏数据前需要在CDM先配置好OBS连接。这里保持默认值“否”即可，不记录脏数据。

查看更多 →

监控实例类型：TaurusDB实例 gaussdb_mysql012_innodb_buf_dirty 缓冲池脏块率 该指标用于统计InnoDB缓存中脏数据与数据比例。 0～100% 测量对象：数据库 监控实例类型：TaurusDB实例 gaussdb_mysql013_innodb_reads InnoDB读取吞吐量

查看更多 →

监控实例类型：TaurusDB实例 gaussdb_mysql012_innodb_buf_dirty 缓冲池脏块率 该指标用于统计InnoDB缓存中脏数据与数据比例。 0～100% 测量对象：数据库 监控实例类型：TaurusDB实例 gaussdb_mysql013_innodb_reads InnoDB读取吞吐量

查看更多 →

RDS for MySQL数据库修改authentication_string字段为显示密码后无法登录 场景描述 客户通过navicat修改RDS for MySQL的user表root账号的“authentication_string”字段，修改为为显示密码后无法登录客户端。 问题可能出现的版本：MySQL-8

查看更多 →

修改GaussDB(for MySQL)数据库账号权限 操作场景 您可将自己创建的数据库账号，授权给指定的数据库，对于已授权的数据库，您也可取消授权。 约束限制 处于变更中的实例，不可进行该操作。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 在页面左上角单击，选择“数据库

查看更多 →

上传MySQL数据库连接驱动 操作场景 Loader作为批量数据导出的组件，可以通过关系型数据库导入、导出数据。在连接关系型数据库前，需提前手动上传驱动。 操作步骤 修改关系型数据库对应的驱动jar包文件权限。 登录Loader服务的主备管理节点，获取关系型数据库对应的驱动jar

查看更多 →

恢复到云上MySQL数据库 全量数据恢复：按备份文件恢复 全量数据恢复：恢复到指定时间点 库表数据恢复：恢复到指定时间点 跨区域数据恢复 父主题： 数据恢复

查看更多 →