DRS全量迁移期间会快速产生大量的Binlog日志，本地可能会暂存较多的Binlog日志，有磁盘打满风险，强烈建议RDS实例开启存储空间自动扩容。迁移期间请设置合理的Binlog日志保留时长，以及可通过一键清理Binlog日志功能及时安全清理超过保留时长的Binlog日志。 迁移方案总览 表1

查看更多 →

canal解析Binlog报错 场景描述 canal解析Binlog出现错误，导致拉取Binlog中断，错误信息如下： xxx.otter.canal.parse.exception.CanalParseException: java.lang.NumberFormatException:-

查看更多 →

检查TaurusDB的参数“binlog_rows_query_log_events”的值是否设置为1或ON。 目前canal只能支持ROW格式的Binlog增量订阅。 当TaurusDB的参数“binlog_rows_query_log_events”的值设置为1或ON时，会在Binlog中产生R

查看更多 →

实时数仓Binlog 订阅实时数仓Binlog Flink实时消费Binlog

查看更多 →

'username'='xxx', 'password'='xxx') Binlog相关参数说明 下表仅涉及消费Binlog时的参数。 表1 消费Binlog时的参数 参数 说明 数据类型 默认值 binlog 是否读取Binlog信息 Boolean false binlogSlotName

查看更多 →

检查TaurusDB的参数“binlog_rows_query_log_events”的值是否设置为1或ON。 目前canal只能支持ROW格式的Binlog增量订阅。 当TaurusDB的参数“binlog_rows_query_log_events”的值设置为1或ON时，会在Binlog中产生R

查看更多 →

磁盘空间 说明 数据空间 存放用户数据的磁盘空间。 Binlog 存放Binlog日志的磁盘空间。 Slowlog 存放慢日志的磁盘空间。 Relaylog 存放Relaylog日志的磁盘空间。 Auditlog 存放审计日志的磁盘空间。 临时空间 存放临时文件的磁盘空间。 其他空间

查看更多 →

数据空间：用户数据（包括临时表文件）占用的磁盘空间。 Binlog：Binlog日志占用的磁盘空间。 Slowlog：慢日志占用的磁盘空间。 Relaylog：Relaylog日志占用的磁盘空间。 Audit log：审计日志占用的磁盘空间。 临时空间：临时文件占用的磁盘空间。

查看更多 →

l等工具监听该实例的Binlog，当主库未收到对应Binlog已被从库或工具获取的信息，会导致对应Binlog不被删除，导致Binlog积压。 结合1中的异常binlog purge记录，分析本地从库或canal工具相应日志，排查网络状况等原因确认Binlog未被清理的原因。 解决方案

查看更多 →

源数据库参数log_slave_updates检查 MySQL迁移时，为保证DRS能获取全部的Binlog日志，需要开启log_slave_updates参数。 不通过原因 源数据库log_slave_updates参数值为OFF。 处理建议 登录源数据库MySQL所在 服务器 。

查看更多 →

前的记录。 'U'即AFTER_UPDATE，表示当前Binlog是更新后的记录。 gs_binlog_timestamp_us BIGINT Binlog的系统字段, 表示当前记录入库时的时间戳。 只有开启binlog时间戳功能时会有，没开启binlog时间戳时为空。仅9.1.0

查看更多 →

下载Binlog备份文件 操作场景 RDS for MySQL支持用户下载Binlog备份，用于本地存储备份。您可以下载单个Binlog备份文件，也可以合并下载Binlog备份文件。 云数据库 RDS for MySQL 5.6/5.7版的实例支持合并下载Binlog备份文件。

查看更多 →

在“参数”页签查看参数“binlog_expire_logs_seconds”，修改为需要的保留时间，单位是秒。 在新生成一个Binlog的文件的时候，数据库会启动清理功能，清理已经超过保留时间的Binlog文件。 如果一直未生成新的Binlog文件，则历史的Binlog文件一直不会被清

查看更多 →

自动删除。 Binlog本地日志清理： 清理Binlog日志时，即使设置保留时长为0，TaurusDB标准版也会保证主节点的Binlog同步到备节点、只读节点全部完成，并且备份到OBS成功以后才会执行清理。 如果选择的保留时长大于0，例如设置1天，那么在Binlog同步及备份成功

查看更多 →

自动删除。 Binlog本地日志清理： 清理Binlog日志时，即使设置保留时长为0，TaurusDB标准版也会保证主节点的Binlog同步到备节点、只读节点全部完成，并且备份到OBS成功以后才会执行清理。 如果选择的保留时长大于0，例如设置1天，那么在Binlog同步及备份成功

查看更多 →

如果手动关闭了debezium.connect.keep.alive，一旦发生拉取Binlog线程与My SQL服务器 的连接连接异常，拉取Binlog线程不会尝试自动重连，这可能导致无法正常从源端拉取binlog日志。 语法格式 create table mySqlCdcSource (

查看更多 →

数据空间：用户数据（包括临时表文件）占用的磁盘空间。 Binlog：Binlog日志占用的磁盘空间。 Slowlog：慢日志占用的磁盘空间。 Relaylog：Relaylog日志占用的磁盘空间。 Audit log：审计日志占用的磁盘空间。 临时空间：临时文件占用的磁盘空间。

查看更多 →

过读取源数据库的原始增量日志数据（例如MySQL的Binlog）后解析转换进行 。 以MySQL的Binlog为例，部分他云只读MySQL备库的Binlog并不完整，会导致DRS无法进行增量数据同步。用户可使用mysqlbinlog下载并确认Binlog内容完整性。 下载命令：注意，该命令会把

查看更多 →

在“参数”页签查看参数“binlog_expire_logs_seconds”，修改为需要的保留时间，单位是秒。 在新生成一个Binlog的文件的时候，数据库会启动清理功能，清理已经超过保留时间的Binlog文件。 如果一直未生成新的Binlog文件，则历史的Binlog文件一直不会被清

查看更多 →

源数据库索引列长度必须符合要求。 详见源数据库索引列长度检查。 Binlog开启 增量同步时，源数据库的Binlog日志必须打开。 详见源数据库binlog日志是否开启。 Binlog格式 源数据库的Binlog格式必须为行格式。 详见源数据库binlog格式检查。 Binlog保留时长 在磁盘空间允许的情况下

查看更多 →

对于源数据库和目标数据库的版本有差异的迁移和同步链路，由于不同版本之间的部分特性差异，可能会出现语法兼容性问题。 DRS接收到的源数据库Binlog日志中里保存的是原始的执行SQL语句，这些SQL语句将会直接在目标数据库中执行，如果目标数据库对于源数据库中执行SQL中有不支持的语法约束，那么DRS任务将会报错并失败。

查看更多 →