Doris建表规范 该章节主要介绍Doris建表时需遵循的规范和建议。 建表规范 【强制】表数据超过5亿条以上必须设置分区分桶策略。 【强制】分桶的列不要设置太多，一般情况下1或2个列，同时需要兼顾数据分布均匀和查询吞吐之间的均衡，考虑数据均匀是为了避免某些桶的数据存在倾斜影响数

查看更多 →

Doris建表规范 该章节主要介绍创建Doris表时需遵循的规则和建议。 Doris建表规则 在创建Doris表指定分桶buckets时，每个桶的数据大小应保持在100MB~3GB之间，单分区中最大分桶数量不超过5000，且单个表分区不超过10000，集群中最大表数量不超过5000。

查看更多 →

一列col，作业执行失败怎么处理？ Hudi目的端的作业自动建表报错：schema不匹配，建表失败怎么办？ Hudi目的端的作业失败，日志报错Read Timeout怎么解决？ Hudi目的端的作业执行卡Running，读取行数写入行数相等且不再增加怎么解决？ Hudi目的端的作

查看更多 →

WS， CDM 在DWS上自动建表，会将Oracle的NUMBER(3,0)字段映射到DWS的SMALLINT。 图1 自动建表的字段映射 CDM在Hive中自动建表时，Hive表与源表的字段类型映射关系参见表1、表2、表3及表4。例如使用CDM将MySQL整库迁移到Hive，CDM

查看更多 →

WS，CDM在DWS上自动建表，会将Oracle的NUMBER(3,0)字段映射到DWS的SMALLINT。 图1 自动建表的字段映射 CDM在Hive中自动建表时，Hive表与源表的字段类型映射关系参见表1、表2、表3及表4。例如使用CDM将MySQL整库迁移到Hive，CDM

查看更多 →

ClickHouse建表规范 该章节主要介绍ClickHouse建表时需遵循的规范和建议。 建表规范 【规则】不要在system库中创建业务表。system数据库是ClickHouse默认的系统数据库，默认数据库中的系统表记录的是系统的配置、元数据等信息数据。业务在使用Click

查看更多 →

Hudi目的端的作业自动建表报错：schema不匹配，建表失败怎么办？ 问题描述 cdm迁移数据到hudi，hudi选择自动建表，执行建表语句报schema不匹配错误“org.apache.spark.sql.AnalysisException:Specified schema in

查看更多 →

Hudi目的端的作业自动建表报错：schema不匹配，建表失败怎么办？ 问题描述 cdm迁移数据到hudi，hudi选择自动建表，执行建表语句报schema不匹配错误“org.apache.spark.sql.AnalysisException:Specified schema in

查看更多 →

MySQL迁移后目标数据库出现索引查询慢怎么办 DRS在全量迁移阶段对表在短时间内进行了大量的并行写入操作，可能出现数据库对表的统计信息未及时刷新的情况，从而导致SQL解析时执行计划不优、表操作变慢的现象。该现象在表先建索引再迁数据的场景下更容易触发，请及时刷新数据库统计信息。

查看更多 →

调用链中是否采集上报带有参数内容的原始sql 汇聚分表表名 array JAVA - 2.2.2 - 根据配置的表名，汇聚分表的sql。以该表名开头的表汇聚成同样的表名 mysql最大采集行数 integer JAVA 500 2.4.1 - 可采集的mysql最大行数 sql语句最大采集字节数 integer

查看更多 →

误删RDS for MySQL数据库root账号怎么办 您可以通过重置密码来恢复误删除的root账号，详情请参见重置数据库账号密码。 父主题： 数据库基本使用

查看更多 →

no column”怎么处理？ 创建Oracle关系型数据库迁移作业时，无法获取模式名怎么处理？ MySQL迁移时报错：invalid input syntax for integer: "true" Hudi目的端的作业自动建表报错：schema不匹配，建表失败怎么办？ Hudi目的端的作业失败，日志报错Read

查看更多 →

如果建表时没有指定分布列，数据会怎么存储？ 答：建表时没有指定分布列，数据会以如下三种场景存储： 若建表时包含主键/唯一约束，则选取HASH分布，分布列为主键/唯一约束对应的列。 gaussdb=# CREATE TABLE tb_test1 ( W_WAREHOUSE_SK

查看更多 →

MySQL到DWS实时同步中，同步新增列的DDL时报错怎么办？ 问题描述 1. 运行migration mysql2dws链路的实时同步作业，DDL同步中对增加列操作设置为“正常处理”。 2. 在目的端DWS表有数据的场景下，源端MySQL执行DDL语句，添加带非空约束的列，默认值为空字符串，如：alter

查看更多 →

Duplicate fileID”怎么办？ Hudi到Doris实时同步中，源端DECIMAL类型作为主键自动建Doris表报错，错误信息包含“String Type should not be used in key column[xxx]”怎么办？ Hudi作为目的端时，如果表路径为OBS路径，报错信息包含“Exception

查看更多 →

如果DWS建表时没有指定分布列，数据会怎么存储？ 8.1.2及以上集群版本，可通过GUC参数default_distribution_mode来查询和设置表的默认分布方式。 如果建表时没有指定分布列，数据会以下几种场景来存储： 场景一 若建表时包含主键/唯一约束，则选取HASH分布，分布列为主键/唯一约束对应的列。

查看更多 →

在MySQL到Doris的实时作业中，自动建表时会将源端的tinyint(1)转换成boolean类型，当向该类型字段插入非0和1的数值时，会导致作业报错。 原因分析 自动建表默认转换源端tinyint(1)类型的方式不恰当。 解决方案 在MySQL数据连接里配置连接属性参数：tinyInt1isBit =

查看更多 →

String 参数解释： 数据库用户名。 取值范围： 不涉及。 host String 参数解释： 主机地址。 取值范围： 不涉及。 readonly Boolean 参数解释： 是否为只读权限。 取值范围： true：表示只读。 false：表示可读写。 状态码：400 表7 响应Body参数

查看更多 →

数据库代理（MySQL） 开启数据库代理 - CreateRdSforMySqlProxy 查询数据库代理信息列表 - ListRdSforMySqlProxy 查询数据库代理规格信息 - ListRdSforMysqlProxyFlavors 设置读写分离路由模式 - Modi

查看更多 →

建表与导入SSB数据 创建SSB目标表 连接DWS数据库后执行以下SQL语句。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25

查看更多 →

创建RDS跨源表提示空指针错误怎么办？ 问题现象 客户创建RDS跨源表失败，报空指针的错误。 原因分析 客户建表语句： CREATE TABLE IF NOT EXISTS dli_to_rds USING JDBC OPTIONS ( 'url'='jdbc:mysql://to

查看更多 →