age <= 60 分区字段是否允许空值 选择分区字段是否允许空值。 是 Hive 数据库名称 待迁移的数据库名称，源连接中配置的用户需要拥有读取该数据库的权限。 hivedb HBase CloudTable 起始时间 起始时间（包含该值）。格式为'yyyy-MM-dd hh:mm:ss'

查看更多 →

如果使用时间类型当主键，如果该时间类型的值是目标库的非法值，增量同步可能存在数据不一致或者任务失败的风险。 MySQL-> GaussDB (PG兼容性模式)增量DDL使用的是B兼容性模式的DDL语法，可能会导致增量同步失败。 由于浮点型数据是采用近似值存储，而不是作为精确值存储，此外操作

查看更多 →

5 避免并发UPDATE/DELETE行存表的同一行 违反规范的影响： 并发UPDATE/DELETE行存表可能导致行锁阻塞和分布式死锁风险，导致业务报错和性能下降。 方案建议： 按主键或分布列进行分组UPDATE/DELETE，组间并行，组内串行。 建议3.6 避免对列存表频繁或并发执行UPDATE/DELETE

查看更多 →

当不配置db_columns时，若输出流属性个数小于数据库表属性个数，并且数据库多出的属性都是nullable或者有默认值时，这种情况也允许。 primary_key 否 如果想通过主键实时更新表中的数据，需要在创建数据表的时候增加primary_key配置项，如下面例子中的c_timemin

查看更多 →

DROP分区会将已有分区进行删除，期间触发的目标分区DQL/DML操作会被阻塞，阻塞完成后跳过对该分区的处理。 TRUNCATE分区 TRUNCATE分区会将已有分区清空数据，期间触发的目标分区DQL/DML操作会被阻塞，阻塞完成后继续对该分区进行处理。 注意期间触发的目标分区查询是查不到数据的，因为TRU

查看更多 →

type Y Y Y Y Y change comment Y Y Y Y Y drop Y Y Y Y N 对同一列并发执行DDL操作需要注意以下两点： 不能对同一列并发执行drop，否则只能成功执行第一个drop随后发生异常“java.lang.UnsupportedOperationException:

查看更多 →

购买了会议并发后之前的免费并发资源还在吗? 购买了会议并发资源后，之前免费的并发资源将被回收。 父主题： 产品规格

查看更多 →

尽量在定长的字段（如：INT）上建立索引；在VARCHAR字段上建立索引时，必须指定索引长度，无需对全字段建立索引，根据实际文本区分度决定索引长度即可。 索引长度与区分度是一对矛盾体，一般对字符串类型数据，长度为20的索引区分度会高达90%以上，可以使用COUNT(DISTINCT LE

查看更多 →

如何使用构建并发包 本节以用户当前使用X86/ARM 4U8G规格的执行机为例，且购买的套餐中默认单个构建任务并发执行数为5个。 当用户购买五个X86/ARM 4U8G并发包后，可以提升单个构建任务并发执行数到10个，且无需任何配置，在达到默认执行资源上限后，自动使用已购买的4U8G并发包资源。

查看更多 →

完成后继续对该分区进行处理。 注意期间触发的目标分区查询是查不到数据的，因为TRUNCATE操作提交后目标分区中不存有任何数据。 EXCHANGE分区 EXCHANGE分区会将一个已有分区与普通表进行交换，期间触发的目标分区DQL/DML操作会被阻塞，阻塞完成后继续对该分区进行处理，该分区的实际数据对应原普通表。

查看更多 →

5 避免并发UPDATE/DELETE行存表的同一行 违反规范的影响： 并发UPDATE/DELETE行存表可能导致行锁阻塞和分布式死锁风险，导致业务报错和性能下降。 方案建议： 按主键或分布列进行分组UPDATE/DELETE，组间并行，组内串行。 建议3.6 避免对列存表频繁或并发执行UPDATE/DELETE

查看更多 →

如果使用时间类型当主键，如果该时间类型的值是目标库的非法值，增量同步可能存在数据不一致或者任务失败的风险 MySQL->GaussDB(PG兼容性模式)增量DDL使用的是B兼容性模式的DDL语法，可能会导致增量同步失败。 由于浮点型数据是采用近似值存储，而不是作为精确值存储，此外操作

查看更多 →

server迁移数据到hive，执行作业报：操作数数据类型bit 对min 运算无效。 图1 报错信息 故障分析 客户作业中配置的并发数大于1， CDM 会选择分区列进行分区迁移，默认情况：取主键字段，如果没有主键字段取的是从元数据里面的第一个字段作为分区字段。 由于客户作业中设置的并发数是8，程序选择IsDef作为分

查看更多 →

DDL进度显示 功能介绍 大表的DDL操作往往会比较耗时，社区版MySQL无法感知整个DDL的进行阶段与该阶段的进度，可能给用户带来很大的困扰。 针对以上问题，华为云RDS for MySQL推出了DDL进度显示特性，用户可以通过查询“INFORMATION_SCHEMA.INN

查看更多 →

对同一张表或分区并发写数据导致任务失败 问题背景与现象 Hive执行插入语句时，报错HDFS上文件或目录已存在或被清除，具体报错如下： 原因分析 根据HiveServer的审计日志，确认该任务的开始时间和结束时间。 在上述时间区间内，查找是否有对同一张表或分区进行插入数据的操作。

查看更多 →

操作外，也支持对部分表结构变化（DDL）进行同步。针对支持的DDL操作，用户可根据实际需求配置为正常处理/忽略/出错。 正常处理：Migration识别到源端库表出现该DDL动作时，作业自动同步到目的端执行该DDL操作。 忽略：Migration识别到源端库表出现该DDL动作时，作业忽略该DDL，不同步到目的端表中。

查看更多 →

尽量在定长的字段（如：INT）上建立索引；在VARCHAR字段上建立索引时，必须指定索引长度，无需对全字段建立索引，根据实际文本区分度决定索引长度即可。 索引长度与区分度是一对矛盾体，一般对字符串类型数据，长度为20的索引区分度会高达90%以上，可以使用COUNT(DISTINCT LE

查看更多 →

接口的并发是多少 人证核身 标准版（三要素）、人证核身证件版（二要素）默认并发为10qps。 父主题： API使用类

查看更多 →

save("/tmp/tablePath") 所有参与分区间并发写入的任务，都必须配置上述参数。 不建议同分区内并发写，这种并发写入需要开启Hudi OCC方式并发写入，必须严格遵守并发参数配置，否则会出现表数据损坏的问题。 并发OCC参数控制： SQL方式： --开启OCC。 set

查看更多 →

配置函数的并发处理 该特性仅FunctionGraph v2版本支持。 前提条件 已配置“单实例并发数”的存量函数，仍支持函数修改该配置，但当“单实例并发数”修改为1时，该参数后续不再支持修改。 通过“容器镜像”和“HTTP函数”方式创建的函数，“单实例并发数”默认值是1，但支持设置多并发数，取值范围1-1000。

查看更多 →

在数据开发主界面的左侧导航栏，选择“配置管理 > 配置”。 选择“节点并发数”。 配置工作空间的节点并发数，工作空间的节点并发数不能大于 DataArts Studio 实例的并行节点并发数上限。 DataArts Studio实例的节点并发数上限可通过表1获取。其中的作业节点调度次数/天配额可通过DataArts

查看更多 →