Hudi数据表Archive规范 Archive（归档）是为了减轻Hudi读写元数据的压力，所有的元数据都存放在这个路径：Hudi表根目录/.hoodie目录，如果.hoodie目录下的文件数量超过10000就会发现Hudi表有非常明显的读写时延。 规则 Hudi表必须执行Archive。

查看更多 →

Hudi数据表设计规范 Hudi表模型设计规范 Hudi表索引设计规范 Hudi表分区设计规范 父主题： DLI Hudi开发规范

查看更多 →

Hudi数据表管理操作规范 Hudi数据表Compaction规范 Hudi数据表Clean规范 Hudi数据表Archive规范 父主题： DLI Hudi开发规范

查看更多 →

MySQL迁移出现数据膨胀怎么办 DRS在全量迁移阶段，为了保证迁移性能和传输的稳定性，采用了行级并行的迁移方式。 当源端数据紧凑情况下，通过DRS迁移到云上RDS for MySQL后，可能会出现数据膨胀现象，使得磁盘空间使用远大于源端。 针对这种情况，客户可选择在目标库中执行以下命令，进行优化整理从而缩小空间。

查看更多 →

期调度Spark任务来完成异步Compaction，这个方案的关键之处在于如何合理的设置这个周期，周期如果太短意味着Spark任务可能会空跑，周期如果太长可能会积压太多的Compaction Plan没有去执行而导致Spark任务耗时长并且也会导致下游的读作业时延高。对此场景，在

查看更多 →

Hudi数据表Clean规范 Clean也是Hudi表的维护操作之一，该操作对于MOR表和COW表都需要执行。Clean操作的目的是为了清理旧版本文件（Hudi不再使用的数据文件），这不但可以节省Hudi表List过程的时间，也可以缓解存储压力。 规则 Hudi表必须执行Clean。

查看更多 →

WDR Snapshot 数据表 WDR Snapshot数据表命名原则： snap_{源数据表}。 WDR Snapshot数据表来源为DBE_PERF Schema下的视图，WDR Snapshot在启动后（打开GUC参数enable_wdr_snapshot）会触发创建WDR

查看更多 →

WDR Snapshot 数据表 WDR Snapshot数据表命名原则：snap_{源数据表}。 WDR Snapshot数据表来源为DBE_PERF Schema下的视图。 初始用户或者监控管理员用户具有权限查看WDR Snapshot数据表。 父主题： WDR Snapshot

查看更多 →

买错Flexus L实例 规格了怎么办？ 如果您买错了实例规格，可以通过以下两种方式变更实例规格： 方式一：直接升级实例规格。 Flexus应用 服务器 L实例的变更规格操作仅支持升级实例规格，不支持降级实例规格。具体操作步骤详见升级Flexus L实例。 方式二：退订L实例后，重新购买任意实例规格。

查看更多 →

如果建表时没有指定分布列，数据会怎么存储？ 答：建表时没有指定分布列，数据会以如下三种场景存储： 若建表时包含主键/唯一约束，则选取HASH分布，分布列为主键/唯一约束对应的列。 gaussdb=# CREATE TABLE tb_test1 ( W_WAREHOUSE_SK

查看更多 →

调用接口时请求不通，没有任何返回信息，怎么处理？ 请求方法、请求URL或请求Headers填写错误，导致请求没有发送到语音通话平台。请参照对应的“API参考”，按照以下步骤排查请求包含的参数是否完整，参数是否填写正确，参数位置是否正确。 请求方法按照接口文档填写对应值，如POST。

查看更多 →

怎么解决执行mysqldump出现SET @@SESSION.SQL_ LOG _BIN等SQL的问题 场景描述 执行mysqldump时，会出现如下如所示代码。 图1 代码显示 故障分析 开启了“gtid-mode=ON”参数。 如果一个数据库开启了GTID，使用mysqldump备份或者转储的时候，即使不是RDS

查看更多 →

Mysql导入数据到DLI，快执行完时失败了提示Invoke DLI service api failed错误怎么解决？ 问题描述 导入了4000W数据，快执行完时报如下错误。 故障分析 结合报错，考虑是DLI目的端写入问题。但因日志截图不全，进入 CDM 集群，查看客户作业日志。

查看更多 →

Hudi数据表管理操作规范 Hudi数据表Compaction规范 Hudi数据表Clean规范 Hudi数据表Archive规范 父主题： Hudi应用开发规范

查看更多 →

创建数据表开启标签索引 功能介绍 建表功能同创建表，在此基础上，表属性配置标签索引schema。 样例代码 public void testCreateTable() { LOG.info("Entering testCreateTable."); HTableDescriptor

查看更多 →

”模块，进入数据目录页面。 选择“数据权限 > 数据表权限”，在“我的权限”页签中，支持如下操作： 操作 > 查看，查看用户已申请的权限详情。 操作 > 编辑，可修改用户已申请的数据表权限。 操作 > 交还，可交还用户已申请的数据表权限。 图2 管理表权限 审计用户权限 管理员可

查看更多 →

流量文件单条SQL大小不能超过1MB。 事务中穿插了其他语句可能会导致死锁。 其他使用须知： 源数据库和目标数据库的配置参数不一致（例如：innodb_buffer_pool_size，sqlmode等），可能会导致回放进度慢或失败等情况。 再编辑操作如果删除或者新增了流量文件，需要在重置任务时勾选

查看更多 →

流量文件必须保证全量SQL结构完整，如果用户提供的审计日志中SQL被截断，可能会出现解析异常的情况。 流量文件单条SQL大小不能超过1MB。 事务中穿插了其他语句可能会导致死锁。 上传的流量文件仅支持.gz和.zip的压缩格式。 其他使用须知： 源数据库和目标数据库的配置参数不一致（例如：in

查看更多 →

没有SQL脚本 问题现象 任务创建成功，但是没有sql脚本执行。 处理方法 请自行确认组合包中是否存在除了版本名一样其他字段都一模一样的SQL包，打包禁止出现这种场景，否则获取将包文件信息失败。 或是运维中心存在重复推包的情况，导致存在重复，系统会随机选择一个包执行，可能是执行一个异常的包，没有脚本就是空包。

查看更多 →

按需计费怎么使用，订购页面没有看到购买入口？ 用户在开通 KooMessage 服务时，默认开通按需计费，不使用则不计费。只要账户资金充足，无需任何操作，可以直接使用。 在按需计费模式下，智能信息是按照智能信息发送成功条数，以及智能信息解析的成功条数自动生成话单进行扣费。无需先购买下单，可以直接使用。

查看更多 →

作业名称：输入便于记忆、区分的作业名称，例如：“mysql2dws”。 源端作业配置 源连接名称：选择步骤2：创建连接章节中创建的MySQL连接“mysqllink”。 使用SQL语句：选择“否”。 模式或表空间：选择从MySQL的哪个数据库导出表。 表名：选择导出哪张表。 其他

查看更多 →