Hudi数据表设计规范 Hudi表模型设计规范 Hudi表索引设计规范 Hudi表分区设计规范 父主题： Hudi应用开发规范

查看更多 →

数据表复制样例代码 用户可以开发应用程序，通过调用HBase API接口的方式，将一个表的部分数据或全部数据复制到同一个集群或另一个集群中。目标表必须预先存在。 环境准备 要将表复制到另一个集群，请先获取CloudTable目标集群的“ZK链接地址（内网）”。 登录 表格存储服务 管

查看更多 →

表组创建完成后，即可导入数据表并加入表组。 导入数据表并加入表组 在表管理页面，选择库表清单页签。 单击列表上方的“表管理 > 导入数据表”按钮，弹出导入数据表窗口。 选择元数据连接和要加入的表组名。 单击“模板下载”，将导入模板下载到本地。打开导入模板，将需要导入的数据表对应参数填写到模板内。

查看更多 →

数据导入 数据管理服务支持从本地或者OBS桶导入数据，进行数据的备份和迁移。 使用须知 当需要进行数据备份或迁移时，您可以将数据导入目标数据表，目标 CS V表数据类型须与待导入表数据类型保持一致，SQL文件同理。 导入单文件大小最大可达1GB。 可以支持导入的数据文件类型包括CSV格式和SQL文件格式。如果MySQL

查看更多 →

当前支持的源端数据为 DLI 类型、OBS类型和MySQL类型。 当源端数据为DLI类型时，支持的目的端数据类型为CloudTable（仅华北-北京一支持）、DWS、GES、 CSS 、OBS、DLI。 当源端数据为MySQL类型时，支持的目的端数据类型为MySQL。 当源端数据为OBS类型时，支持的目的端数据类型为DLI、DWS。

查看更多 →

面的库表清单页签。 单击“导入数据表”按钮，弹出导入数据表窗口。 根据实际需求，选择已创建的元数据连接类型。 单击“模板下载”，将导入模板下载到本地。打开导入模板，将需要添加的数据表对应参数填写到模板内。 每个模板最多支持导入10，000张表。 待导入的表必须属于同一个元数据来源。

查看更多 →

的方式导入数据。因此导入数据前需要先创建好相同名称的逻辑库，相同拆分表、广播表结构的逻辑表，然后再进行数据导入。各类逻辑表创建方式请参见表2。 新增RDS for MySQL实例与源RDS实例的MySQL版本需要保持一致。 迁移前准备 准备可以访问源华为云上自建MySQL所在ECS的ECS。

查看更多 →

-3.1.0.mysql.sql MySQL导入sql文件的命令： ./bin/mysql -u username -p -D databasename<hive-schema-3.1.0.mysql.sql 其中： ./bin/mysql：在MySQL安装目录下。 username：登录MySQL的用户名。

查看更多 →

Hudi数据表Compaction规范 mor表更新数据以行存log的形式写入，log读取时需要按主键合并，并且是行存的，导致log读取效率比parquet低很多。为了解决log读取的性能问题，Hudi通过compaction将log压缩成parquet文件，大幅提升读取性能。 规则

查看更多 →

Hudi数据表Clean规范 Clean也是Hudi表的维护操作之一，该操作对于MOR表和COW表都需要执行。Clean操作的目的是为了清理旧版本文件（Hudi不再使用的数据文件），这不但可以节省Hudi表List过程的时间，也可以缓解存储压力。 规则 Hudi表必须执行Clean。

查看更多 →

WDR Snapshot 数据表 WDR Snapshot数据表命名原则：snap_{源数据表}。 WDR Snapshot数据表来源为DBE_PERF Schema下的视图。 初始用户或者监控管理员用户具有权限查看WDR Snapshot数据表。 父主题： WDR Snapshot

查看更多 →

WDR Snapshot 数据表 WDR Snapshot数据表命名原则： snap_{源数据表}。 WDR Snapshot数据表来源为DBE_PERF Schema下的视图，WDR Snapshot在启动后（打开GUC参数enable_wdr_snapshot）会触发创建WDR

查看更多 →

Server同步到 GaussDB 分布式版 使用DAS工具的导出、导入功能迁移数据 sql/CSV文件格式 通过DAS的数据导出功能，获取完整的数据信息，再将数据从本地或者从OBS桶导入目标数据表。 使用DAS的导出和导入功能迁移GaussDB数据 使用copy to/from命令导出导入数据 CSV文件格式 gsq

查看更多 →

本例中，需要创建如下三类集成作业： OBS到MySQL迁移作业：为方便演示，需要将OBS中的CSV格式的样例数据导入到MySQL数据库中。 MySQL到OBS迁移作业：正式业务流程中，需要将MySQL中的原始样例数据需要导入OBS中，并标准化为点数据集和边数据集。 MySQL到 MRS Hive迁移作

查看更多 →

云数据库MySQL/MySQL数据库连接参数说明 连接MySQL数据库连接时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 MySQL数据库连接参数 参数名 说明 取值样例 名称 连接的名

查看更多 →

进入“预置数据”页面， 在左侧栏选择数据表，单击“新增”，预置初始数据。 角色数据表是系统默认数据表，无需模板构建者创建，表内的角色和业务流模板内创建的角色一致。 其他数据表是模板构建者自定义创建。具体创建操作可参见创建数据表。 导入预置数据 其他数据表支持批量导入预置数据。 登录圆桌。 选择设置入口。

查看更多 →

云数据库MySQL/MySQL数据库连接参数说明 连接MySQL数据库连接时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 MySQL数据库连接参数 参数名 说明 取值样例 名称 连接的名

查看更多 →

MySQL到MySQL 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 RDS for MySQL RDS for MySQL 数据库账号权限要求 使用DRS创建录制回放任务时，连接源和目标数据库账号的权限建议保持一致，再启动任务。 使用须知 为了确保录制回放任务

查看更多 →

MySQL到MySQL 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 ECS自建MySQL 5.6、5.7、8.0版本 本地自建MySQL 5.6、5.7、8.0版本 其他云上MySQL 5.6、5.7、8.0版本 RDS for MySQL 数据库账号权限要求

查看更多 →

指定需要导入的关系型数据表字段 --query 指定查询语句，将查询结果导入 hcatalog参数 --hcatalog-database 指定hive库，使用hcatalog方式导入hive库 --hcatalog-table 指定hive表，使用hcatalog方式导入hive表

查看更多 →

Hudi数据表管理操作规范 Hudi数据表Compaction规范 Hudi数据表Clean规范 Hudi数据表Archive规范 父主题： Hudi应用开发规范

查看更多 →