典型场景：从关系型数据库导入数据到Hive 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的Hive表。 获取关系型数据库使用的用户和密码。 检查磁

查看更多 →

Studio数据集成作业。 本例中，需要创建如下三类集成作业： OBS到MySQL迁移作业：为方便演示，需要将OBS中的 CS V格式的样例数据导入到MySQL数据库中。 MySQL到OBS迁移作业：正式业务流程中，需要将MySQL中的原始样例数据需要导入OBS中，并标准化为点数据集和边数据集。

查看更多 →

y 否 分区策略，用来确保相同一类的数据写入到kafka同一分区 database：使用数据库名称做分区，保证同一个数据库的事件写入到kafka同一个分区中 table：使用表名称做分区，保证同一个表的事件写入到kafka同一个分区中 database ignore_producer_error

查看更多 →

通过Swagger文件导入的关键字放置在关键字库的“接口”页签中，详细操作请参考接口关键字。 关键字用例和组合关键字放置在关键字库的“组合”页签中，支持从0到1创建新的组合关键字，详细操作请参考组合关键字。 认证类、数据库操作类、中间件类、协议类等实用关键字放置在“系统”页签中，详细操作请参考接口自动化用例关键字。

查看更多 →

通过Swagger文件导入的关键字放置在关键字库的“接口”页签中，详细操作请参考接口关键字。 关键字用例和组合关键字放置在关键字库的“组合”页签中，支持从0到1创建新的组合关键字，详细操作请参考组合关键字。 认证类、数据库操作类、中间件类、协议类等实用关键字放置在“系统”页签中，详细操作请参考接口自动化用例关键字。

查看更多 →

导入Hive表数据到Doris中 导入Text格式的Hive表数据到Doris中 使用客户端安装用户登录安装了Hive客户端的节点，执行以下命令登录Hive beeline命令行： cd 客户端安装目录 source bigdata_env kinit 组件业务用户（如果集群未启用Kerberos认证（普通模式）请跳过该操作）

查看更多 →

预检查成功后任务为配置中状态，可单击“立即启动”按钮直接启动任务，或单击“编辑”按钮进行其他参数修改。 导入模板上传任务不支持在模板中配置定时启动时间，待导入任务自动运行至预检查成功状态后，可以通过界面“编辑”进入到启动页面自行设置定时启动时间。 导入模板中的参数校验不能校验所有

查看更多 →

从OBS桶中直接选择文件导入，导入目标数据库成功后，OBS桶不会删除该文件。 导入信息设置完成后，单击“创建导入任务”即可。由于导入任务可能会覆盖您原有的数据，需再次确认无误后单击“确定”。 您可在导入任务列表中查看导入进度等信息，在操作栏单击“查看详情”，您可在任务详情弹出框中，了解本次导入任务成功、失败等执行情况及耗时。

查看更多 →

import 数据导入到集群 export 集群数据导出 codegen 获取数据库中某张表数据生成Java并打包jar create-hive-table 创建Hive表 eval 执行sql并查看结果 import-all-tables 导入某个数据库下的所有表到HDFS中 job 生成一个sqoop任务

查看更多 →

import 数据导入到集群 export 集群数据导出 codegen 获取数据库中某张表数据生成Java并打包jar create-hive-table 创建Hive表 eval 执行sql并查看结果 import-all-tables 导入某个数据库下的所有表到HDFS中 job 生成一个sqoop任务

查看更多 →

在任务启动、任务全量同步阶段，不建议对源数据库做DDL操作 为了保持数据一致性，不允许对正在同步中的目标数据库进行修改操作（包括但不限于DDL操作）。 同步过程中，不允许修改、删除连接源和目标数据库的用户的用户名、密码、权限，或修改源和目标数据库的端口号。 同步过程中，不允许源库写入binlog格式为statement的数据。

查看更多 →

，不建议修改IP地址。 全量同步过程中暂停、任务异常续传，目标Kafka中可能会出现重复数据，请使用Kafka数据中的identifier字段进行去重（同一个shardId）。 增量同步过程中，请勿在Kafka上删除接收DRS数据的topic，否则可能导致任务失败。 不支持外键级

查看更多 →

使用DRS迁移数据库到FlexusRDS for MySQL 数据复制服务 DRS提供了多种数据迁移方案，可满足从RDS for MySQL、DDM、 GaussDB 、GaussDB(for MySQL)、自建MySQL数据库、自建Oracle数据库、或其他云MySQL迁移到FlexusRDS

查看更多 →

写入网关的文件未同步到桶中 可能原因 原因1：连接网关和OBS的网络异常。 原因2：绑定的访问密钥（AK/SK）失效。 原因3：桶类型为归档存储、ACL配置了只读，导致CSG同步失败。 解决方法 原因1：修复连接网关和OBS的网络，修复成功后文件会自动重传。 原因2：修改认证信息

查看更多 →

过程/函数/触发器引用视图/表、主外键关联表等。 全量同步过程中暂停、任务异常续传，目标Kafka中可能会出现重复数据，请使用Kafka数据中的identifier字段进行去重（同一个shardId）。 增量同步过程中，请勿在Kafka上删除接收DRS数据的topic，否则可能导致任务失败。

查看更多 →

类型，MySQL中不支持设置Nan、Inf、-Inf三种值，DRS默认会将这三种值转为0保存。 Oracle的check约束同步到MySQL会失效，原因是MySQL不支持check约束。 Oracle中建议列名不要取名AUTO_PK_ROW_ID，原因是这个列名在MySQL5.7中是保留列名，无法创建出来。

查看更多 →

，同步到目标数据库后多的列为null，不符合目标数据库要求。 目标数据库多的列设置固定默认值，且有唯一约束。源库insert多条数据后，同步到目标数据库后多的列为固定默认值，不符合目标数据库要求。 不支持源数据库恢复到之前时间点的操作(PITR)。 不支持目标数据库恢复到全量同步时间段范围内的PITR操作。

查看更多 →

ert数据，同步到目标端后多的列为null，不符合目标端要求。 目标端多的列设置固定默认值，且有唯一约束。源端insert多条数据后，同步到目标端后多的列为固定默认值，不符合目标端要求。 不支持源数据库恢复到之前时间点的操作(PITR)。 不支持目标数据库恢复到全量同步时间段范围内的PITR操作。

查看更多 →

'root'@'localhost' WITH GRANT OPTION; 在4显示的结果中，可以看到源数据库中所有的用户以及对应的权限，请选择所有需要的用户，逐个添加到本云关系型数据库MySQL中，具体操作请参考《关系型数据库用户指南》中的“创建账号”章节。 父主题： 权限管理

查看更多 →

使用Sqoop Sqoop如何连接MySQL Sqoop读取MySQL数据到HBase时报HBaseAdmin.<init>方法找不到异常 通过Hue创建Sqoop任务将数据从HBase导入HDFS时报错 通过Sqoop从Hive导出数据到MySQL 8.0时报数据格式错误 通过sqoop

查看更多 →

0 是否写入脏数据 选择是否记录脏数据，默认不记录脏数据。 CDM 中脏数据指的是数据格式非法的数据。当源数据中存在脏数据时，建议您打开此配置。否则可能导致迁移作业失败。 说明： 脏数据当前仅支持写入到OBS桶路径中。因此仅当已具备OBS连接时，此参数才可以配置。 是 脏数据写入连接

查看更多 →