导入某个数据库下的所有表到HDFS中 job 生成一个sqoop任务 list-databases 列举数据库名 list-tables 列举表名 merge 将HDFS不同目录下的数据合在一起并存放到指定目录 metastore 启动元数据库，记录sqoop job的元数据 help 打印帮助信息 version

查看更多 →

zip”和“ *.rar”文件 建议使用7-Zip 16.04版本 建议使用WinRAR 5.1版本 安装过程 MySQL数据库初始化 MySQL数据必须禁用大小写敏感 登录MySQL数据库按以下顺序执行初始化脚本文件： 1_mysql_create.sql 2_mysql_init_data

查看更多 →

Hive连接适用于 MapReduce服务 ，本最佳实践为您介绍如何创建 MRS Hive连接器。 MySQL数据迁移到OBS CDM 支持表到OBS的迁移，本最佳实践介绍如何通过CDM将MySQL表数据迁移到OBS中。 参数传递 通过数据开发使用参数传递灵活调度CDM作业 如果CDM作业

查看更多 →

脚本 AstroZero脚本概述 AstroZero脚本开发规则及约束限制 创建空白AstroZero脚本 定制已有AstroZero脚本 管理AstroZero脚本 自定义调用AstroZero脚本的URL 父主题： 使用AstroZero开发应用后端

查看更多 →

架构和功能原理。 全量+增量：该模式为数据库持续性同步，适用于对业务中断敏感的场景，通过全量同步过程完成目标端数据库的初始化后，增量同步阶段通过解析日志等技术，将源端和目标端数据库保持数据持续一致。 “增量”： 增量同步通过解析日志等技术，将源端产生的增量数据同步至目标端。 指定公网IP

查看更多 →

编写开机运行脚本 应用容器化时，一般需要准备开机运行的脚本，写作脚本的方式和写一般shell脚本相同。该脚本的主要目的包括： 启动应用所依赖的软件。 将需要修改的配置设置为环境变量。 开机运行脚本与应用实际需求直接相关，每个应用所写的开机脚本会有所区别。请根据实际业务需求来写该脚本。

查看更多 →

重新编译打包。 将jar包放入远端 服务器 中，即环境准备中用来做调研的服务器中。例如，本最佳实践需要对两个MySQL数据库进行数据调研，则可将本探源工具放入准备好的某台linux服务器中，只需保证该服务器网络可访问到这两个MySQL数据库即可。 将5中下载的配置文件application

查看更多 →

，单集群的并发活动线程最大为200。即当多个数据连接共用同一Agent时，通过这些数据连接提交SQL脚本、Shell脚本、Python脚本等任务的同时运行上限为200，超出的任务将排队等待。建议您按照业务量情况规划多个Agent分担压力。 数据源驱动配置 驱动程序名称 是 驱动程序名称：

查看更多 →

交SQL脚本、Shell脚本、Python脚本等任务的同时运行上限为200，超出的任务将排队等待。建议您按照业务量情况规划多个Agent分担压力。 SSL加密 否 支持对RDS服务启用SSL加密传输。 数据源驱动配置 驱动程序名称 是 驱动程序名称： com.mysql.jdbc

查看更多 →

MySQL数据库兼容MySQL模式 MySQL数据库兼容性概述 数据类型 系统函数 操作符 字符集 排序规则 SQL 驱动 父主题： 分布式

查看更多 →

将MySQL同步到 CSS /ES 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 本地自建MySQL数据库 5.5、5.6、5.7、8.0版本 E CS 自建MySQL数据库 5.5、5.6、5.7、8.0版本 ElasticSearch 5.5、6.2、6.5、7.1、7

查看更多 →

将MySQL同步到CSS/ES 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 RDS for MySQL 5.5、5.6、5.7、8.0版本 ElasticSearch 5.5、6.2、6.5、7.1、7.6、7.9、7.10版本 使用建议 DRS任务启动和全量

查看更多 →

将 GaussDB (for MySQL)同步到Oracle 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GaussDB(for MySQL)主备实例 本地自建Oracle数据库 ECS自建Oracle数据库 使用须知 在创建同步任务前，请务必阅读以下使用须知。

查看更多 →

将Oracle同步到GaussDB(for MySQL) 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 本地自建数据库（Oracle 10g、11g、12c、18c、19c、21c版本） ECS自建数据库（Oracle 10g、11g、12c、18c、19c、21c版本）

查看更多 →

当同步数据与目标数据库已有数据冲突时（主键/唯一键存在重复等），将跳过冲突数据，继续进行后续同步。选择忽略可能导致源库与目标库数据不一致。 报错 当同步数据与目标数据库已有数据冲突时（主键/唯一键存在重复等），同步任务将失败并立即中止。 覆盖 当同步数据与目标数据库已有数据冲突时（

查看更多 →

目前支持如下形式： 忽略 当同步数据与目标数据库已有数据冲突时（主键/唯一键存在重复等），将跳过冲突数据，继续进行后续同步。选择忽略可能导致源库与目标库数据不一致。 覆盖 当同步数据与目标数据库已有数据冲突时（主键/唯一键存在重复等），将覆盖原来的冲突数据。 DML同步 选择需要同步的DML操作，默认都勾选。

查看更多 →

作业名称：输入便于记忆、区分的作业名称，例如：“mysql2dws”。 源端作业配置 源连接名称：选择步骤2：创建连接章节中创建的MySQL连接“mysqllink”。 使用SQL语句：选择“否”。 模式或表空间：选择从MySQL的哪个数据库导出表。 表名：选择导出哪张表。 其他可选参

查看更多 →

Loader是实现MRS与关系型数据库、文件系统之间交换数据和文件的ETL工具，支持将数据或者文件从MRS系统中导出到关系型数据库或文件系统中。 Loader支持如下数据导出方式： 从HDFS/OBS中导出数据到S FTP服务器 从HDFS/OBS中导出数据到关系型数据库 从HBase中导出数据到SFTP服务器

查看更多 →

权限管理 如何设置最小化权限且独立的使用DRS的Oracle账号 DRS要求的MySQL权限有哪些 如何将源数据库的用户与权限导出，再导入到目标数据库 创建DRS任务后执行自动功能失败 创建DRS任务提示用户权限不足或没有操作权限 DRS要求的PostgreSQL权限有哪些

查看更多 →

xt、longtext）做处理。 过滤： 需要设置字段过滤阈值和替换字符，当字段的内容大小超过设定的阈值时，将按照指定的字符进行内容替换。 需要注意的是，大字段过滤功能是将字段的内容进行替换，并不是替换整个DML记录。如果一条DML记录中有很多大字段，这些字段只有部分字段的内容大

查看更多 →

如何将华为云已有私有镜像导入到指定区域？ 操作场景 华为云上已有的私有镜像可以导入到指定区域，实现私有镜像在区域间迁移。除了可以使用“跨区域复制镜像”，您还可以使用导出、导入功能。本文以将华北区的镜像导入到华南区为例进行介绍。 操作步骤 导出华北区镜像。 登录管理控制台。 选择“计算

查看更多 →