数据集成应用示例 本节通过cURL调用 CDM API，迁移本地MySQL数据库中的数据到云上服务DWS为例，介绍使用CDM API的基本流程。 获取token 获取用户的token，因为在后续的请求中需要将token放到请求消息头中作为认证。 创建CDM集群 如果您已经创建过CD

查看更多 →

name （必填）数据库实例名称，同一租户下，同类型的数据库实例名称可以重名 约束：4~64个字符之间，必须以字母开头，区分大小写，可以包含字母、数字、中划线或者下划线，不能包含其他的特殊字符 flavor （必填）数据库实例规格，本教程使用"rds.mysql.c2.large

查看更多 →

数据库代理（MySQL） 开启数据库代理 查询数据库代理信息列表 查询数据库代理规格信息 设置读写分离路由模式 关闭数据库代理 父主题： API v3（推荐）

查看更多 →

ignore_producer_error 否 是否忽略生产者发送数据失败的错误 true：在日志中打印错误信息并跳过错误的数据，程序继续运行 false：在日志中打印错误信息并终止程序 true metrics_slf4j_interval 否 在日志中输出上传kafka成功与失败数据的数量统计的时间间隔，单位为秒

查看更多 →

settings.json 设置编辑器是允许您查看和修改存储在settings.json文件中的设置值的UI。您可以通过使用Preferences: Open Settings (JSON)命令在编辑器中打开此文件，直接查看和编辑此文件。通过指定设置ID和值，设置将写入JSON。 settings

查看更多 →

建主键。 包含存在 查询一个JSON之中是否包含某些元素，或者某些元素是否存在于某个JSON中是jsonb的一个重要能力。 相关的操作符请参见JSON/JSONB函数和操作符。 函数和操作符 json/jsonb类型相关支持的函数和操作符请参见JSON/JSONB函数和操作符。 父主题：

查看更多 →

SELECT '"a"'::json; json ------ "a" (1 row) gaussdb=# SELECT '"abc"'::jsonb; jsonb ------- "abc" (1 row) 数组(array-json)：使用中括号[]包裹，满足数组

查看更多 →

SELECT '"a"'::json; json ------ "a" (1 row) gaussdb=# SELECT '"abc"'::jsonb; jsonb ------- "abc" (1 row) 数组(array-json)：使用中括号[]包裹，满足数组

查看更多 →

、外键。 包含存在 查询一个JSON之中是否包含某些元素，或者某些元素是否存在于某个JSON中是jsonb的一个重要能力。 相关的操作符请参见JSON/JSONB函数和操作符。 函数和操作符 json/jsonb类型相关支持的函数和操作符请参见JSON/JSONB函数和操作符。 父主题：

查看更多 →

创建索引、主键 BTREE索引 jsonb类型支持创建btree索引，支持创建主键。 包含存在 查询一个JSON之中是否包含某些元素，或者某些元素是否存在于某个JSON中是jsonb的一个重要能力。 -- 简单的标量/原始值只包含相同的值。 gaussdb=# SELECT '"foo"'::jsonb

查看更多 →

。如果指定JSON路径下不是标量，则返回null。 json_extract_scalar(x,json_path) varchar类型 示例及说明 json_extract函数 获取Results字段中EndTime字段的值。 字段样例 Results:[{"EndTime":1626314520}

查看更多 →

SELECT '"a"'::json; json ------ "a" (1 row) gaussdb=# select '"abc"'::jsonb; jsonb ------- "abc" (1 row) 数组(array-json)：使用中括号[]包裹，满足数组

查看更多 →

创建子作业“分表作业”，选择CDM节点，节点属性中作业类型配置为“创建新作业”，并将步骤2中复制的作业JSON粘贴到“CDM作业消息体”中。 图6 配置CDM作业消息体 编辑“CDM作业消息体”。 由于源表有三个，分别为mail001、mail002、mail003，因此需要将作业JSON中的“fromJobConfig

查看更多 →

ignore_producer_error 否 是否忽略生产者发送数据失败的错误 true：在日志中打印错误信息并跳过错误的数据，程序继续运行 false：在日志中打印错误信息并终止程序 true metrics_slf4j_interval 否 在日志中输出上传kafka成功与失败数据的数量统计的时间间隔，单位为秒

查看更多 →

使用包围符 在目的端作业参数中开启“使用包围符”，这样数据库中如果字段包含了字段分隔符，在导出到 CS V文件的时候，CDM会使用包围符将该字段括起来，使之作为一个字段的值写入CSV文件。 数据库的数据包含换行符 场景：使用CDM先将MySQL中的某张表（表的某个字段值中包含了换行符\n）导

查看更多 →

使用包围符 在目的端作业参数中开启“使用包围符”，这样数据库中如果字段包含了字段分隔符，在导出到CSV文件的时候，CDM会使用包围符将该字段括起来，使之作为一个字段的值写入CSV文件。 数据库的数据包含换行符 场景：使用CDM先将MySQL中的某张表（表的某个字段值中包含了换行符\n）导

查看更多 →

应用示例 本节通过cURL调用CDM API，迁移本地MySQL数据库中的数据到云上服务DWS为例，介绍使用CDM API的基本流程。 获取token 获取用户的token，因为在后续的请求中需要将token放到请求消息头中作为认证。 创建CDM集群 如果您已经创建过CDM集群，

查看更多 →

使用包围符 在目的端作业参数中开启“使用包围符”，这样数据库中如果字段包含了字段分隔符，在导出到CSV文件的时候，CDM会使用包围符将该字段括起来，使之作为一个字段的值写入CSV文件。 数据库的数据包含换行符 场景：使用CDM先将MySQL中的某张表（表的某个字段值中包含了换行符\n）导

查看更多 →

创建子作业“分表作业”，选择CDM节点，节点属性中作业类型配置为“创建新作业”，并将步骤2中复制的作业JSON粘贴到“CDM作业消息体”中。 图6 配置CDM作业消息体 编辑“CDM作业消息体”。 由于源表有三个，分别为mail001、mail002、mail003，因此需要将作业JSON中的“fromJobConfig

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录 DLI 管理控制台，单击“数据管理

查看更多 →

使用包围符 在目的端作业参数中开启“使用包围符”，这样数据库中如果字段包含了字段分隔符，在导出到CSV文件的时候，CDM会使用包围符将该字段括起来，使之作为一个字段的值写入CSV文件。 数据库的数据包含换行符 场景：使用CDM先将MySQL中的某张表（表的某个字段值中包含了换行符\n）导

查看更多 →