类型转换 概述 操作符 函数 值存储 UNION，CASE和相关构造 父主题： SQL参考

查看更多 →

GROUP BY转换 MySQL/ADB分组查询的时候允许查询非分组字段，不报错；DWS分组查询时只能查询分组字段和聚集函数，报错。因此补齐没有group by的查询分组字段。 输入示例 1 SELECT e.department_id, department_name, ROUND(AVG(salary)

查看更多 →

样例 通过“ CS V文件输入”算子，生成三个字段A、B和C。 源文件如下图： 配置“拼接转换”算子，“分隔符”为空格，生成新字段D： 转换后，依次输出A、B、C和D，结果如下： 父主题： Loader转换类算子

查看更多 →

要求在NodeManager节点上有MySQL的mysqldump和mysqlimport命令，并且此两个命令所属MySQL客户端版本与MySQL 服务器 版本兼容，如果没有这两个命令或版本不兼容，请参考http://dev.mysql.com/doc/refman/5.7/en/l

查看更多 →

TEXT 支持，SQLServer最大支持4G，PostgreSQL只支持2G。 TEXT TEXT 支持，SQLServer最大支持4G，PostgreSQL只支持2G。 NCHAR CHAR 支持 NVARCHAR(M) VARCHAR/ TEXT 支持，根据M的大小转换成对应的类

查看更多 →

关系型数据 MySQL Hadoop： MRS Hudi MySQL同步到MRS Hudi作业配置 MySQL数据库建议使用版本：5.6、5.7、8.x版本。 Hudi建议使用版本：0.11.0。 消息系统：DMS Kafka MySQL同步到Kafka作业配置 MySQL数据库建议使用版本：5

查看更多 →

SQLServer与DWS字段类型映射 Migration会根据源端的字段类型按默认规则转换成目的端字段类型，并以此完成自动建表和实时同步。 字段类型映射规则 当源端为SQLServer，目的端为DWS时，支持的字段类型请参见下表，以确保数据完整同步到目的端。 表1 SQLServer

查看更多 →

样例 通过“CSV文件输入”算子，生成三个字段A、B和C。 源文件如下图： 配置“拼接转换”算子，“分隔符”为空格，生成新字段D： 转换后，依次输出A、B、C和D，结果如下： 父主题： 转换算子

查看更多 →

分隔转换 概述 “分隔转换”算子，将已有字段的值按指定的分隔符分隔后生成新字段。 输入与输出 输入：需要分隔的字段 输出：分隔后的字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输入字段名 被分隔的字段名，需填写上一个转换步骤生成的字段名。 string 是

查看更多 →

类型转换 概述 操作符 函数 值存储 UNION，CASE和相关构造 父主题： SQL参考

查看更多 →

类型转换 概述 操作符 函数 值存储 UNION，CASE和相关构造 父主题： SQL参考

查看更多 →

SQLServer与Hudi字段类型映射 Migration会根据源端的字段类型按默认规则转换成目的端字段类型，并以此完成自动建表和实时同步。 字段类型映射规则 当源端为SQLServer，目的端为Hudi时，支持的字段类型请参见下表，以确保数据完整同步到目的端。 表1 SQLServer

查看更多 →

出敏感对象。 DSC支持的数据源如表1所示。 表1 支持的数据源 数据源 具体的数据类型 扫描限制 RDS（关系型数据库） MySQL、SqlServer、PostgreSQL类型。 采样扫描前500行数据。扫描指标QPS为300次/秒。 CSS （ 云搜索服务 ） 大数据资产 -- OBS（ 对象存储服务 ）

查看更多 →

数据类型转换和转换函数 日期时间字符串、日期时间对象和Unix时间戳的相互转换方式和对应转换函数如下图所示。 上图所示的转换场景和对应的转换函数具体描述如下表所示。 转换场景 转换函数 日期时间对象和Unix时间戳的相互转换 日期时间对象转为Unix时间戳。 dt_parseti

查看更多 →

对应目的端数据源 相关文档 关系型数据 MySQL Hadoop：MRS Hudi MySQL同步到MRS Hudi作业配置 消息系统：DMS Kafka MySQL同步到Kafka作业配置 数据仓库 ：DWS MySQL同步到DWS作业配置 SQLServer Hadoop：MRS Hudi

查看更多 →

要求在NodeManager节点上有MySQL的mysqldump和mysqlimport命令，并且此两个命令所属MySQL客户端版本与MySQL服务器版本兼容，如果没有这两个命令或版本不兼容，请参考http://dev.mysql.com/doc/refman/5.7/en/l

查看更多 →

RDS实例的端口包含被禁止的端口，视为“不合规”。 标签 rds 规则触发方式 配置变更 规则评估的资源类型 rds.instances 规则参数 blockedPortsForMysql：指定MySQL数据库禁止的端口列表，数组类型。 blockedPortsForMariadb：

查看更多 →

转换镜像格式 通过qemu-img工具转换镜像格式 通过qemu-img-hw工具转换镜像格式

查看更多 →

转换算子 长整型时间转换 空值转换 增加常量字段 随机值转换 拼接转换 分隔转换 取模转换 剪切字符串 EL操作转换 字符串大小写转换 字符串逆序转换 字符串空格清除转换 过滤行转换 更新域 父主题： 算子帮助

查看更多 →

字段原值为null时，替换成指定的值。 样例 通过“CSV文件输入”算子，生成两个字段A和B。 源文件如下图： 配置“空值转换”算子，如下图： 转换后，将A和B的值输出后的结果如下： 父主题： 转换算子

查看更多 →

通过“CSV文件输入”算子，生成两个字段A和B。 源文件如下图： 配置“随机值转换”算子，生成C、D、E三个字段： 转换后，按顺序输入这五个字段： 可以发现，每次生成的随机值都不一样。 父主题： 转换算子

查看更多 →