类型转换函数
概述
类型转换函数用于在Flink SQL中实现不同数据类型之间的转换。通过这些函数,可以将一个数据类型的值转换为另一个数据类型,或者在运行时获取表达式的数据类型信息。类型转换是数据加工、清洗和格式适配中的核心操作,广泛用于ETL流程、异构数据源对接及动态类型判断等场景。
更多内容参考Type Conversion Functions。
适用场景
- ETL数据清洗:从异构数据源读取数据后,使用CAST或TRY_CAST将字符串字段转换为数值、日期等目标类型。
- 数据质量容错:对可能存在脏数据的字段使用TRY_CAST,避免因个别转换失败导致整条记录处理中断。
- 动态类型判断:在运行时通过TYPEOF获取字段或表达式的数据类型,用于条件分支或调试排障。
- 跨源数据对齐:不同数据源的字段类型不一致时,通过类型转换函数统一数据类型后再进行JOIN或聚合。
约束与限制
- CAST和TRY_CAST的目标类型必须为Flink SQL支持的数据类型关键字,如INT、BIGINT、STRING、DOUBLE、DECIMAL、TIMESTAMP等。
- 并非所有类型之间均可互相转换,例如ARRAY与MAP之间、ROW与INT之间不支持直接转换,转换不支持的类型对会抛出异常(CAST)或返回NULL(TRY_CAST)。
- 从STRING转换为数值类型时,字符串必须符合目标类型的格式要求,如CAST('abc' AS INT) 会抛出异常,TRY_CAST('abc' AS INT) 返回NULL。
- 从数值类型转换为STRING时,结果格式由系统默认决定,可能不保留原始精度信息。
- TYPEOF返回的类型字符串为Flink内部类型表示,其格式可能随版本变化,不应在业务逻辑中硬编码依赖该字符串的具体内容。
- TYPEOF(input, forceSerializable) 中forceSerializable为BOOLEAN类型,当设为TRUE时返回的类型字符串保证可序列化,但可能省略部分不可序列化的类型细节。
类型转换语法结构
| 语法 | 返回类型 | 说明 | 示例 |
|---|---|---|---|
| CAST(value AS type) | 由type决定 | 将value转换为type指定的数据类型。value为待转换的表达式,type为目标数据类型关键字(如INT、BIGINT、STRING、DOUBLE、DECIMAL(p, s)、BOOLEAN、DATE、TIMESTAMP 等)。转换失败时抛出运行时异常。支持所有Flink SQL数据类型之间的合法转换,不支持的类型对转换会直接报错。 | SELECT CAST('123' AS INT); -- 123 |
| TRY_CAST(value AS type) | 由type决定,转换失败时返回 NULL | 将value转换为type指定的数据类型。参数含义与CAST相同。与CAST的区别在于:当转换失败时(如类型不兼容或值格式不匹配),不抛出异常,而是返回NULL。适用于数据质量不确定、需要容错处理的场景。 | SELECT TRY_CAST('abc' AS INT); -- NULL |
类型查询语法结构
| 语法 | 返回类型 | 说明 | 示例 |
|---|---|---|---|
| TYPEOF(input) | STRING | 返回input表达式的数据类型字符串表示。input为任意类型的表达式。返回值反映了Flink内部对该表达式类型的信息,格式如INTEGER、VARCHAR(2147483647)、ROW<f1 INT, f2 STRING> 等。 | SELECT TYPEOF(123); -- INTEGER |
| TYPEOF(input, forceSerializable) | STRING | 返回input表达式的数据类型字符串表示。input为任意类型的表达式,forceSerializable为BOOLEAN类型。当 forceSerializable为TRUE时,返回的类型字符串保证可序列化,适用于需要将类型信息在网络中传输或持久化的场景;为 FALSE时与单参数版本行为一致。 | SELECT TYPEOF(123, TRUE); -- INTEGER |