MySQL与LakeFormation Paimon字段类型映射
Migration会根据源端的字段类型按默认规则转换成目的端字段类型,并以此完成自动建表和实时同步。
字段类型映射规则
当源端为MySQL,目的端为LakeFormation Paimon时,支持的字段类型请参见下表,以确保数据完整同步到目的端。
| 类别 | 源端数据类型(MySQL) | 目的端数据类型(LakeFormation Paimon) | 说明 |
|---|---|---|---|
| 字符串 | CHAR(M) | CHAR(M) | - |
| VARCHAR(M) | VARCHAR(M) | - | |
| 数值 | BOOLEAN | BOOLEAN | - |
| TINYINT | TINYINT | TINYINT(1)默认会转成BOOLEAN类型,可通过在管理中心MySQL数据连接中添加“连接属性”使其仍保持转成TINYINT(1):tinyInt1isBit = false。 | |
| TINYINT UNSIGNED | INT | - | |
| SMALLINT | SAMLLINT | - | |
| SMALLINT UNSIGNED | INT | - | |
| MEDIUMINT | INT | - | |
| MEDIUMINT UNSIGNED | BIGINT | - | |
| INT | INT | - | |
| INT UNSIGNED | LONG | - | |
| BIGINT | BIGINT | - | |
| BIGINT UNSIGNED | DECIMAL(38,0) | - | |
| REAL | DOUBLE | - | |
| DECIMAL(M,D) | DECIMAL(M,D) | - | |
| NUMERIC | DECIMAL(M,D) | - | |
| FLOAT | FLOAT | - | |
| DOUBLE | DOUBLE | - | |
| DOUBLE PRECISION | DOUBLE | - | |
| 位 | BIT(M) | BINARY | - |
| 日期时间 | DATE | DATE | - |
| TIME | STRING | mysql time字段支持范围是-838:59:59 到 838:59:59, paimontime支持范围是00:00:00.000000000 到 23:59:59.999999999, 为了完整兼容mysql time字段范围将其转换为paimon的string。 | |
| DATETIME | TIMESTAMP_NTZ | - | |
| TIMESTAMP | TIMESTAMP_NTZ | MySQL timestamp是带有时区信息的, LakeFormation暂时不支持带时区的类型。 | |
| YEAR(M) | INT | - | |
| 多媒体(二进制) | BINARY(M) | BINARY | - |
| VARBINARY(M) | BINARY | - | |
| TEXT | STING | - | |
| TINYTEXT | STING | - | |
| MEDIUMTEXT | STING | - | |
| LONGTEXT | STING | - | |
| BLOB | BINARY | - | |
| TINYBLOB | BINARY | - | |
| MEDIUMBLOB | BINARY | - | |
| LONGBLOB | BINARY | 其最大存储数据大小是4G, 暂时不支持。 | |
| 特殊类型 | SET | STRING | - |
| JSON | STRING | - | |
| ENUM | STRING | - |