ETL映射设计
ETL映射设计用于将数据从源系统抽取出来,经过清洗、转换、加载等一系列操作后,将数据加载到目标系统的过程。解决方案工作台支持SDI、DWI和DWR层物理表、支持多种数据库、支持生成脚本等。
新建ETL映射
参数 |
说明 |
---|---|
映射名称 |
自定义 |
数据库数据类型 |
支持DWS、MRS_HIVE、MRS_SPARK,与物理模型数据类型一致 |
映射方式 |
|
源模型 |
需要进行ETL映射的源端物理模型,需要在物理模型设计中先完成设计 |
目标模型 |
需要进行ETL映射的目标端物理模型,需要在物理模型设计中先完成设计 |
目标表 |
选择目标模型中配置的表 |
是否删除数据 |
选择是否删除目标模型中的表数据 |
源表 |
选择源模型中配置的表 |
一致性校验
创建的ETL脚本支持一致性校验,脚本本身是否符合SQLl语法、引用到的物理模型是否存在、引用到的物理模型表和字段是否存在。