CSV数据类型插入MySQL报错invalid utf-8 charater string ''

问题描述

迁移作业执行失败，提示invalid utf-8 charater string ''。

故障分析

考虑是数据格式问题，后端进一步分析日志确认。

解决方案

1. 后台排查sqoop日志，考虑源端数据类型格式问题导致异常。
2. 分析源端数据类型，发现数据类型中有脏数据，源端数据类型有问题。
3. 客户CDM界面配置脏数据功能，作业重跑成功，OBS桶排查脏数据类型存在问题，格式不匹配。