更新时间:2024-07-19 GMT+08:00

使用hcatalog方式同步hive parquet表报错

问题

同步hive parquet表,其分区字段为非string类型,无法正常使用hive import导入,只能考虑使用hcatalog方式,但是hcatalog方式报错如下:

回答

  1. 修改sqoop源码SqoopHCatUtilities中的代码,将限制代码去掉。
  2. 修改hive客户端中的hive-site.xml文件,修改hive.metastore.integral.jdo.pushdown参数为true。