文档首页/
MapReduce服务 MRS/
组件操作指南(安卡拉区域)/
使用Spark/
Spark常见问题/
通过Spark-sql创建Hudi表或者Hive表,未插入数据前,查询表统计信息为空
更新时间:2024-11-29 GMT+08:00
通过Spark-sql创建Hudi表或者Hive表,未插入数据前,查询表统计信息为空
问题
通过spark-sql创建Hudi表或者Hive表,未插入数据之前,查询表统计信息都为空。
解决方法
可以通过以下两种方式生成:
- 手动通过analyze命令,触发统计信息收集。如若没有插入数据,analyze命令执行完之后,再通过desc formatted table_name命令查询totalsize等于0。
- 配置spark.sql.statistics.size.autoUpdate.enabled=true,再插入数据,后台会触发统计信息收集。
父主题: Spark常见问题