更新时间:2024-11-29 GMT+08:00
Spark常见问题
- Spark Core
- SQL和DataFrame
- Spark Streaming
- Spark使用Ranger场景常见问题
- 访问Spark应用获取的restful接口信息有误
- 为什么从Yarn Web UI页面无法跳转到Spark Web UI界面
- HistoryServer缓存的应用被回收,导致此类应用页面访问时出错
- 加载空的part文件时,app无法显示在JobHistory的页面上
- Spark导出带有相同字段名的表,结果导出失败
- 为什么多次运行Spark应用程序会引发致命JRE错误
- IE浏览器访问Spark原生UI界面失败,无法显示此页或者页面显示错误
- Spark如何访问外部集群组件
- 对同一目录创建多个外表,可能导致外表查询失败
- 访问Spark JobHistory中某个应用的原生页面时页面显示错误
- 对接OBS场景中,spark-beeline登录后指定loaction到OBS建表失败
- Spark shuffle异常处理
- Spark多服务场景下,普通用户无法登录Spark客户端
- 安装使用集群外客户端时,连接集群端口失败
- Datasource Avro格式查询异常
- 通过Spark-sql创建Hudi表或者Hive表,未插入数据前,查询表统计信息为空
- 建表语句分区列为timestamp时,使用非标准格式的时间指定分区查询表统计失败
- SQL语法兼容TIMESTAMP/DATE特殊字符
- Spark客户端设置回收站version不生效
- Spark yarn-client模式下如何修改日志级别为INFO
父主题: 使用Spark