更新时间:2025-12-10 GMT+08:00
Spark Core企业级能力增强
- 配置Spark HA增强高可用
- 配置Spark事件队列大小
- 配置parquet表的压缩格式
- 使用Ranger时适配第三方JDK
- 配置Spark小文件自动合并
- 使用Spark小文件合并工具说明
- 配置Spark自适应数据重分布小文件合并
- 配置流式读取Spark Driver执行结果
- 配置Spark Executor退出时执行自定义代码
- 配置Spark动态脱敏
- Spark Distinct聚合优化
- 配置Spark作业失败时清理残留文件
- 配置Spark加载第三方jar包,用于注册UDF或者扩展SparkSQL
- 配置Spark JDBC加载第三方Jar包
- 配置Spark JDBCServer使用用户名和密码认证连接
父主题: 使用Spark/Spark2x