文档首页/ 数据湖探索 DLI/ 常见问题/ Flink作业类/ Flink Jar作业类/ Flink Jar作业设置backend为OBS,报错不支持OBS文件系统
更新时间:2024-11-08 GMT+08:00

Flink Jar作业设置backend为OBS,报错不支持OBS文件系统

问题现象

客户执行Flink Jar作业,通过设置checkpoint存储在OBS桶中,作业一直提交失败,并伴有报错提交日志,提示OBS桶名不合法。

原因分析

  1. 确认OBS桶名是否正确。
  2. 确认所用AKSK是否有权限。
  3. 设置依赖关系provided防止Jar包冲突。
  4. 确认客户esdk-obs-java-3.1.3.jar的版本。
  5. 确认是集群存在问题。

处理步骤

  1. 设置依赖关系provided。
  2. 重启clusteragent应用集群升级后的配置。
  3. 去掉OBS依赖,否则checkpoint会写不进OBS。