Spark对接OBS 概述 Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。 前提条件 已安装Hadoop，具体请参见Hadoop对接OBS。 注意事项 为了减少日志输出，在/opt/spark-2.3.3/conf/log4j.properties文件中增加配置：

查看更多 →

OBSFileSystem fs.obs.access.key: xxx fs.obs.secret.key: xxx fs.obs.endpoint: xxx fs.obs.buffer.dir: /data/buf #写数据到OBS时需要的本地临时目录，flink程序需具备此目录读写权限 编写flink应用程序。

查看更多 →

Id），需要具备访问OBS对应桶的权限。 fs.obs.secret.key 无 是 华为云的SK（Secret Access Key），需要具备访问OBS对应桶的权限。 fs.obs.session.token 无 否 华为云的securitytoken，需要具备访问OBS对应桶的权限。当使用临时AK/SK时需要。

查看更多 →

String OBS对象路径。 请求示例 动态挂载OBS。将“OBS并行文件系统”挂载到实例中指定的文件目录“/data/wang/”。 { "category" : "OBS", "mount_path" : "/data/wang/", "uri" : "obs://a

查看更多 →

发送OBS事件 目前支持的事件类型。 图1 支持类型 事件类型中描述的事件（如上传、覆盖），在OBS中触发后，根据事件订阅中事件类型的选择，可对该事件进行路由传递。例如在桶名为test_zzy的OBS源桶中上传“test930.png”文件，目录为“success”。 图2 OBS桶列表

查看更多 →

OBS委托授权 如果您的源站为华为云OBS私有桶，您需要开启OBS委托授权，授权成功后，CDN将有权限访问您账号下所有私有桶资源。 配置约束 主账号默认拥有所有权限，配置委托时无需添加权限。如果您的账号是IAM子账号，那么您的子账号需要有以下权限才可正常开启OBS委托授权： IAM权限：

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →

没有找到解压文件 问题现象 日志信息提示“unzip: cannot find or open…”。 原因分析 找不到目标解压文件时，会提示该错误信息。 主机当前用户权限不足。 处理方法 对于Windows系统，检查文件路径是否采用了反斜杠“\”符号，若存在，请用正斜杠“/”替换。

查看更多 →

环境下没有主机 问题现象 日志信息提示获取主机失败，环境下没有主机。 原因分析 环境里面没有主机导致的错误。 处理方法 选择目标应用，单击图标，单击“编辑”，进入“部署步骤”页面。 单击“环境管理”，切换到“环境管理”页面。 单击目标环境名称，切换到“资源列表”页面，单击“导入主机”。

查看更多 →