Standalone模式spark配置 数据工厂应用内配置 图1 计算引擎配置 参数配置中spark.executor.extraClassPath指定spark上需要额外加载的jar包的路径，jar包需要放在spark所在 服务器 上。如果spark是集群环境，则每个节点都需要放入jar包，且路径相同。

查看更多 →

常见jar包冲突处理方式 问题现象 Spark能对接很多的第三方工具，因此在使用过程中经常会依赖一堆的三方包。而有一些包 MRS 已经自带，这样就有可能造成代码使用的jar包版本和集群自带的jar包版本不一致，在使用过程中就有可能出现jar包冲突的情况。 常见的jar包冲突报错有： 1、报错类找不到：java

查看更多 →

常见jar包冲突处理方式 问题现象 Spark能对接很多的第三方工具，因此在使用过程中经常会依赖一堆的三方包。而有一些包MRS已经自带，这样就有可能造成代码使用的jar包版本和集群自带的jar包版本不一致，在使用过程中就有可能出现jar包冲突的情况。 常见的jar包冲突报错有： 1、报错类找不到：java

查看更多 →

Flink Jar 包冲突，导致提交失败 问题描述 用户Flink程序的依赖包与 DLI Flink平台的内置依赖包冲突，导致提交失败。 解决方案 查看是否已包含DLI Flink运行平台中已经存在的包，如果存在，则需要将自己的Jar包删除。 DLI内置依赖包请参考《 数据湖探索 用户指南》。

查看更多 →

Spark Jar作业开发指南 使用Spark Jar作业读取和查询OBS数据 使用Spark作业访问DLI元数据 使用Spark-submit提交Spark Jar作业 使用Livy提交Spark Jar作业 使用Spark作业跨源访问数据源

查看更多 →

$host; proxy_redirect off; } 移动jar包到指定位置 移动所需jar包ntocc-basic-api.jar, ntocc-tps-api.jar, ntocc-park-api.jar 到/root 目录下 应用程序启动 创建目录(mkdir //usr/local/server)

查看更多 →

service 监控iDME服务 通过控制台监控 登录应用运维管理控制台，实时监控各 云服务器 的使用情况，包括CPU、内存、网络等各种看板，监控云服务器的负载水平。 通过云服务器监控 登录云服务器。 执行如下命令，进入arthas目录。 cd /opt/arthas 执行如下命令，

查看更多 →

别，对应为 GaussDB (DWS)的 LOG 级别。Java Logger类输出的日志消息都会重定向到GaussDB(DWS)后端，并写入到服务器日志或显示在用户界面上。MPPDB服务器日志将记录LOG、WARNING、ERROR级别的信息，而SQL用户界面将显示WARNING和ERROR级别的日志消息。Java

查看更多 →

目前仅支持获取第三方公开镜像。 组件部署方式说明 组件部署方式 说明 容器部署 云容器引擎部署：云容器引擎CCE提供高度可扩展的、高性能的企业级Kubernetes集群，支持运行Docker容器。借助云容器引擎，您可以在云平台上轻松部署、管理和扩展容器化应用程序。 虚拟机部署 虚拟机，即弹性云服务器E CS ，

查看更多 →

cos引擎。 前提条件 已创建Nacos引擎，具体操作请参考快速创建Nacos引擎。 下载github的demo源码到本地并解压。 本地编译构建打包机器环境已安装了Java JDK、Maven，并且能够访问Maven中央库。 约束限制 Nacos对Eureka的兼容，主要是兼容E

查看更多 →

安装程序及依赖驱动清单 以下内容为本次安装部署中安装程序及依赖驱动的清单列表，当需要使用到主数据数据集成中的实时数据处理功能时，需根据实际需求安装对应服务器及驱动。 安装程序清单 表1 安装程序清单 安装程序名称 支持的操作系统 说明 esendatagovernanceV2.5

查看更多 →

采集Syslog汇聚服务器日志到LTS 背景信息 Syslog是网络上各种设备将日志收集到日志服务器的一种数据协议，它几乎被所有的网络设备支持，并且能够记录多种事件类型的日志消息，支持syslog的设备常见的有路由器、交换机、打印机等等，甚至unix-like的服务器也可以支持产生s

查看更多 →

/app/zookeeper/data/myid echo 1 > /app/zookeeper/data/myid 同步配置到其它节点 #将配置好的ZooKeeper复制到其它节点 scp -rp /app/zookeeper-3.4.6 root@sfmap4:/app/ scp -rp

查看更多 →

S工具：下载地址。 下载OBSA-HDFS工具的jar包（如hadoop-huaweicloud-3.1.1-hw-53.8.jar）到/mnt/obsjar目录。 hadoop-huaweicloud-x.x.x-hw-y.jar包含义：前三位x.x.x为配套hadoop版本号

查看更多 →

生产打开下面配置，使用jar同级config目录配置文件 logging: config: config/log4j2.xml ``` 启动、停止 启动： 进入data-quality-manager.jar所在路径，执行 ```shell nohup java -jar data-quality-manager

查看更多 →

路径。但是该目录只可以读，不可以写入。 如果您希望在代码运行期间写入一些数据到实例里，打印日志到本地，或者您使用的依赖默认写入jar所在的目录，请对/tmp目录进行写入操作。 我的日志如何被收集，应该怎么输出日志？ 函数实例在一段时间内没有请求会被销毁，写入到本地日志会同时被销毁，当前用户也无法在函数运行中

查看更多 →

ion_userservice.yml > user.log 2>&1 & 执行配置后的应用启动脚本，开启应用性能监控。 在ECS上，若使用Tomcat容器启动服务则需添加探针，执行如下操作： 进入到Tomcat容器的bin路径下(根据自己Tomcat容器的路径)。 请将此命令拷贝至catalina

查看更多 →

果该目录不存在，程序会自动创建。 localFilePath 是 - 存放Spark程序中使用的jar包、Python程序文件、配置文件等的本地目录。 程序会自动将Spark程序依赖到的相关文件上传的OBS路径，并加载到DLI服务端资源包。 ak 是 - 用户的Access Key。

查看更多 →

使用GDS导出数据到远端服务器 关于GDS并行导出 规划导出数据 安装配置和启动GDS 创建GDS外表 执行导出数据 停止GDS GDS导出示例 父主题： 导出数据

查看更多 →

别，对应为GaussDB(DWS)的LOG级别。Java Logger类输出的日志消息都会重定向到GaussDB(DWS)后端，并写入到服务器日志或显示在用户界面上。MPPDB服务器日志将记录LOG、WARNING、ERROR级别的信息，而SQL用户界面将显示WARNING和ERROR级别的日志消息。Java

查看更多 →

了代码合入后自动构建打包并在ServiceStage上升级部署。 父主题： 使用Gitlab对接Jenkins自动构建并升级部署到ServiceStage的组件

查看更多 →