com/dev-container/spark:3.1.3-obs 配置Spark History Server 修改~/spark-obs/conf/spark-defaults.conf文件，开启Spark事件日志记录，并配置OBS桶名称及目录。 cat >> ~/spark-obs/conf/spark-defaults

查看更多 →

准备Spark应用运行环境 操作场景 Spark的运行环境（即客户端）只能部署在Linux环境下。您可以执行如下操作完成运行环境准备。 准备运行调测环境 在弹性 云服务器 管理控制台，申请一个新的弹性云 服务器 ，用于应用开发运行调测。 弹性云服务器的安全组需要和 MRS 集群Master节点的安全组相同。

查看更多 →

准备一个linux 弹性云服务器 E CS ，用于安装 DLI Livy。 ECS需要放通30000至32767端口、8998端口。具体操作请参考添加安全组规则。 ECS需安装Java JDK，JDK版本建议为1.8。配置Java环境变量JAVA_HOME。 查询弹性云服务器ECS详细信息，获取ECS的“私有IP地址”。

查看更多 →

磁盘空间）。 需要是全新的干净系统，没有安装过Apache、Nginx、php、MySQL。 步骤一：安装宝塔面板 购买并登录HECS。 购买HECS的步骤详见购买HECS。 登录HECS的步骤详见登录HECS。 执行以下命令，下载并安装宝塔面板。 yum install -y wget

查看更多 →

Windows云服务器上安装IIS服务 操作场景 本节操作以Windows Server 2012 R2 标准版操作系统的云服务器为例，介绍安装IIS服务的操作步骤。 本节操作仅是安装IIS服务的操作步骤，后续搭建具体应用的操作步骤请根据业务实际情况进行配置。 操作步骤 打开服务器管理器。

查看更多 →

Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题： 组件介绍

查看更多 →

Spark Spark jar包冲突列表 Jar包名称 描述 处理方案 spark-core_2.1.1-*.jar Spark任务的核心jar包。 Spark可以直接使用开源同版本的Spark包运行样例代码，但是不同版本的spark-core包在使用的时候可能导致互相序列化ID不一样，因此建议使用集群自带jar包。

查看更多 →

python36.zip /user/python 配置MRS客户端。 进入Spark客户端安装目录“/opt/client/Spark2x/spark/conf”，在“spark-defaults.conf”配置文件如下参数。 spark.pyspark.driver.python=/usr/bin/python3

查看更多 →

Spark Core 日志聚合下如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中，

查看更多 →

locale = "US" String 否 - Spark输入字段 配置SparkSQL输入信息： 列名：配置SparkSQL列名。 字段名：配置输入字段名。 类型：配置字段类型。 长度：配置字段长度，字段值实际长度太长则按配置的长度截取，“类型”为“CHAR”时实际长度不足则

查看更多 →

MRS Spark 功能 通过MRS Spark节点实现在MRS中执行预先定义的Spark作业。 参数 用户可参考表1，表2和表3配置MRS Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”

查看更多 →

安装 Serverless是一个Node.js CLI工具，因此您需要先在计算机上安装Node.js。 请访问Node.js官方网站，下载并按照安装说明在本地计算机上安装Node.js。 您可以通过在终端中运行node --version来验证Node.js是否安装成功，即可以看到打印出来的对应Node

查看更多 →

安装 在当前工作目录中从GitHub URL安装服务，如下： serverless install --url https://github.com/some/service 选项 --url或-u：GitHub的服务URL，必填。 --name或-n：服务名称。 示例 从GitHub

查看更多 →

init-node # 安装K8S集群环境 bash kops-tools.sh kube-manage install # 私有镜像仓库安装 bash kops-tools.sh registry install 部署产品服务 # 方式一： # 执行镜像load动作，安装前会load本地镜像并且推送到配置的镜像仓库

查看更多 →

安装 企业智慧屏是否可以挂在外面做广告屏使用？ 产品安装尺寸问题？ 企业智慧屏挂墙安装的要求？ 企业智慧屏后背的孔距是多少，是否可使用客户自己的移动支架？ 企业智慧屏可以连公司局域网吗，用户涉及保密问题，不能连互联网，只能连公司内部局域网？ 父主题： 产品规格

查看更多 →

基于弹性云服务器安装及部署Jenkins 准备工作 在安装Jenkins之前，需要购买弹性云服务器（推荐配置：4GB+内存，40GB+硬盘），操作系统选择CentOS 7.6。同时购买弹性公网IP，绑定到购买的弹性云服务器上。 ECS购买成功后，将下表中列出的入网规则添加到ECS

查看更多 →

在Linux上安装Data Provider 安装Data Provider，SAP技术支持人员通过该软件收集云服务器所在的平台信息，以便在SAP系统故障、性能下降时进行定位和分析。 在Windows上安装Data Provider 安装Data Provider，SAP技术支持

查看更多 →

安装 普通安装 静默安装 国产化版本安装 父主题： 安装说明

查看更多 →

未安装HBase时Hive on Spark任务卡顿如何处理 操作场景 此功能适用于Hive组件。 按如下操作步骤设置参数后，在未安装HBase的环境执行Hive on Spark任务时，可避免任务卡顿。 Hive on Spark任务的Spark内核版本已经升级到Spark2x

查看更多 →

未安装HBase时Hive on Spark任务卡顿如何处理 操作场景 此功能适用于Hive组件。 按如下操作步骤设置参数后，在未安装HBase的环境执行Hive on Spark任务时，可避免任务卡顿。 Hive on Spark任务的Spark内核版本已经升级到Spark2x

查看更多 →

在弹性云服务器上安装MySQL 使用root登录刚创建的弹性云服务器，然后进行MySQL安装操作： 确保服务器系统处于最新状态 yum -y update 如果显示以下内容说明已经更新完成 Replaced: grub2.x86_64 1:2.02-0.64.el7.centos

查看更多 →