Spark Core 日志聚合下，如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中

查看更多 →

DLI Spark 功能 通过DLI Spark节点执行一个预先定义的Spark作业。 DLI Spark节点的具体使用教程，请参见开发一个DLI Spark作业。 参数 用户可参考表1，表2和表3配置DLI Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称

查看更多 →

使用Spark 运行Spark应用时修改split值报错 提交Spark任务时提示参数格式错误 磁盘容量不足导致Spark、Hive和Yarn服务不可用 引入jar包不正确导致Spark任务无法运行 Spark任务由于内存不够或提交作业时未添加Jar包，作业卡住 提交Spark任务

查看更多 →

弹性云 服务器 E CS --TiKV 区域：华北-北京四 按需计费：5.51元/小时 规格：通用计算增强型 | ECS | c7.4xlarge.2| 16vCPUs | 32GiB 镜像：CentOS 7.9 64bit 系统盘：通用型SSD | 100G 数据盘：通用型SSD |

查看更多 →

怎样查看弹性资源池和作业的资源使用情况？ 怎样判断当前DLI队列中的作业是否有积压？ 怎样查看DLI队列负载？ 怎样监控DLI队列上的作业异常？ 怎样将老版本的Spark队列切换成通用型队列 在default队列执行DLI SQL失败，提示超时异常怎么办？

查看更多 →

弹性云服务器 规格: X86计算 | 内存优化型 | m3.xlarge.8 | 4核 | 32GB 镜像: CentOS | CentOS 7.9 64bit 系统盘: 通用型SSD | 40GB 数据盘: 通用型SSD | 300GB 1 ￥807.16 弹性云服务器 规格:

查看更多 →

资源和成本规划 建议采用分布式部署的方式： DPE按五个节点来配置云服务器资源； DCE按三个节点来配置云服务器资源； 后期随着业务量的增加，可支持横向扩展云服务器资源，以满足业务使用。 表1 资源和成本规划 组件 云资源 规格 数量 每月费用（元） 备注 DPE DPE控制平面

查看更多 →

月 ￥1262.40 弹性云服务器 规格: X86计算 | 通用计算增强型 | c3ne.4xlarge.2 | 16核 | 32GB 镜像: CentOS | CentOS 7.9 64bit 系统盘: 通用型SSD | 100GB 数据盘: 通用型SSD | 150GB 弹性公网IP:

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

mv ./spark/spark-3.1.3-bin-hadoop3.1.tgz /root 执行命令安装Spark。 tar -zxvf spark-3.1.3-bin-hadoop3.1.tgz mv spark-3.1.3-bin-hadoop3.1 spark-obs cat

查看更多 →

使用Spark/Spark2x Spark使用说明 Spark用户权限管理 Spark客户端使用实践 访问Spark WebUI界面 使用代理用户提交Spark作业 配置Spark读取HBase表数据 配置Spark任务不获取HBase Token信息 Spark Core企业级能力增强

查看更多 →

00 BI Service 弹性云服务器* 2 规格: X86计算 | 通用计算增强型 | ac7.xlarge.2 | 4核 | 8GB 镜像: CentOS | CentOS 8.1 64bit 系统盘: 通用型SSD | 40GB 数据盘: 通用型SSD | 50GB 2 包周期

查看更多 →

Spark Core 日志聚合下，如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

MRS Spark 功能 通过MRS Spark节点实现在MRS中执行预先定义的Spark作业。 参数 用户可参考表1，表2和表3配置MRS Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”

查看更多 →

弹性云服务器 ECS -- Manager 区域：华北-北京四 规格：通用计算增强型 | ECS | c7.large.2| 2vCPUs | 4GiB 镜像：CentOS 7.9 64bit 系统盘：通用型SSD | 100GB 购买量：1 275.50元 弹性云服务器 ECS

查看更多 →

数量 1 弹性云服务器 规格: 鲲鹏计算 | 鲲鹏通用计算增强型 | kc1.4xlarge.2 | 16核 | 32GB 镜像: openEuler | openEuler 20.03 64bit with ARM 系统盘: 通用型SSD | 40GB 数据盘: 通用型SSD | 300GB

查看更多 →

1月 免费 3 / 弹性云服务器-NLP服务 规格: X86计算 | 通用计算增强型 | c6.2xlarge.4 | 8核 | 32GB 镜像: CentOS | CentOS 7.9 64bit 系统盘: 通用型SSD | 50GB 数据盘: 通用型SSD | 200GB 5

查看更多 →

如何优化镜像？ 操作场景 由于通用型II代类型云服务器采用KVM虚拟化，因此镜像中必须安装KVM驱动，未安装KVM驱动的镜像在部署通用型II代类型云服务器可能出现兼容问题，导致云服务器无法正常启动，或无法正常登录。 为了方便用户更好地使用通用型II代类型云服务器， 镜像服务 特推出自动化优化镜像功能。

查看更多 →

如何使用PySpark连接MRS Spark？ 问： 如何在ECS服务器上用PySpark连接内网开启Kerberos认证的MRS Spark集群？ 答： 将Spark的“spark-defaults.conf”文件中“spark.yarn.security.credentials

查看更多 →

弹性云服务器初始密码，创建完成后请参考在控制台重置弹性云服务器密码及时重置密码。长度为8-26位，密码至少包含大写字母、小写字母、数字和特殊字符（！@%-_=+[{}]:,./?）中的三种。 空 sap_s4_name string 是 S/4HANA应用所在弹性云服务器名称前缀

查看更多 →