使用Spark 运行Spark应用时修改split值报错 提交Spark任务时提示参数格式错误 磁盘容量不足导致Spark、Hive和Yarn服务不可用 引入jar包不正确导致Spark任务无法运行 Spark任务由于内存不够或提交作业时未添加Jar包，作业卡住 提交Spark任务

查看更多 →

Spark Core 日志聚合下，如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中

查看更多 →

model_service.log as log from model_service.spark_model_service import SparkServingBaseService from pyspark.ml.classification import LogisticRegression

查看更多 →

DLI Spark 功能 通过DLI Spark节点执行一个预先定义的Spark作业。 DLI Spark节点的具体使用教程，请参见开发一个DLI Spark作业。 参数 用户可参考表1，表2和表3配置DLI Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

Spark Core 日志聚合下，如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中

查看更多 →

MRS Spark 功能 通过MRS Spark节点实现在MRS中执行预先定义的Spark作业。 参数 用户可参考表1，表2和表3配置MRS Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”

查看更多 →

按照获取软件包节的方法获取了软件版本，且按照确认Atlas 500软件版本节确认软件版本一致性后，开始搭建软件开发环境。ubuntu 16.04 LTS操作系统镜像下载地址：http://old-releases.ubuntu.com/releases/。mkdir -p /home/Atlas500_DDK。tar -zxvf A500

查看更多 →

快速搭建数据大屏 操作场景 数据大屏是面向企业数据消费者，将可视化和场景叙事技术结合，运行在智能设备上，非接触式连接的酷炫大屏，满足业务监控数字屏、项目会议演示屏，以及对外媒体大屏等场景，从而推动企业数据群体消费。 操作流程 图1 创建大屏流程 主要： 新建项目 新建数据源 新建数据集

查看更多 →

手工搭建LNMP环境（Ubuntu 20.04） 简介 本文主要介绍了在华为云上如何使用 弹性云服务器 的Linux实例手工搭建LNMP平台的Web环境。本文档以Ubuntu 20.04 64位操作系统为例。 Linux实例手工部署LNMP环境具体操作步骤如下： 安装Nginx 安装MySQL

查看更多 →

搭建Discuz论坛网站 方案概述 资源和成本规划 搭建Discuz论坛网站操作流程 实施步骤 父主题： 搭建网站

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

mv ./spark/spark-3.1.3-bin-hadoop3.1.tgz /root 执行命令安装Spark。 tar -zxvf spark-3.1.3-bin-hadoop3.1.tgz mv spark-3.1.3-bin-hadoop3.1 spark-obs cat

查看更多 →

使用Spark/Spark2x Spark使用说明 Spark用户权限管理 Spark客户端使用实践 访问Spark WebUI界面 使用代理用户提交Spark作业 配置Spark读取HBase表数据 配置Spark任务不获取HBase Token信息 Spark Core企业级能力增强

查看更多 →

快速搭建大屏（交互功能） 用户可以通过交互功能实现大屏内组件间数据联动。 本示例通过地理搜索、柱状图，演示如何实现组件之间数据联动。基本流程如下： 添加和配置组件 预览和发布大屏 前提条件 已登录 DLV 控制台，并使用空白模板创建一个大屏。 添加和配置组件 打开大屏开发页面，在左侧组件中心，选择“交互

查看更多 →

搭建emobile运行环境 E CS 服务器购买，选型 操作系统选择Centos7.9，安全组使用默认安全组，端口提前开通好80,443,5222,7070,8999端口 图1 选型1 图2 选型2 服务器 磁盘挂载 本操作以该场景为例，当弹性 云服务器 挂载了一块新的数据盘时，使用fdi

查看更多 →

硅基数字人直播搭建 图1 图示1 实施步骤介绍 直播主题确定：根据业务的具体需要，客户确定好直播主题，比如说带货直播还是招生直播等。 模特选择：基于上述直播主题的确定，选择对应的数字人主播，主播选择可以是库里已经有的，也可以是前面已经帮客户定制好的数字人模特。 背景选择：基于上述

查看更多 →

步骤四：搭建网站 您可以选择华为云搭建您的网站，华为云提供丰富的建站资源和建站方式，如表1所示。 表1 建站方式 建站方式 特点 适用场景 自助建站 部署时间长，过程复杂，需要自行购买服务器、搭建并维护网站，可以满足个性化的部署需求。 适用于有一定动手能力，有意愿自行设计和搭建个人或

查看更多 →

搭建专线或VPN连接 使用专线迁移配置进行迁移时，需要源端服务器和华为云通过专线/VPN等方式打通，再借助代理服务器去访问所需云服务。因此在配置代理服务器之前，需要先完成源端服务器与华为云的专线搭建或VPN连接。 关于专线搭建请参考云专线帮助文档或咨询云专线服务。 关于VPN连接

查看更多 →