Python和Spark开发平台 创建特征工程 数据采样 列筛选 数据准备 特征操作 Notebook开发 全量数据应用 发布服务 父主题： 特征工程

查看更多 →

SparkRTC支持哪些平台？ SparkRTC支持的平台有Android、iOS、MAC、Windows和Web。其中支持的各平台系统版本如下所示： Android：支持Android 5.0及以上版本。 iOS：支持iOS 8.0及以上版本。 MAC：支持MacOS10.11或以上版本，x86_64。

查看更多 →

Spark Spark jar包冲突列表 Jar包名称 描述 处理方案 spark-core_2.1.1-*.jar Spark任务的核心jar包。 Spark可以直接使用开源同版本的Spark包运行样例代码，但是不同版本的spark-core包在使用的时候可能导致互相序列化ID不一样，因此建议使用集群自带jar包。

查看更多 →

Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题： 组件介绍

查看更多 →

使用Spark 运行Spark应用时修改split值报错 提交Spark任务时提示参数格式错误 磁盘容量不足导致Spark、Hive和Yarn服务不可用 引入jar包不正确导致Spark任务无法运行 Spark任务由于内存不够或提交作业时未添加Jar包，作业卡住 提交Spark任务

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

Spark Core 日志聚合下，如何查看Spark已完成应用日志 Driver返回码和RM WebUI上应用状态显示不一致 为什么Driver进程不能退出 网络连接超时导致FetchFailedException 当事件队列溢出时如何配置事件队列的大小 Spark应用执行过程中

查看更多 →

DLI Spark 功能 通过DLI Spark节点执行一个预先定义的Spark作业。 DLI Spark节点的具体使用教程，请参见开发一个DLI Spark作业。 参数 用户可参考表1，表2和表3配置DLI Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称

查看更多 →

登录平台 主账号 登录 EIHealth 管理控制台。 选择华为账号登录。 图1 主账号登录 子账号 登录EIHealth管理控制台。 选择IAM用户登录。 图2 子账号登录

查看更多 →

平台首页 呈现企业的概述信息，如公司的名称、要开通的差旅业务、差旅申请审批等。管理员可以通过“开始配置——开启因公预订”直接点选想要开通的差旅业务，具体设置方法参考下文。

查看更多 →

平台简介 IoT行业生态工作台（IoT Stage）是一站式物联网交付平台，面向物联网渠道商与系统集成商，是买家、卖家、系统集成商的桥梁和纽带，助力设备和应用集成，使能行业应用服务，实现物联网应用的低成本复制。 无码化应用托管 1小时即可完成企业级物联网应用托管上线，通过一站式镜

查看更多 →

EIHealth平台 应用场景 基本概念

查看更多 →

平台界面 首页 输入用户的账号和密码，登录进主页面。 图1 登录界面 总览 总览主要分为三大块内容：分别是集成任务数量图表展示，数据库类型占比图表，调度异常监控图表以及调度异常数据展示。 图2 总览 图3 调度异常数据 数据源 数据源主要包含两块：左侧树状导航展示数据源路径、右侧可进行新建数据源操作。

查看更多 →

开放平台 开放平台是面向数字化活动平台客户及合作伙伴，用于统一管理目睹开放能力的对接。客户开通开放平台前，必须提前开通活动平台账号。通过活动平台进入开放平台后，可以进行创建开发者应用，下载对接密钥、设置访问黑白名单等功能。 操作说明 开放平台对接应用包含了一组对接密钥及如果干数字

查看更多 →

平台人员 员工管理 “查询”按钮：根据输入的查询条件，单击查询按钮，进行数据查询展示。 “新增”按钮：单击新增按钮，进行员工的数据维护，保存后，员工信息新增展示。 “编辑”按钮：单击编辑按钮，自动带出数据信息，修改后保存显示与修改信息一。 “删除”按钮：单击删除按钮，数据删除成功，删除后列表不再显示该条数据。

查看更多 →

工具平台 API生产阶段 API中心通过对接集成，为API开发者提供API Arts等自动化的API设计/开发/测试工具，开发者通过华为云账号登录后即可使用。 API开放阶段 API开发者（API提供方）可以在API中心申请入驻为服务商，然后自助发布上架API。上架成功后，API

查看更多 →

了解平台 物联网平台为您提供海量设备的接入和管理能力，您能便捷高效的接入各种形态的终端设备，还能在云端进行丰富完备的设备管理。但是云端物联网平台，离终端设备较远，且终端设备本身又不具备强大的计算能力，对于实时性要求较高的场景，云端因网络延时、网络拥塞等原因导致问题处理不及时；以及

查看更多 →

平台管理 在初次使用数据库加密与访问控制时，您需要先完成本章节中的基础配置操作，才能正常使用。 网络配置 升级系统版本 查询应用访问记录 备份与恢复配置信息 查看平台信息 查看高可用信息 父主题： 系统管理员操作指导

查看更多 →

平台管理 查看平台信息 手动创建账号 网络配置 父主题： 安全管理员操作指南

查看更多 →

mv ./spark/spark-3.1.3-bin-hadoop3.1.tgz /root 执行命令安装Spark。 tar -zxvf spark-3.1.3-bin-hadoop3.1.tgz mv spark-3.1.3-bin-hadoop3.1 spark-obs cat

查看更多 →