使用Spark 使用前须知 从零开始使用Spark 从零开始使用Spark SQL 使用Spark客户端 访问Spark Web UI界面 Spark对接OpenTSDB

查看更多 →

Spark输入 概述 “Spark输入”算子，将SparkSQL表的指定列转换成同等数量的输入字段。 输入与输出 输入：SparkSQL表列 输出：字段 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark数据库 SparkSQL的数据库名称。 String

查看更多 →

MRS Spark 功能 通过MRS Spark节点实现在MRS中执行预先定义的Spark作业。 参数 用户可参考表1，表2和表3配置MRS Spark节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”

查看更多 →

查看 DLI 队列负载 如何判断当前DLI队列中的作业是否有积压？ 如何将老版本的Spark队列切换成通用型队列 为什么云监控CES服务看不到DLI队列的资源运行情况？ 购买了64CU的队列资源，运行Spark作业时如何分配？ 创建扩容任务时 ，提示Queue plans create

查看更多 →

minBaseValueRatio 优惠券使用比例限制 优惠券使用比例限制（最小门槛值百分比）。 - 代金券额度 canSetValidTime 优惠券有效期可调整 伙伴发放优惠券时，是否可调整券的有效期。 0：不可调整（保持和优惠券额度有效期相同） 1：可调整（可以在优惠券额度有效期内选择） 默认：0（不可设置）

查看更多 →

mv ./spark/spark-3.1.3-bin-hadoop3.1.tgz /root 执行命令安装Spark。 tar -zxvf spark-3.1.3-bin-hadoop3.1.tgz mv spark-3.1.3-bin-hadoop3.1 spark-obs cat

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

Spark接口 Java Scala Python REST API ThriftServer接口介绍 常用命令介绍 父主题： Spark应用开发

查看更多 →

优惠券是什么？ 优惠券是代金券和折扣券的统称，是指华为云提供给客户的优惠凭证，通常有一定的使用限制。例如，优惠券都有有效期限制，某些优惠券只适用于指定类型的云服务。 代金券 华为云代金券是面向客户和合作伙伴发放，具有一定面值，在购买华为云服务时抵减现金支付的一种优惠凭证。 支付订

查看更多 →

在“云市场专属优惠”页面，伙伴可以单击右上角的“创建优惠”按钮，进入“创建专属优惠”页面，填写信息后单击“提交”进行创建专属优惠。 支持一个商品多规格设置不同的折扣。 单击“批量设置折扣与分成”，可以批量设置折扣与分成。 在“专属优惠申请”页签，伙伴可以查看专属优惠申请的记录。 单击，伙伴可以查看产品ID、商品

查看更多 →

查看云商店优惠商品 加入CPPO解决方案提供商计划的伙伴可以查看优惠商品。 操作步骤 使用合作伙伴账号登录华为云。 单击页面右上角账号下拉框中的“伙伴中心”，进入伙伴中心。 在顶部导航栏中选择“销售 > 客户业务 > 云商店专属优惠>优惠商品”页面。 “优惠商品”页面包含商品报价

查看更多 →

享”。 示例2： 客户购买包年/包月某云服务，恰好有优惠活动（如买3年送1年等促销活动），已经享受促销价格，在支付时不能再使用自己名下的折扣优惠和优惠券。 优惠券使用说明： 优惠券包含代金券和折扣券，是指华为云提供给客户的优惠凭证，通常有一定的使用限制。 代金券的使用规则请参见 代金券使用限制解读

查看更多 →

使用Spark/Spark2x Spark/Spark2x服务名称说明 基本操作 Spark2x日志介绍 获取运行中Spark应用的Container日志 小文件合并工具 Spark中使用代理用户提交Spark任务 CarbonData首查优化工具 Spark2x性能调优 Spark2x常见问题

查看更多 →

导入阿里云主机资源清单 登录迁移中心管理控制台。 单击左侧导航栏的“调研>应用发现”，进入应用发现页面。在页面左上角的当前项目下拉列表中选择迁移项目。 首次创建任务，在工具采集区域，单击“导入>阿里云主机资源清单”按钮；非首次创建任务，单击任务框中的“导入>阿里云主机资源清单”，弹出导入阿里云主机资源清单窗口。

查看更多 →

折扣与优惠券 合作伙伴如何申请代金券？ 拉新券能否用于按需产品？ 代金券可以全额购买产品吗？ 经销商如何给严选商城中的产品设置折扣? 客户关联合作伙伴后，账户中的余额还能继续使用吗？ 伙伴可以修改给客户下发的优惠券面额、使用范围及有效期等信息吗？ 伙伴如何查看客户在严选商城的差价？

查看更多 →

Spark Streaming Streaming任务打印两次相同DAG日志 Spark Streaming任务一直阻塞 运行Spark Streaming任务参数调优的注意事项 为什么提交Spark Streaming应用超过token有效期，应用失败 为什么Spark Str

查看更多 →

Spark应用开发 概述 环境准备 开发程序 调测程序 调优程序 Spark接口 FAQ 开发规范

查看更多 →

Spark SQL程序 场景说明 Java样例代码 Scala样例代码 父主题： 开发程序

查看更多 →

Spark SQL程序 场景说明 Java样例代码 Scala样例代码 Python样例代码 父主题： 开发程序

查看更多 →

Spark on HBase程序 操作Avro格式数据 操作HBase数据源 BulkPut接口使用 BulkGet接口使用 BulkDelete接口使用 BulkLoad接口使用 foreachPartition接口使用 分布式Scan HBase表 mapPartition接口使用

查看更多 →

Spark Core程序 场景说明 Java样例代码 Scala样例代码 Python样例代码 父主题： 开发程序

查看更多 →