配置Spark Executor堆内存参数 配置场景 当分配的内存太小或者被更高优先级的进程抢占资源时，会出现物理内存超限的情况。调整如下参数，可以防止物理内存超限。 配置描述 参数入口： 在应用提交时通过“--conf”设置这些参数，或者在客户端的“spark-defaults

查看更多 →

配置Spark Eventlog日志回滚 配置场景 当Spark开启事件日志模式，即设置“spark.eventLog.enabled”为“true”时，就会往配置的一个日志文件中写事件，记录程序的运行过程。当程序运行很久，job很多，task很多时就会造成日志文件很大，如JD BCS erver、Spark

查看更多 →

配置Spark HA增强高可用 配置多主实例模式 配置Spark多租户模式 配置多主实例与多租户模式切换 父主题： Spark Core企业级能力增强

查看更多 →

配置Spark Eventlog日志回滚 配置场景 当Spark开启事件日志模式，即设置“spark.eventLog.enabled”为“true”时，就会往配置的一个日志文件中写事件，记录程序的运行过程。当程序运行很久，job很多，task很多时就会造成日志文件很大，如JDB CS erver、Spark

查看更多 →

配置Spark Executor堆内存参数 配置场景 当分配的内存太小或者被更高优先级的进程抢占资源时，会出现物理内存超限的情况。调整如下参数，可以防止物理内存超限。 配置描述 参数入口： 在应用提交时通过“--conf”设置这些参数，或者在客户端的“spark-defaults

查看更多 →

管理优惠券 服务对象 合作伙伴、合作伙伴的客户 场景描述 合作伙伴可以查看自己所拥有的优惠券额度，并在额度范围内，为客户发放优惠券。客户在购买优惠券使用范围内的华为云服务时，可使用优惠券抵扣。合作伙伴也可以回收已发放的优惠券。 相关API列表 开放接口 接口定义链接 查询优惠券列表

查看更多 →

学生能享受优惠吗？ 通过学生认证的账号，可以体验华为云面向高校学生的相关扶持政策和优惠活动。具体以华为云官网活动页面（https://developer.huaweicloud.com/campus）呈现的活动为准。 父主题： 要求及材料

查看更多 →

回收优惠券 功能介绍 对于合作伙伴已经下发给客户的优惠券，如遇发错或其他特殊情况，合作伙伴有回收的权利。优惠券回收后，客户将不再拥有该优惠券。 伙伴登录合作伙伴中心回收为客户发放的代金券请参见这里。 只能回收代售类子客户的优惠券。 接口约束 该接口只能给合作伙伴使用，调用的时候必

查看更多 →

管理优惠券 查询优惠券列表 查询优惠券额度 发放优惠券 回收优惠券 查询已发放的优惠券 查询优惠券的发放回收记录 父主题： 管理交易

查看更多 →

如何申请入门级SSL证书？ 该任务指导用户如何申请入门级SSL证书 华为云SSL证书管理服务中，GeoTrust品牌提供有入门级SSL证书。 前提条件 购买证书的账号拥有SCM Administrator/SCM FullAccess和BSS Administrator权限。 步骤一：购买证书

查看更多 →

请根据重置Linux 云服务器 云主机密码（未安装重置密码插件）安装插件。 云主机的重置密码请求下发后，脚本执行失败，该API不会报错。 云主机开机或重启后，新密码生效。 该接口支持虚拟机状态为开机或者关机状态下执行。 调试 您可以在 API Explorer 中调试该接口。 URI PUT

查看更多 →

器节点不需要手动安装ICAgent，只需要在创建集群或部署应用时进行操作。 安装方式见表1： 表1 安装方式 方式 适用场景 首次安装 当满足以下条件时，您需要按照该方式安装： 该 服务器 上未安装过ICAgent。 继承安装 当满足以下条件时，您需要按照该方式安装： 您有多个服务器

查看更多 →

在页面右上角，单击“安装主机安全Agent”，弹出“安装主机安全Agent”对话框。 选择“ 弹性云服务器 ECS安装”，并单击“开始配置”。 选择安装方式。 选择安装模式：命令行安装 选择服务器操作系统：Linux 选择安装数量：单台 （可选）选择需要打通网络安装Agent的服务器，并单击“下一步”。

查看更多 →

Spark SQL常用配置项说明 本章节为您介绍 DLI 批作业SQL语法的常用配置项。 表1 常用配置项 名称 默认值 描述 spark.sql.files.maxRecordsPerFile 0 要写入单个文件的最大记录数。如果该值为零或为负，则没有限制。 spark.sql.shuffle

查看更多 →

ntConfig_ConfigFiles.tar”，继续解压该文件。 进入客户端配置文件解压路径“*\Spark\config”，获取Spark配置文件，并所有的配置文件导入到Spark样例工程的配置文件目录中（通常为“resources”文件夹）。 复制解压目录下的“hosts

查看更多 →

使用，在这边添加一个配置项，用户可以根据Driver的内存大小设置合适的值。 配置描述 参数入口： 在执行应用之前，在Spark服务配置中修改。在Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。

查看更多 →

为了更灵活的使用，在这边添加一个配置项，用户可以根据Driver的内存大小设置合适的值。 配置描述 参数入口： 在执行应用之前，在Spark服务配置中修改。在Manager系统中，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。 表1

查看更多 →

discarded 例如，SparkSQL运行TPCDS 500G的测试时，使用默认配置出现错误。所以当数据量较大时需要适当的调整该参数。 配置参数 参数入口： 在Manager系统中，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”。在搜索框中输入参数名称。

查看更多 →

tables; 图3 Spark2x验证返回已创建的表名 使用“Ctrl + C”退出spark beeline。 集群安装后使用spark sql 使用安装客户端用户登录客户端安装节点。 配置环境变量。 source 客户端安装目录/bigdata_env 修改配置文件： vim 客

查看更多 →

Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题： 组件介绍

查看更多 →

minBaseValueRatio 优惠券使用比例限制 优惠券使用比例限制（最小门槛值百分比）。 - 代金券额度 canSetValidTime 优惠券有效期可调整 伙伴发放优惠券时，是否可调整券的有效期。 0：不可调整（保持和优惠券额度有效期相同） 1：可调整（可以在优惠券额度有效期内选择） 默认：0（不可设置）

查看更多 →