配置Spark Eventlog日志回滚 配置场景 当Spark开启事件日志模式，即设置“spark.eventLog.enabled”为“true”时，就会往配置的一个日志文件中写事件，记录程序的运行过程。当程序运行很久，job很多，task很多时就会造成日志文件很大，如JD BCS erver、Spark

查看更多 →

配置Spark Executor堆内存参数 配置场景 当分配的内存太小或者被更高优先级的进程抢占资源时，会出现物理内存超限的情况。调整如下参数，可以防止物理内存超限。 配置描述 参数入口： 在应用提交时通过“--conf”设置这些参数，或者在客户端的“spark-defaults

查看更多 →

配置Spark Eventlog日志回滚 配置场景 当Spark开启事件日志模式，即设置“spark.eventLog.enabled”为“true”时，就会往配置的一个日志文件中写事件，记录程序的运行过程。当程序运行很久，job很多，task很多时就会造成日志文件很大，如JDB CS erver、Spark

查看更多 →

e 支持的数据格式：parquet、orc 配置参数 在Spark客户端的“{客户端安装目录}/Spark/spark/conf/spark-defaults.conf”配置文件中进行设置，修改如下参数： 参数 说明 默认值 spark.sql.mergeSmallFiles.enabled

查看更多 →

抹零金额=官网价-优惠金额-应付金额 应付金额=(使用量/使用量转换比率)*单价-优惠金额-抹零金额。 无线性大小的云服务产品，规格中不携带该参数。例如下图中云主机的规格为：通用计算型|Si2.large.2|2vCPUs|4GB|linux 示例：云主机的 定价 为0.04650

查看更多 →

管理优惠券 服务对象 合作伙伴、合作伙伴的客户 场景描述 合作伙伴可以查看自己所拥有的优惠券额度，并在额度范围内，为客户发放优惠券。客户在购买优惠券使用范围内的华为云服务时，可使用优惠券抵扣。合作伙伴也可以回收已发放的优惠券。 相关API列表 开放接口 接口定义链接 查询优惠券列表

查看更多 →

学生能享受优惠吗？ 通过学生认证的账号，可以体验华为云面向高校学生的相关扶持政策和优惠活动。具体以华为云官网活动页面（https://developer.huaweicloud.com/campus）呈现的活动为准。 父主题： 要求及材料

查看更多 →

回收优惠券 功能介绍 对于合作伙伴已经下发给客户的优惠券，如遇发错或其他特殊情况，合作伙伴有回收的权利。优惠券回收后，客户将不再拥有该优惠券。 伙伴登录合作伙伴中心回收为客户发放的代金券请参见这里。 只能回收代售类子客户的优惠券。 接口约束 该接口只能给合作伙伴使用，调用的时候必

查看更多 →

管理优惠券 查询优惠券列表 查询优惠券额度 发放优惠券 回收优惠券 查询已发放的优惠券 查询优惠券的发放回收记录 父主题： 管理交易

查看更多 →

nogrant”，“值”为“true ”，修改后重启所有Hive实例。 是否需要在Spark/Spark2x客户端中启用此功能？ 是，重新下载并安装Spark/Spark2x客户端。 否，操作结束。 父主题： Hive企业级能力增强

查看更多 →

HDFS企业级能力增强 配置DataNode节点容量不一致时的副本放置策略 配置DataNode预留磁盘百分比 配置从NameNode支持读操作 配置NameNode黑名单功能 配置Hadoop数据传输加密 父主题： 使用HDFS

查看更多 →

Doris企业级能力增强 配置Doris高可用功能 配置Doris支持多源数据 父主题： 使用Doris

查看更多 →

HBase企业级能力增强 配置HBase全局二级索引提升查询效率 配置HBase本地二级索引提升查询效率 增强HBase BulkLoad工具数据迁移能力 配置HBase冷热分离 配置RSGroup管理RegionServer资源 查看HBase慢请求和超大请求信息 父主题： 使用HBase

查看更多 →

Kafka企业级能力增强 配置Kafka高可用和高可靠 配置Kafka数据安全传输协议 配置Kafka数据均衡工具 配置外网客户端访问Kafka Broker 父主题： 使用Kafka

查看更多 →

Yarn企业级能力增强 配置Yarn权限控制开关 手动指定运行Yarn任务的用户 配置AM失败重试次数 配置AM自动调整分配内存 配置AM作业自动保留 配置Yarn数据访问通道协议 配置自定义调度器的WebUI 配置NodeManager角色实例使用的资源 配置ResourceM

查看更多 →

重启实例”，输入当前用户密码，单击“确定”重启所有Hive实例。 是否需要在Spark/Spark2x客户端中启用此功能？ 是，重新下载并安装Spark/Spark2x客户端。 否，操作结束。 父主题： Hive企业级能力增强

查看更多 →

create”，“值”为“true”。 单击“保存”保存配置。单击“实例”，勾选所有Spark2x实例，选择“更多 > 重启实例”，输入当前用户密码，单击“确定”重启所有实例。 重新下载并安装Spark/Spark2x客户端。 父主题： Hive企业级能力增强

查看更多 →

Spark Spark jar包冲突列表 Jar包名称 描述 处理方案 spark-core_2.1.1-*.jar Spark任务的核心jar包。 Spark可以直接使用开源同版本的Spark包运行样例代码，但是不同版本的spark-core包在使用的时候可能导致互相序列化ID不一样，因此建议使用集群自带jar包。

查看更多 →

Spark Spark基本原理 Spark HA方案介绍 Spark与其他组件的关系 Spark开源增强特性 父主题： 组件介绍

查看更多 →

notallowlocation”，“值”为“true”，修改后重启所有Hive实例。 是否需要在Spark/Spark2x客户端中启用此功能？ 是，重新下载并安装Spark/Spark2x客户端。 否，操作结束。 父主题： Hive企业级能力增强

查看更多 →

允许开启对接Kafka可靠性功能。 配置描述 在Spark客户端的“spark-defaults.conf”配置文件中进行设置。 表1 参数说明 参数 说明 默认值 spark.streaming.Kafka.reliability Spark Streaming对接Kafka是否开启可靠性功能：

查看更多 →