合并CBO优化 操作场景 Spark SQL默认支持基于规则的优化，但仅仅基于规则优化不能保证Spark选择合适的查询计划。CBO（Cost-Bsed Optimizer）是一种为SQL智能选择查询计划的技术。通过配置开启CBO后，CBO优化器可以基于表和列的统计信息，进行一系列的估算，最终选择出合适的查询计划。

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

可以优化的场景总数，成本优化的场景分为资源优化和计费模式优化两大类。 资源优化包含： 空闲“云主机”资源优化 EIP闲置实例优化 EVS闲置实例优化 ELB闲置实例优化 计费模式优化包含： 按需转包年包月建议覆盖全部产品类型 资源包购买建议覆盖全部产品类型 可优化资源数量 需要优化的资源总数。 预计月度可节省成本 所

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

√ 容量优化 查看容量优化分析结果概要信息 √ √ √ √ 查看容量优化分析结果详情列表 √ √ √ √ 删除容量优化分析结果列表数据 √ √ √ × 查看容量优化分析结果详情监控 √ √ √ √ 执行重新识别 √ √ √ × 执行停止分析 √ √ √ × 导出容量优化分析报告 √

查看更多 →

内存优化型 概述 内存优化型类别的专属计算集群适合处理内存中的大型数据集，搭载Intel Xeon SkyLake全新一代CPU，同时搭载全新网络加速引擎，以及DPDK（Data Plane Development Kit）快速报文处理机制，提供更高的网络性能，提供最大512GB

查看更多 →

成本优化支柱 成本优化支柱简介 基础概念 设计原则 问题和检查项 COST01 规划成本优化相应的组织机构和流程 COST02 实施预算规划管理机制 COST03 对成本进行分配 COST04 持续进行成本治理 COST05 优化指定策略和目标 COST06 使用不同计费模式优化成本

查看更多 →

在镜像列表中，在需要优化的镜像所在行的“操作”列下，选择“更多 > 优化”。 如果镜像所在行“操作”列下的“更多”选项中，没有“优化”按钮，表示该私有镜像不支持优化镜像功能。 用户也可以单击镜像名称，在镜像详情页面单击“优化”。 在“优化镜像”对话框中，如图1所示。如果用户已经手动优化过该镜像

查看更多 →

，怎么办？ Linux外部镜像文件在导出前未完成初始化配置，怎么办？ 如何优化镜像？ 如何使用通过I代 云服务器 创建的私有镜像创建II代云 服务器 如何设置镜像的网卡多队列属性？ 如何配置IPv6地址 如何优化系统盘镜像使其支持实例快速发放？ 为什么Windows云服务器安装Guest

查看更多 →

动、修改UUID等。 准备工作 将待优化的Linux镜像创建为 弹性云服务器 ，并开机登录。 确认是否需要优化私有镜像。 具体操作请参见确认是否需要优化私有镜像。 请根据虚拟化类型选择对应的优化操作，不同的虚拟化类型优化过程略有不同。 私有镜像优化过程 为了成功安装原生的XEN和KV

查看更多 →

合并CBO优化 操作场景 Spark SQL默认支持基于规则的优化，但仅仅基于规则优化不能保证Spark选择合适的查询计划。CBO（Cost-Bsed Optimizer）是一种为SQL智能选择查询计划的技术。通过配置开启CBO后，CBO优化器可以基于表和列的统计信息，进行一系列的估算，最终选择出合适的查询计划。

查看更多 →

开通优化顾问服务 开通优化顾问前请先 注册华为账号 并开通华为云。 登录华为云管理控制台。 选择“服务列表 > 管理与监管 > 优化顾问”，进入优化顾问服务页面。 勾选“我已阅读并同意《优化顾问服务声明》”选项，然后单击“确定”。 “云资源访问授权”和“检查结果访问授权”全部选择后单击“确定授权”，即可使用优化顾问。

查看更多 →

查询分子优化任务 功能介绍 通过分子优化任务ID查询分子优化任务状态及结果。 URI GET /v1/{project_id}/task/optimization/{task_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 华为云项目id

查看更多 →

成本优化支柱简介 成本优化支柱专注于帮助企业高效地使用云服务来构建工作负载，面向工作负载的整个生命周期不断完善和改进，减少不必要的开支并提升运营效率，让云上应用始终最具成本效益。 成本优化实践不意味着只有降本，它是安全合规、韧性等维度的平衡，也是达成业务目标的最优投入。 华为公司

查看更多 →

要启动聚合算法优化，在Spark客户端的“spark-defaults.conf”配置文件中进行设置。 表1 参数介绍 参数 描述 默认值 spark.sql.codegen.aggregate.map.twolevel.enabled 是否开启聚合算法优化： true：开启 false：不开启

查看更多 →

Datasource表优化 操作场景 将datasource表的分区消息存储到Metastore中，并在Metastore中对分区消息进行处理。 优化datasource表，支持对表中分区执行增加、删除和修改等语法，从而增加与Hive的兼容性。 支持在查询语句中，把分区裁剪并下压

查看更多 →

Hive Join数据优化 操作场景 使用Join语句时，如果数据量大，可能造成命令执行速度和查询速度慢，此时可进行Join优化。 Join优化可分为以下方式： Map Join Sort Merge Bucket Map Join Join顺序优化 Map Join Hive的Map

查看更多 →

Hive SQL逻辑优化 操作场景 在Hive上执行SQL语句查询时，如果语句中存在“(a&b) or (a&c)”逻辑时，建议将逻辑改为“a & (b or c)”。 样例 假设条件a为“p_partkey = l_partkey”，优化前样例如下所示： select

查看更多 →

针对云上资源的告警情况、负载情况和健康情况进行检查。从监控的角度分析业务场景和历史故障，结合华为云运维最佳实践，提供针对性的优化建议。 资源监控与优化包括： 基础资源监控，提供基于华为云CES（云监控）的云资源指标及事件监控的配置建议。 应用&容器监控，提供基于华为云AOM（应用

查看更多 →

Execute）形式执行的语句进行查询计划的优化。 该参数属于SUSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：布尔型。 on表示优化器将优化PBE语句的查询计划。 off表示不使用优化。 默认值：on enable_global_stats 参数说明：标识当前统计

查看更多 →

优化器开销常量 介绍优化器开销常量。这里描述的开销可以按照任意标准度量。只关心其相对值，因此以相同的系数缩放它们将不会对优化器的选择产生任何影响。缺省时，它们以抓取顺序页的开销为基本单位。也就是说将seq_page_cost设为1.0，同时其他开销参数以它为基准设置。也可以使用其他基准，比如以毫秒计的实际执行时间。

查看更多 →