小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

如表1所示，包括了优化顾问服务的所有系统策略。 表1 优化顾问服务系统策略 策略名称 描述 依赖关系 策略类别 OA FullAccessPolicy 优化顾问服务所有权限。 无 系统策略 OA AdvancedOperationsPolicy 优化顾问服务的高级操作权限, 如

查看更多 →

成本优化支柱 成本优化支柱简介 基础概念 设计原则 问题和检查项 COST01 规划成本优化相应的组织机构和流程 COST02 实施预算规划管理机制 COST03 对成本进行分配 COST04 持续进行成本治理 COST05 优化指定策略和目标 COST06 使用不同计费模式优化成本

查看更多 →

基于DDR4的内存实例，是高内存计算应用的合适选择。 内存优化型类别的专属计算集群分为：m3、m6、m7。可用于部署M3型云服务器、M6型云服务、M7型云服务器。 专属计算集群规格 表1 m3型专属计算集群规格说明 专属计算集群类型 CPU数量（Sockets） 物理内核 硬件规格

查看更多 →

在镜像列表中，在需要优化的镜像所在行的“操作”列下，选择“更多 > 优化”。 如果镜像所在行“操作”列下的“更多”选项中，没有“优化”按钮，表示该私有镜像不支持优化镜像功能。 用户也可以单击镜像名称，在镜像详情页面单击“优化”。 在“优化镜像”对话框中，如图1所示。如果用户已经手动优化过该镜像

查看更多 →

镜像优化类 一定要在云服务器中安装Guest OS driver吗？ Windows操作系统为什么要安装并更新virtio？ 通过镜像文件注册私有镜像过程中，系统会对镜像做哪些修改？ 创建私有镜像前云服务器、裸金属服务器或镜像文件需要完成哪些初始化配置？ Windows外部镜像文件在导出前未完成初始化配置，怎么办？

查看更多 →

动、修改UUID等。 准备工作 将待优化的Linux镜像创建为弹性云服务器，并开机登录。 确认是否需要优化私有镜像。 具体操作请参见确认是否需要优化私有镜像。 请根据虚拟化类型选择对应的优化操作，不同的虚拟化类型优化过程略有不同。 私有镜像优化过程 为了成功安装原生的XEN和KV

查看更多 →

合并CBO优化 操作场景 Spark SQL默认支持基于规则的优化，但仅仅基于规则优化不能保证Spark选择合适的查询计划。CBO（Cost-Bsed Optimizer）是一种为SQL智能选择查询计划的技术。通过配置开启CBO后，CBO优化器可以基于表和列的统计信息，进行一系列的估算，最终选择出合适的查询计划。

查看更多 →

域名 注册管理 域名注册简介 如何挑选及命名域名 注册单个域名操作指导 批量注册域名操作指导 组合套餐包购买和使用 提货券购买和使用 企业免费注册.cn域名操作指导

查看更多 →

域名注册简介 注册域名就是付费获取域名某一时间段使用权的过程。您可以选择华为云作为域名注册商注册域名。 华为云的 域名注册服务 支持通过管理控制台或者华为云APP进行域名注册。 同一个租户帐号，最多支持注册100000个域名。 域名注册成功后不能退订、不能改名、不能注销。 域名无地域限制，无需设置区域和项目。

查看更多 →

开通优化顾问服务 开通优化顾问前请先 注册华为账号 并开通华为云。 登录华为云管理控制台。 选择“服务列表 > 管理与监管 > 优化顾问”，进入优化顾问服务页面。 勾选“我已阅读并同意《优化顾问服务声明》”选项，然后单击“确定”。 “云资源访问授权”和“检查结果访问授权”全部选择后单击“确定授权”，即可使用优化顾问。

查看更多 →

查询分子优化任务 功能介绍 通过分子优化任务ID查询分子优化任务状态及结果。 URI GET /v1/{project_id}/task/optimization/{task_id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 华为云项目id

查看更多 →

成本优化支柱简介 成本优化支柱专注于帮助企业高效地使用云服务来构建工作负载，面向工作负载的整个生命周期不断完善和改进，减少不必要的开支并提升运营效率，让云上应用始终最具成本效益。 成本优化实践不意味着只有降本，它是安全合规、韧性等维度的平衡，也是达成业务目标的最优投入。 华为公司

查看更多 →

针对云上资源的告警情况、负载情况和健康情况进行检查。从监控的角度分析业务场景和历史故障，结合华为云运维最佳实践，提供针对性的优化建议。 资源监控与优化包括： 基础资源监控，提供基于华为云CES（云监控）的云资源指标及事件监控的配置建议。 应用&容器监控，提供基于华为云AOM（应用

查看更多 →

要启动聚合算法优化，在Spark客户端的“spark-defaults.conf”配置文件中进行设置。 表1 参数介绍 参数 描述 默认值 spark.sql.codegen.aggregate.map.twolevel.enabled 是否开启聚合算法优化： true：开启 false：不开启

查看更多 →

Datasource表优化 操作场景 将datasource表的分区消息存储到Metastore中，并在Metastore中对分区消息进行处理。 优化datasource表，支持对表中分区执行增加、删除和修改等语法，从而增加与Hive的兼容性。 支持在查询语句中，把分区裁剪并下压

查看更多 →

Hive Join数据优化 操作场景 使用Join语句时，如果数据量大，可能造成命令执行速度和查询速度慢，此时可进行Join优化。 Join优化可分为以下方式： Map Join Sort Merge Bucket Map Join Join顺序优化 Map Join Hive的Map

查看更多 →

Hive SQL逻辑优化 操作场景 在Hive上执行SQL语句查询时，如果语句中存在“(a&b) or (a&c)”逻辑时，建议将逻辑改为“a & (b or c)”。 样例 假设条件a为“p_partkey = l_partkey”，优化前样例如下所示： select

查看更多 →

Execute）形式执行的语句进行查询计划的优化。 该参数属于SUSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：布尔型。 on表示优化器将优化PBE语句的查询计划。 off表示不使用优化。 默认值：on enable_global_stats 参数说明：标识当前统计

查看更多 →

优化器开销常量 介绍优化器开销常量。这里描述的开销可以按照任意标准度量。只关心其相对值，因此以相同的系数缩放它们将不会对优化器的选择产生任何影响。缺省时，它们以抓取顺序页的开销为基本单位。也就是说将seq_page_cost设为1.0，同时其他开销参数以它为基准设置。也可以使用其他基准，比如以毫秒计的实际执行时间。

查看更多 →