Spark On Hudi性能调优 优化Spark Shuffle参数提升Hudi写入效率 开启spark.shuffle.readHostLocalDisk=true，本地磁盘读取shuffle数据，减少网络传输的开销。 开启spark.io.encryption.enable

查看更多 →

GaussDB (DWS)性能调优 性能调优概述 性能诊断 系统调优 SQL调优 SQL调优案例

查看更多 →

Flink作业性能调优 性能调优相关基本概念 消费组积压 消费组积压可通过topic最新数据offset减去该消费组已提交最大offset计算得出，说明的是该消费组当前待消费的数据总量。 如果Flink作业对接的是kafka专享版，则可通过 云监控服务 (CES)进行查看。具体可选择“云服务监控

查看更多 →

ClickHouse性能调优 数据表报错Too many parts解决方法 加速Merge操作 加速TTL操作 父主题： 使用ClickHouse

查看更多 →

Spark SQL性能调优 Spark SQL join优化 优化数据倾斜场景下的Spark SQL性能 优化小文件场景下的Spark SQL性能 Spark INSERT SELECT语句调优 动态分区插入场景内存优化 小文件优化 聚合算法优化 Datasource表优化 合并CBO优化

查看更多 →

GaussDB(DWS)性能调优 性能调优概述 性能诊断 系统调优 SQL调优 SQL调优案例

查看更多 →

Flink性能调优规则 及时对Hudi表进行compaction防止Hudi Source算子Checkpoint完成时间过长 当Hudi Source算子Checkpoint完成时间长时，可检查该Hudi表compaction是否正常。因为当长时间不做compaction时list性能会变差。

查看更多 →

Spark Core性能调优 Spark Core数据序列化 Spark Core内存调优 Spark Core内存调优 配置Spark Core广播变量 配置Spark Executor堆内存参数 配置Yarn模式下Spark动态资源调度 调整Spark Core进程参数 Spark

查看更多 →

Spark on OBS性能调优 配置场景 Spark on OBS在小批量频繁请求OBS的场景下，可以通过关闭OBS监控提升性能。 配置描述 在Spark客户端的“core-site.xml”配置文件中修改配置。 表1 参数介绍 参数 描述 默认值 fs.obs.metrics

查看更多 →

ClickHouse性能调优 ClickHouse数据表分区过多调优 ClickHouse加速Merge调优 ClickHouse加速TTL操作调优 父主题： 使用ClickHouse

查看更多 →

Ranger性能调优 操作场景 Ranger给各组件提供权限策略，当使用Ranger的服务增多，需要调整Ranger的规格。 本章节仅适用 MRS 3.2.0及之后版本。 内存参数配置 登录 FusionInsight Manager页面，选择“集群 > 服务 > Ranger > 配置

查看更多 →

Spark SQL性能调优 Spark SQL join优化 优化数据倾斜场景下的Spark SQL性能 优化小文件场景下的Spark SQL性能 Spark INSERT SELECT语句调优 配置多并发客户端连接JD BCS erver 配置SparkSQL的分块个数 Spark动态分区插入场景内存优化

查看更多 →

鲲鹏课程培训服务： 华为云鲲鹏高研班，面向高层的华为云鲲鹏云服务、解决方案和生态体系战略培训。 华为云鲲鹏工程师培训，面向开发者/架构师的华为云鲲鹏云服务认证专业培训。 华为云鲲鹏高级工程师培训，定位于培养与认证能够基于鲲鹏架构进行应用开发和高阶鲲鹏应用移植的高级工程师。 华为云鲲鹏技术应用与实

查看更多 →

评审服务需求 安排专家 安排鲲鹏领域专家 开发支撑 专家支撑客户完成课程开发 项目验收 进行鲲鹏高校课程开发支持服务验收 交付团队 鲲鹏高校课程开发支持服务由华为鲲鹏服务专家团队或经授权的合作团队交付。交付讲师具备3年以上鲲鹏计算相关领域的规划管理工作经验，熟悉鲲鹏体系的应用战略和发展规

查看更多 →

AOS公共模板支持ARM（鲲鹏）吗？ AOS公共模板均支持ARM和X86，因此公共模板可以使用鲲鹏集群创建。 父主题： 应用编排

查看更多 →

的描述信息。 发布鲲鹏商品时，必须选择“鲲鹏”商品认证标签。 发布鲲鹏商品时，必须通过鲲鹏兼容性认证并同步上传HUAWEI COMPATIBLE或HUAWEI ENABLED证书。 以镜像交付方式发布鲲鹏商品时，支持选择“华北-北京四”、“华南-广州”和“华东-上海一”三个云服务区。

查看更多 →

鲲鹏开发者技术沙龙 方案设计 鲲鹏开发者技术沙龙是面向企业或高校开发人员的围绕鲲鹏计算特定技术主题的专项技术交流与人才培养活动，传递鲲鹏技术、产品、方案相关的知识和技能，搭建“企业技术人员””高校学生“与“鲲鹏技术专家” 的交流平台。 表1 服务内容说明 服务名称 内容 鲲鹏开发者技术沙龙

查看更多 →

鲲鹏全栈调优支持服务 服务概述 服务内容及范围 交付流程 服务周期 交付件清单 责任分工 修订记录 父主题： 计算增值服务

查看更多 →

Flink性能调优开发规范 Flink性能调优规则 Flink性能调优建议 父主题： Flink应用开发规范

查看更多 →

Flink作业性能调优类 Flink作业推荐配置指导 Flink作业性能调优 Flink作业重启后，如何保证不丢失数据？ Flink作业运行异常，如何定位 Flink作业重启后，如何判断是否可以从checkpoint恢复 DLI Flink作业提交运行后（已选择保存作业日志到OB

查看更多 →

点。 对Kafka的性能调优，有以下几个点： 使用Kafka-0.8.2以后版本，可以使用异步模式的新Producer接口。 配置多个Broker的目录，设置多个IO线程，配置Topic合理的Partition个数。 详情请参见Kafka开源文档中的“性能调优”部分：http://kafka

查看更多 →