Group，大部分情况下Slot中拥有的SubTask也是负载均衡的。所以可以理解为TM上的Slot个数代表了上面运行的任务线程数。 合理的Slots数量应该和CPU核数相同，在使用超线程时，每个Slot将占用2个或更多的硬件线程。 【示例】建议配置TM Slot个数为CPU Core个数的2~4倍：

查看更多 →

Spark Core性能调优 Spark Core数据序列化 Spark Core内存调优 设置Spark Core并行度 配置Spark Core广播变量 配置Spark Executor堆内存参数 使用External Shuffle Service提升Spark Core性能

查看更多 →

5倍速率调大。注意：需要保证“堆内存+直接内存 <= 80% * 系统可用内存”， 否则会导致IoTDB启动失败。 查询场景调优举例：如果查询的范围比较大，单个序列10000个点以上，JVM分配内存的20% / 序列数 > 160K，即为默认配置下存储引擎对查询最友好的状态。 序列

查看更多 →

所谓的shuffle并发度如下图所示： 集群默认是200，作业可以单独设置。如果发现瓶颈stage（执行时间长），且分配给当前作业的核数大于当前的并发数，说明并发度不足。通过以下配置优化。 场景 配置项 集群默认值 调整后 Jar作业 spark.default.parallelism

查看更多 →

inPoolUsage监控 性能调优 rocksdb状态调优 topN排序、窗口聚合计算以及流流join等都涉及大量的状态操作，因而如果发现这类算子存在性能瓶颈，可以尝试优化状态操作的性能。主要可以尝试通过如下方式优化： 增加状态操作内存，降低磁盘IO 增加单slot cu资源数 配置优化参数：

查看更多 →

Spark SQL性能调优 Spark SQL join优化 优化数据倾斜场景下的Spark SQL性能 优化小文件场景下的Spark SQL性能 Spark INSERT SELECT语句调优 动态分区插入场景内存优化 小文件优化 聚合算法优化 Datasource表优化 合并CBO优化

查看更多 →

ClickHouse性能调优 数据表报错Too many parts解决方法 加速Merge操作 加速TTL操作 父主题： 使用ClickHouse

查看更多 →

系统操作 GaussDB 通过SQL语句执行不同的系统操作，比如：设置变量，显示执行计划和垃圾收集等操作。 设置变量 设置会话或事务中需要使用的各种参数，请参考SET。 显示执行计划 显示GaussDB为SQL语句规划的执行计划，请参考EXPLAIN。 事务日志检查点 预写式日志（

查看更多 →

系统操作 GaussDB(DWS)通过SQL语句执行不同的系统操作，比如：设置变量，显示执行计划和垃圾收集等操作。 设置变量 设置会话或事务中需要使用的各种参数，请参考SET。 显示执行计划 显示GaussDB(DWS)为SQL语句规划的执行计划，请参考EXPLAIN。 事务日志检查点

查看更多 →

系统操作 GaussDB(DWS)通过SQL语句执行不同的系统操作，比如：设置变量，显示执行计划和垃圾收集等操作。 设置变量 设置会话或事务中需要使用的各种参数，请参考SET。 显示执行计划 显示GaussDB(DWS)为SQL语句规划的执行计划，请参考EXPLAIN。 事务日志检查点

查看更多 →

的并行度，指定的是所有Task统一的并行度。 推荐Source的并行度由上游组件推断设置，对于流系统，与上游的分区数相同（例如Kafka的Topic分区数）；对于批系统，与上游的切片数相同（例如HDFS的block数量）。 Flink作业中有Source、Sink、中间计算算子的

查看更多 →

GaussDB(DWS)性能调优 性能调优概述 性能诊断 系统调优 SQL调优 SQL调优案例

查看更多 →

GaussDB(DWS)性能调优 性能调优概述 性能诊断 系统调优 SQL调优 SQL调优案例

查看更多 →

Ranger性能调优 操作场景 Ranger给各组件提供权限策略，当使用Ranger的服务增多，需要调整Ranger的规格。 本章节仅适用 MRS 3.2.0及之后版本。 内存参数配置 登录 FusionInsight Manager页面，选择“集群 > 服务 > Ranger > 配置

查看更多 →

ClickHouse性能调优 ClickHouse数据表分区过多调优 ClickHouse加速Merge调优 ClickHouse加速TTL操作调优 父主题： 使用ClickHouse

查看更多 →

Spark on OBS性能调优 配置场景 Spark on OBS在小批量频繁请求OBS的场景下，可以通过关闭OBS监控提升性能。 配置描述 在Spark客户端的“core-site.xml”配置文件中修改配置。 表1 参数介绍 参数 描述 默认值 fs.obs.metrics

查看更多 →

Spark SQL性能调优 Spark SQL join优化 优化数据倾斜场景下的Spark SQL性能 优化小文件场景下的Spark SQL性能 Spark INSERT SELECT语句调优 配置多并发客户端连接JD BCS erver 配置SparkSQL的分块个数 Spark动态分区插入场景内存优化

查看更多 →

Spark Core性能调优 Spark Core数据序列化 Spark Core内存调优 Spark Core内存调优 配置Spark Core广播变量 配置Spark Executor堆内存参数 使用External Shuffle Service提升Spark Core性能

查看更多 →

订购IoT边缘工业子系统数采服务 登录华为云官网，选择“产品 > IoT物联网 > 边缘计算 > IoT边缘 IoTEdge”。 单击“管理控制台”进入IoT边缘控制台。 单击“总览”页右上角“我的订购服务”，进入购买页面。 选择“工业子系统数采服务”，单击“购买”。 根据需要选择合适的规格加入清单。

查看更多 →

“添加至前面”或“添加至后面”表示新建的数仓分层在当前数仓分层的前面或者后面。 图1 自定义数仓分层 配置数仓分层相关参数。 图2 新建数仓分层 表1 数仓分层参数说明 参数 说明 *分层名称 定义数仓分层名称。只能包含中文、英文字母、数字和下划线，且以中文或英文字母开头。输入长度不能超过10个字符。

查看更多 →

为DMAP数小二成员配置系统角色 系统管理员负责系统的配置及管理，并为企业用户授予不同的权限，根据业务需求，系统管理员可为企业用户授予不同的系统权限。 前提条件 需拥有系统管理员角色，角色权限请参考DMAP数小二用户角色与权限说明。 为成员配置系统角色 登录 交换数据空间 官网。 单

查看更多 →