如何合并小文件 使用SQL过程中，生成的小文件过多时，会导致作业执行时间过长，且查询对应表时耗时增大，建议对小文件进行合并。 设置配置项。 spark.sql.shuffle.partitions = 分区数量（即此场景下最终生成的文件数量） 执行SQL。 INSERT OVERWRITE

查看更多 →

如何表示父子关系 方式一：图中绘制时采用图元嵌套的方式。同时，左侧目录树保持父子结构。 方式二：图中图元设置组合或者聚合关系。如果架构方案中设置其它类型的连线支持构成上下级关系，那么图中绘制对应的连线类型，也可以构成父子关系。 父主题： 模型设计

查看更多 →

小文件合并工具 工具介绍 在Hadoop大规模生产集群中，由于HDFS的元数据都保存在NameNode的内存中，集群规模受制于NameNode单点的内存限制。如果HDFS中有大量的小文件，会消耗NameNode大量内存，还会大幅降低读写性能，延长作业运行时间。因此，小文件问题是制约Hadoop集群规模扩展的关键问题。

查看更多 →

Session资源超阈值告警。 告警属性 告警ID 告警级别 告警类型 303046417 提示 设备告警 告警参数 参数名称 参数含义 OID 该告警所对应的MIB节点的OID号。 ApSessionNum AP当前会话数。 ApSessionNumThreshold AP会话数阈值。 ApSessionNumSpec

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

小文件合并工具 工具介绍 在Hadoop大规模生产集群中，由于HDFS的元数据都保存在NameNode的内存中，集群规模受制于NameNode单点的内存限制。如果HDFS中有大量的小文件，会消耗NameNode大量内存，还会大幅降低读写性能，延长作业运行时间。因此，小文件问题是制约Hadoop集群规模扩展的关键问题。

查看更多 →

产生告警的服务名称。 任务名 产生告警的任务名称。 用户名 产生告警的用户名称。 对系统的影响 Flink作业重启次数超阈值，对系统无影响。 可能原因 Flink重启次数超阈值的原因可在具体日志中查看。 处理步骤 使用具有FlinkServer管理操作权限的用户登录Manager。 选择“集群

查看更多 →

如何修改CPU的阈值？ SAP应用弹性伸缩安装后，默认CPU的阈值为85%，当CPU的使用率超过85%，自动扩展实例，根据实际业务可修改CPU的阈值，保障系统稳定运行。 操作步骤 登录公有云管理控制台。 在公有云管理控制台首页上，选择“服务列表 > 管理与部署 > 云监控”。 在左侧的导航栏，单击“告警

查看更多 →

ALM-303046912 磁盘使用率超阈值 告警解释 MID_ENTITY_TRAP/4/TRAPID_ENTITY_DISK_UTILIZATION_RISING:OID [OID] Storage utilization exceeded the pre-alarm threshold

查看更多 →

ALM-303046690 CPU使用率超阈值 告警解释 ENTITYTRAP/2/CPUUSAGERISING: OID [OID] CPU utilization exceeded the pre-alarm threshold.(Index=[INTEGER], HwEnt

查看更多 →

ALM-303046691 内存使用率超阈值 告警解释 ENTITYTRAP/2/MEMORYUSAGERISING: OID [OID] MEMORY utilization exceeded the pre-alarm threshold.(Index=[INTEGER],

查看更多 →

磁盘Inode使用率超过阈值（2.x及以前版本） 告警解释 系统每30秒周期性检测磁盘Inode使用率，并把实际Inode使用率和阈值（系统默认阈值80%）进行比较，当检测到Inode使用率连续多次（默认值为5）超过阈值时产生该告警。 用户可通过“系统设置 > 阈值配置 > 设备 > 主机

查看更多 →

硬终端显示丢包率阈值A和B分别表示什么意思？ A表示一般丢包率，缺省值为1%；B表示严重丢包率，缺省值为5%。 丢包率相关提示如下： 丢包率<=阈值A，遥控器操作界面不显示丢包率图标。 阈值A<丢包率<阈值B，遥控器操作界面显示丢包率图标为黄色。 丢包率>=阈值B，遥控器操作界面显示丢包率图标为红色。

查看更多 →

ALM-18024 Yarn任务挂起内存量超阈值 告警解释 告警模块按60秒周期检测Yarn当前挂起的内存量大小，当Yarn上面挂起的内存量大小超过阈值时，触发该告警。挂起的内存量表示当前所有提交的Yarn应用还没有满足的内存量总和。 告警属性 告警ID 告警级别 是否自动清除 18024

查看更多 →

ALM-12051 磁盘Inode使用率超过阈值 告警解释 系统每30秒周期性检测磁盘Inode使用率，并把实际Inode使用率和阈值（系统默认阈值80%）进行比较，当检测到Inode使用率连续多次（默认值为5）超过阈值时产生该告警。 用户可通过“运维 > 告警 > 阈值设置 > 待操作集群的名称

查看更多 →

如何设置余额预警阈值？ 进入“费用中心”的总览页面。 在页面打开“可用额度预警”参数后面开关，设置阈值，单击“确定”，完成设置。 开通后，当可用额度、通用代金券和现金券的总金额低于预警阈值时，系统自动发送短信通知提醒。 IAM账号不独立计费，无法设置余额预警阈值。 父主题： 购买计费

查看更多 →

设置为true，Spark写入目标表时会判断是否写入了小文件，如果发现有小文件，则会启动合并小文件的job。 false spark.sql.mergeSmallFiles.threshold.avgSize 如果某个分区的平均文件大小小于该值，则启动小文件合并。 16MB spark.sql.mergeSmallFiles

查看更多 →

如何调整封堵阈值？ 华为云为普通用户免费提供2Gbps的DDoS攻击防护，最高可达5Gbps（视华为云可用带宽情况），当攻击超过限定的阈值时，华为云会采取黑洞策略封堵IP，对于可能会遭受超过5Gbps流量攻击的应用，建议您购买华为云 DDoS高防服务 ，提升防护能力。 父主题： 阈值及黑洞类

查看更多 →

硬终端显示丢包率阈值A和B分别表示什么意思？ A表示一般丢包率，缺省值为1%；B表示严重丢包率，缺省值为5%。 丢包率相关提示如下： 丢包率小于或等于阈值A，遥控器操作界面不显示丢包率图标。 阈值A<丢包率<阈值B，遥控器操作界面显示丢包率图标为黄色。 丢包率大于或等于阈值B，遥控器操作界面显示丢包率图标为红色。

查看更多 →

如何开启1080P超清视频？ 在IdeaHub主界面单击“会议”图标，进入会议应用。 在会议主界面，进入“会议设置 > 视频设置”界面，确认已启用“开启1080P超清视频”。 使用企业管理员账号登录华为云会议管理平台。 从左侧菜单栏进入“管理员 > 会议管理 > 会议设置 > 会

查看更多 →