ALM-13005 ZooKeeper中组件顶层目录的配额设置失败
告警解释
系统每5小时周期性为组件和“customized.quota”配置项中的每个ZooKeeper顶层目录设置配额,当设置某个目录的配额失败时,会产生该告警。
当设置失败的目录重新设置配额成功时,告警恢复。
告警属性
告警ID |
告警级别 |
告警类型 |
业务类型 |
是否可自动清除 |
---|---|---|---|---|
13005 |
次要 |
业务质量告警 |
ZooKeeper |
是 |
告警参数
类别 |
参数名称 |
参数含义 |
---|---|---|
定位信息 |
来源 |
产生告警的集群名称。 |
服务名 |
产生告警的服务名称。 |
|
服务目录 |
产生告警的目录名称。 |
|
附加信息 |
触发条件 |
系统当前指标取值满足自定义的告警设置条件。 |
对系统的影响
组件可以向对应的ZooKeeper顶层目录中写入大量数据,导致依赖顶层目录的上游组件(例如Yarn、Flink、Spark等)业务异常或服务异常。
可能原因
告警目录对应的配额值不合理。
处理步骤
检查告警目录对应的配额值是否合理。
- 在FusionInsight Manager,选择“集群 > 待操作集群的名称 > 服务 > ZooKeeper > 配置 > 全部配置 > 配额”。查看“customized.quota”配置项中,是否有产生该告警的告警目录及对应的配额值。
- 查看下表中的组件告警目录列中,是否有产生该告警的告警目录。
表1 各组件告警目录 组件名称
组件告警目录
Hbase
/hbase
Hive
/beelinesql
Yarn
/rmstore
Storm
/stormroot
Streaming
/storm
Kafka
/kafka
- 查看该表中告警目录对应的组件名称,并打开其相应的服务界面,选择“配置 > 全部配置”,右上角搜索框输入“zk.quota”,搜索结果就是该告警目录对应的配额值。
- 检查产生告警的目录对应的配额值是否不合理。合理的配额值应该大于等于目录当前的实际使用值,该值可以在告警参数“Trigger Condition”中获取。
- 根据告警信息的提示,修改不合理的配额值,并保存配置。
- 等待配置项“service.quotas.auto.check.cron.expression”中指定的定时时长后,查看告警是否消失。
“service.quotas.auto.check.cron.expression”参数表示ZooKeeper设置目录的配额时所采用的定时表达式。可以在Manager页面选择“集群 > 服务 > ZooKeeper > 配置 > 全部配置”,搜索该参数进行配置。参数默认值为“*/5 * * * *”,表示时长为5分钟。
- 是,处理完毕。
- 否,执行7。
收集故障信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
不涉及。