更新时间:2024-11-12 GMT+08:00
ALM-19031 RegionServer的RPC连接数超过阈值
告警解释
系统每30秒周期性检测每个HBase服务的RegionServer实例的RPC连接数,当检测到某个RegionServer上的RPC打开连接数连续10次超出阈值时产生该告警。
当RegionServer实例的RPC连接数小于或等于阈值时,告警消除。
该告警仅适用于MRS 3.3.1及之后版本。
告警属性
告警ID |
告警级别 |
是否可自动清除 |
---|---|---|
19031 |
|
是 |
告警参数
类别 |
参数名称 |
参数含义 |
---|---|---|
定位信息 |
来源 |
产生告警的集群名称。 |
服务名 |
产生告警的服务名称。 |
|
角色名 |
产生告警的角色名称。 |
|
主机名 |
产生告警的主机名。 |
|
附加信息 |
Threshold |
产生告警的阈值。 |
对系统的影响
RegionServer RPC连接数超过阈值,表示当前节点访问并发数过多,会对当前RegionServer造成很大压力,导致响应缓慢。对于时延敏感型业务,可能会导致大量的业务读写请求超时。
可能原因
应用访问HBase并发数过高。
处理步骤
- 在FusionInsight Manager首页,选择“运维 > 告警 > 告警”,查看“告警ID”为“19031”的告警的“定位信息”中上报该告警的服务实例和主机名。
检查应用访问HBase并发数。
- 登录安装HBase客户端的节点,查看“客户端安装目录/HBase/hbase/conf/hbase-site.xml”文件中“hbase.client.ipc.pool.size”是否配置且参数值是否配置过大。
- 适当调小“hbase.client.ipc.pool.size”参数值,并保存。
- 等待几分钟后,在告警列表中查看该告警是否清除。
- 是,处理完毕。
- 否,执行5。
- 排查访问HBase服务的应用的并发数,确认并发数是否过大。
- 应用根据实际业务适当调小并发数。
- 等待几分钟后,在告警列表中查看该告警是否清除。
- 是,处理完毕。
- 否,执行8。
收集故障信息
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
不涉及。
父主题: MRS集群告警处理参考