ALM-12208 NodeAgent进程Full GC次数超过阈值

告警解释

系统每60秒周期性检测NodeAgent进程Full GC次数，当检测到NodeAgent进程Full GC次数超过阈值时产生该告警。

检测次数统计方法为：Full GC次数 = 下一周期采集结果 - 上一周期采集结果。默认阈值配置为连续3次检测到Full GC次数超过1次上报告警，可通过“运维 > 告警 > 阈值设置 > 集群名 > 主机 > 进程”修改阈值。

当NodeAgent进程Full GC次数小于或等于阈值时，告警恢复。

本章节仅适用于MRS 3.6.0-LTS及之后版本。

告警属性

告警参数

对系统的影响

NodeAgent进程Full GC次数超出阈值，可能会影响到该节点监控告警数据采集，Full GC过于频繁会导致此节点命令执行响应缓慢，严重时会导致节点Agent重启与controller失去心跳响应。

可能原因

该节点NodeAgent进程内存使用率过大，或配置的内存不合理，导致进程Full GC频繁。

处理步骤

检查NodeAgent Full GC次数监控指标。

1. 在FusionInsight Manager界面，选择“运维 > 告警 > 告警”，在告警列表中展开此告警的详细信息，单击定位信息中上报告警的主机名。
2. 在“概览”的“图表”区域，查看监控图表中“NodeAgent Full GC次数”监控指标，查看Full GC次数是否大于1（默认）。
   如果无对应图表，可单击“图表”区域右侧下拉三角，选择“定制”并勾选对应项，单击“确定”。

   • 是，执行步骤 3。
   • 否，执行步骤 5。

3. 联系运维人员修改对应进程的内存使用配置，重启对应进程。
4. 观察界面告警是否清除。
   • 是，处理完毕。
   • 否，执行步骤 5。

收集故障信息

5. 在FusionInsight Manager页面，选择“运维 > 日志 > 下载”。
6. 在“服务”中勾选待操作集群的“NodeAgent”，在主机中勾选上报告警的主机。
7. 单击右上角的编辑按钮，设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟，单击“下载”。
8. 请联系运维人员，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统会自动清除此告警，无需手工清除。

参考信息

不涉及。