更新时间:2024-11-12 GMT+08:00

ALM-12203 进程Full GC时间超过阈值

告警解释

系统每30秒周期性检测OMS主要进程的GC时间,当检测到OMS进程的GC时间超出阈值(默认连续3次检测超过12秒,可通过“运维 > 告警 > 阈值设置 > OMS > OMS服务”修改阈值)时产生该告警。

当OMS进程的GC时间小于或等于阈值时,告警恢复。

该告警仅适用于MRS 3.3.1及之后版本。

告警属性

告警ID

告警级别

是否可自动清除

12203

重要

告警参数

类别

参数名称

参数含义

定位信息

来源

产生告警的集群名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

附加信息

Trigger condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

GC时间超出阈值,会影响到OMS主要进程的读写,可能导致任务执行变慢,甚至服务异常重启。

可能原因

该节点OMS主要进程内存使用率过大,或配置的内存不合理,导致进程GC频繁。

处理步骤

检查GC时间

  1. 在FusionInsight Manager界面,选择“运维 > 告警 > 告警”,在告警列表中展开此告警的详细信息,记录定位信息中的进程名,单击上报的主机名并记录该主机的业务IP地址。
  2. 选择“系统 > OMS”,查看监控图表中“OMS进程Full GC次数”,查看GC时间是否大于12秒(默认)。

    如果无对应图表,可单击右侧下拉三角,选择“定制”并勾选对应项,单击“确定”。
    • 是,执行3
    • 否,执行6

  1. 联系运维人员修改对应进程的内存使用配置。
  2. 重启对应进程。
  3. 观察界面告警是否清除。

    • 是,处理完毕。
    • 否,执行6

收集故障信息

  1. 在FusionInsight Manager页面,选择“运维 > 日志 > 下载”。
  2. 在“服务”中勾选待操作集群的“OmmServer”。
  3. 单击右上角的编辑按钮,设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
  4. 请联系运维人员,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

不涉及。