文档首页/ MapReduce服务 MRS/ 用户指南/ MRS集群运维/ MRS集群告警处理参考/ ALM-12016 CPU使用率超过阈值(2.x及以前版本)
更新时间:2024-09-04 GMT+08:00

ALM-12016 CPU使用率超过阈值(2.x及以前版本)

告警解释

系统每30秒周期性检测CPU使用率,并把实际CPU使用率和阈值相比较。CPU使用率默认提供一个阈值。当检测到CPU使用率连续多次(可配置,默认值为10)超过该阈值时产生该告警。

当平均CPU使用率小于或等于阈值的90%时,告警恢复。

告警属性

告警ID

告警级别

可自动清除

12016

严重

告警参数

参数名称

参数含义

ServiceName

产生告警的服务名称。

RoleName

产生告警的角色名称。

HostName

产生告警的主机名。

Trigger Condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

业务进程响应缓慢或不可用。

可能原因

  • 告警阈值配置或者平滑次数配置不合理。
  • CPU配置无法满足业务需求,CPU使用率达到上限。

处理步骤

  1. 检查告警阈值配置或者平滑次数配置是否合理。

    1. 登录MRS Manager,基于实际CPU使用情况,修改告警阈值和平滑次数配置项。
    2. 根据实际服务的使用情况在“系统设置 > 阈值配置 > 设备 > 主机 > CPU > CPU使用率 > CPU使用率”中更改告警阈值。
    3. 根据实际服务的使用情况在“系统设置 > 阈值配置 > 设备 > 主机 > CPU > CPU使用率 > CPU使用率”中更改告警的“平滑次数”选项。

      该选项的含义为告警检查阶段,“频率”为告警检查周期,“平滑次数”为告警连续检查多少次超过阈值,则发送告警。

    4. 等待2分钟,查看告警是否自动恢复。
      • 是,处理完毕。
      • 否,执行2

  2. 对系统进行扩容。

    1. 打开MRS集群详情页面,在告警管理页签的告警列表中,单击此告警所在行,在告警详情中,查看该告警的节点地址。
    2. 登录告警节点。
    3. 执行cat /proc/stat | awk 'NR==1'|awk '{for(i=2;i<=NF;i++)j+=$i;print "" 100 - ($5+$6) * 100 / j;}'命令,查看系统当前CPU使用率。
    4. 若CPU使用率超过阈值,扩容CPU。
    5. 检查该告警是否恢复。
      • 是,处理完毕。
      • 否,执行3

  3. 收集故障信息。

    1. 在MRS Manager界面,单击“系统设置 > 日志导出”。
    2. 请联系运维人员,并发送已收集的故障日志信息。

参考信息

无。