文档首页/ MapReduce服务 MRS/ 用户指南/ MRS集群运维/ MRS集群告警处理参考/ ALM-12027 主机PID使用率超过阈值(2.x及以前版本)
更新时间:2024-09-04 GMT+08:00

ALM-12027 主机PID使用率超过阈值(2.x及以前版本)

告警解释

系统每30秒周期性检测PID使用率,并把实际PID使用率和阈值进行比较,PID使用率默认提供一个阈值。当检测到PID使用率超出阈值时产生该告警。

当主机PID使用率小于或等于阈值时,告警恢复。

告警属性

告警ID

告警级别

可自动清除

12027

严重

告警参数

参数名称

参数含义

ServiceName

产生告警的服务名称。

RoleName

产生告警的角色名称。

HostName

产生告警的主机名。

Trigger Condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

无法分配PID给新的业务进程,业务进程不可用。

可能原因

节点同时运行的进程过多,需要扩展“pid_max”值。 系统环境异常。

处理步骤

  1. 扩展pid_max值。

    1. 打开MRS集群详情页面,在实时告警列表中,单击此告警。在“告警详情”区域,获取告警所在主机IP地址。
    2. 登录告警节点。
    3. 执行命令cat /proc/sys/kernel/pid_max,查看系统当前运行的PID最大值“pid_max”
    4. 若PID使用率超过阈值,则编辑“/etc/sysctl.conf”文件,将“kernel.pid_max”参数值增大为1.c查询到的pid_max值的一倍,若无该参数则请在文件末尾添加。

      例如修改参数为“kernel.pid_max=65536”,然后执行以下命令使参数立即生效。

      sysctl -p

      “kernel.pid_max”最大可设置为:

      • 32位系统:32768
      • 64位系统:4194304(2的22次方)
    5. 等待5分钟,检查该告警是否恢复。
      • 是,处理完毕。
      • 否,执行2

  2. 检查系统环境是否异常。

    1. 联系运维人员,检查操作系统是否存在异常。
      • 是,恢复操作系统故障,执行2.b
      • 否,执行3
    2. 等待5分钟,检查该告警是否恢复。
      • 是,处理完毕。
      • 否,执行3

  3. 收集故障信息。

    1. 在MRS Manager界面,单击“系统设置 > 日志导出”。
    2. 请联系运维人员,并发送已收集的故障日志信息。

参考信息

无。