文档首页/ MapReduce服务 MRS/ 用户指南/ MRS集群运维/ MRS集群告警处理参考/ ALM-12027 主机PID使用率超过阈值
更新时间：2024-10-24 GMT+08:00
查看PDF
分享

ALM-12027 主机PID使用率超过阈值

告警解释

系统每30秒周期性检测PID使用率，并把实际PID使用率和阈值进行比较，PID使用率默认提供一个阈值。当检测到PID使用率超出阈值时产生该告警。

平滑次数为1，主机PID使用率小于或等于阈值时，告警恢复；平滑次数大于1，主机PID使用率小于或等于阈值的90%时，告警恢复。

告警属性

告警ID

告警级别

是否自动清除

12027

重要

是

告警参数

参数名称

参数含义

来源

产生告警的集群或系统名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

Trigger Condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

业务失败：主机PID使用率过高时，无法分配PID给新的业务进程，可能会导致作业运行失败。

可能原因

节点同时运行的进程过多，需要扩展pid_max值。

处理步骤

扩展pid_max值。

  1. 打开FusionInsight Manager页面，在实时告警列表中，单击此告警所在行的，获取告警所在主机IP地址。
  2. 以root用户登录告警所在主机。
  3. 执行命令cat /proc/sys/kernel/pid_max，查看系统当前运行的PID最大值pid_max。
  4. 若PID使用率超过阈值，则编辑“/etc/sysctl.conf”文件，将“kernel.pid_max”参数值增大为3查询到的pid_max值的一倍，若无该参数则请在文件末尾添加。

    例如修改参数为“kernel.pid_max=65536”，然后执行以下命令使参数立即生效。

    sysctl -p

    “kernel.pid_max”最大可设置为：

    • 32位系统：32768
    • 64位系统：4194304（2的22次方）

  5. 等待5分钟，检查该告警是否恢复。

    • 是，处理完毕。
    • 否，执行6。

收集故障信息。

  1. 在主集群的FusionInsight Manager界面，选择“运维 > 日志 > 下载”。
  2. 在“服务”中勾选所有服务，单击“确定”。
  3. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后30分钟，单击“下载”。
  4. 请联系运维人员，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统会自动清除此告警，无需手工清除。

参考信息

无。