更新时间:2023-06-08 GMT+08:00
分享

ALM-12007 进程故障

告警解释

进程健康检查模块按5秒周期检测进程状态。当进程健康检查模块连续三次检测到进程连接状态为故障时,产生该告警。

当进程连接正常时,告警恢复。

告警属性

告警ID

告警级别

是否自动清除

12007

重要

告警参数

参数名称

参数含义

来源

产生告警的集群或系统名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

对系统的影响

该进程提供的业务不可用。

可能原因

  • 实例进程异常。
  • 磁盘空间不足。

如果同一时间段,存在大量的进程故障告警,则可能存在安装目录文件被误删除或者权限被修改。

处理步骤

检查实例进程是否异常。

  1. 打开FusionInsight Manager页面,选择“运维 > 告警 > 告警”,单击此告警所在行的,单击主机名查看该告警的主机名称与服务名称。
  2. 在“告警”页面,查看是否有“ALM-12006 节点故障”告警产生。

    • 是,执行3
    • 否,执行4

  3. 按“ALM-12006 节点故障”提供的步骤处理该告警。
  4. root用户登录该告警的主机地址,用户密码为安装前用户自定义,请咨询系统管理员。查看告警角色所在安装目录用户、用户组、权限等是否正常。正常用户、用户组、权限为“omm:ficommon 750”。

    例如:NameNode的安装目录为“${BIGDATA_HOME}/FusionInsight_Current/1_8_NameNode/etc”。

    • 是,执行6
    • 否,执行5

  5. 执行如下命令将文件夹权限修改为“750”,并将“用户:属组”修改为“omm:ficommon”。

    chmod 750 <folder_name>

    chown omm:ficommon <folder_name>

  6. 等待5分钟,查看告警列表中,“ALM-12007 进程故障”告警是否已清除。

    • 是,处理完毕。
    • 否,执行7

  7. root用户登录主OMS节点,执行以下命令查看configurations.xml文件。其中“服务名”为1查询到的服务名称。

    vi $BIGDATA_HOME/components/current/服务名/configurations.xml

    查询“healthMonitor.properties”关键字,找到该告警上报实例对应的健康检查配置项,记录“monitor.info”参数配置的接口或者脚本路径,如下图所示。

    查看接口或者脚本中打印的日志,并修复对应问题。

  8. 等待5分钟,查看告警列表中,该告警是否已清除。

    • 是,处理完毕。
    • 否,执行9

检查磁盘空间是否不足。

  1. 在FusionInsight Manager的告警列表中,查看是否有“ALM-12017 磁盘容量不足”告警产生。

    • 是,执行10
    • 否,执行13

  2. 按“ALM-12017 磁盘容量不足”提供的步骤处理该故障。
  3. 等待5分钟,查看告警列表中,“ALM-12017 磁盘容量不足”告警是否已清除。

    • 是,执行12
    • 否,执行13

  4. 等待5分钟,查看告警列表中,该告警是否已清除。

    • 是,处理完毕。
    • 否,执行13

收集故障信息。

  1. 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
  2. 根据在1获取的服务名称,在“服务”中勾选对应的组件及“NodeAgent”,单击“确定”。
  3. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
  4. 请联系运维人员,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

无。

分享:

    相关文档

    相关产品