文档首页/ MapReduce服务 MRS/ 用户指南(安卡拉区域)/ 告警参考/ ALM-12010 Manager主备节点间心跳中断
更新时间:2024-11-29 GMT+08:00

ALM-12010 Manager主备节点间心跳中断

告警解释

当主Manager节点在7秒内没有收到备Manager节点的心跳信号时,产生该告警。

当主Manager节点收到备Manager节点的心跳信号后,告警恢复。

告警属性

告警ID

告警级别

告警类型

业务类型

是否可自动清除

12010

重要

心跳

FusionInsight Manager

告警参数

类别

参数名称

参数含义

定位信息

来源

产生告警的集群或系统名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

附加信息

本端Manager HA名

本地Manager HA名称。

对端Manager HA名

对端Manager HA名称。

对系统的影响

如果主Manager进程资源异常,主备倒换无法进行,影响运维基本功能使用。

可能原因

  • 主备Manager节点间链路异常。
  • 节点名配置错误。
  • 防火墙禁用端口。

处理步骤

检查主备Manager服务器间的网络是否正常。

  1. 在FusionInsight Manager页面,选择“运维 > 告警 > 告警”,单击此告警所在行的,查看该告警的备Manager服务器(即Peer Manager)IP地址。
  2. root用户登录主Manager服务器
  3. 执行ping 备Manager心跳IP地址命令检查备Manager服务器是否可达。

    • 是,执行6
    • 否,执行4

  4. 联系网络管理员查看是否为网络故障。

    • 是,执行5
    • 否,执行6

  5. 修复网络故障,查看告警列表中,该告警是否已清除。

    • 是,处理完毕。
    • 否,执行6

检查节点名配置是否正确

  1. 进入软件安装目录。

    cd /opt

  2. 查找主备节点的配置文件目录。

    find -name hacom_local.xml

  3. 进入workspace目录。

    cd ${BIGDATA_HOME}/om-server/OMS/workspace0/ha/local/hacom/conf/

  4. 使用vim命令打开hacom_local.xml,查看local、peer节点配置是否正确,local配置主节点,peer配置备节点。

    • 是,执行12
    • 否,执行10

  5. 修改hacom_local.xml中主备节点的配置,修改完成后,按Esc回到命令模式,输入命令:wq保存退出。
  6. 查看此告警信息是否自动清除。

    • 是,处理完毕。
    • 否,执行12

检查是否防火墙禁用端口。

  1. 执行命令lsof -i :20012查询主备节点的心跳端口是否打开,有查询结果说明端口已经开放,否则说明端口被防火墙禁用。

    • 是,执行13
    • 否,执行16

  2. 执行命令iptables -P INPUT ACCEPT,防止与服务器断开。
  3. 清除防火墙。

    iptables -F

  4. 查看告警列表中,该告警是否已清除。

    • 是,处理完毕。
    • 否,执行16

收集故障信息。

  1. 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
  2. 在“服务”中勾选如下节点信息,单击“确定”。

    • OmmServer
    • Controller
    • NodeAgent

  3. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
  4. 请联系运维人员,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

不涉及。