更新时间:2024-01-04 GMT+08:00

ALM-27004 DBService主备数据不同步(2.x及以前版本)

告警解释

DBService主备数据不同步,每10秒检查一次主备数据同步状态,如果连续6次查不到同步状态,或者同步状态不正常,产生告警。

当同步状态正常,告警恢复。

告警属性

告警ID

告警级别

可自动清除

27004

致命

告警参数

参数名称

参数含义

ServiceName

产生告警的服务名称。

RoleName

产生告警的角色名称。

HostName

产生告警的主机名。

Local DBService HA Name

本地DBService HA名称。

Peer DBService HA Name

对端DBService HA名称。

SYNC_PERSENT

同步百分比。

对系统的影响

主备DBServer数据不同步,如果此时主实例异常,则会出现数据丢失或者数据异常的情况。

可能原因

  • 主备节点网络不稳定。
  • 备DBService异常。
  • 备节点磁盘空间满。

处理步骤

  1. 检查主备节点网络是否正常。

    1. 登录MRS集群详情页面,选择“告警管理”。
    2. 在告警列表中单击此告警所在行,在告警详情中查看该告警的DBService备节点IP地址。
    3. 登录主DBService节点。
    4. 执行ping 备DBService心跳IP地址命令检查备DBService节点是否可达。
      • 是,执行2.a
      • 否,执行1.e
    5. 联系运维人员查看是否为网络故障。
      • 是,执行1.f
      • 否,执行2.a
    6. 修复网络故障,查看告警列表中,该告警是否已清除。
      • 是,处理完毕。
      • 否,执行2.a

  2. 检查备DBService状态是否正常

    1. 登录备DBService节点。
    2. 执行以下命令切换用户:

      sudo su - root

      su - omm

    3. 进入“${DBSERVER_HOME}/sbin”目录,然后执行命令./status-dbserver.sh 检查备DBService的gaussDB资源状态是否正常,查看回显中,“ResName”为“gaussDB”的一行,是否显示如下信息:

      例如:

      10_10_10_231 gaussDB Standby_normal Normal Active_standby
      • 是,执行3.a
      • 否,执行4

  3. 检查备节点磁盘是否已满。

    1. 登录备DBService节点。
    2. 执行以下命令切换用户:

      sudo su - root

      su - omm

    3. 进入“${DBSERVER_HOME}”目录,执行以下命令获取DBservice的数据目录。

      cd ${DBSERVER_HOME}

      source .dbservice_profile

      echo ${DBSERVICE_DATA_DIR}

    4. 执行df -h命令,查看系统磁盘分区的使用信息。
    5. 查看DBservice数据目录空间是否已满。
      • 是,执行3.f
      • 否,执行4
    6. 扩容升级。
    7. 磁盘扩容后,等待2分钟检查告警是否清除。
      • 是,操作结束。
      • 否,执行4

  4. 收集故障信息。

    1. 在MRS Manager界面,单击“系统设置 > 日志导出”。
    2. 请联系运维人员,并发送已收集的故障日志信息。

参考信息

无。