ALM-27001 DBService服务不可用

告警解释

告警模块按30秒周期检测DBService服务状态。当DBService服务不可用时产生该告警。

DBService服务恢复时，告警清除。

告警属性

告警参数

对系统的影响

数据库服务不可用，无法对上层服务提供数据入库、查询等功能，使部分服务异常。

可能原因

• 浮动IP不存在。
• 没有主DBServer实例。
• 主备DBServer进程都异常。

处理步骤

检查集群环境中是否存在浮动IP。

1. 在FusionInsight Manager首页，选择“集群 > 待操作集群的名称 > 服务 > DBService > 实例”。
2. 查看是否有主实例存在。
   • 是，执行3。
   • 否，执行9。

3. 选择主DBServer实例，记录IP地址。
4. 以root用户登录上述IP所在主机，执行ifconfig命令查看DBService的浮动IP在该节点是否存在。
   • 是，执行5。
   • 否，执行9。

5. 执行ping 浮动IP地址命令检查DBService的浮动IP的状态，是否能ping通。
   • 是，执行6。
   • 否，执行9。

6. 以root用户登录DBService浮动IP所在主机，执行以下命令删除浮动IP地址。

   ifconfig interface down

7. 在FusionInsight Manager首页，选择“ 集群 > 待操作集群的名称 > 服务 > DBService > 更多 > 重启服务”重启DBService服务，检查是否启动成功。
   • 是，执行8。
   • 否，执行9。

8. 等待约两分钟，查看告警列表中的DBService服务不可用告警是否恢复。
   • 是，处理完毕。
   • 否，执行14。

检查主DBServer实例状态。

9. 选择角色状态异常的DBServer实例，记录IP地址。
10. 在“告警”页面，查看是否有上述IP所在主机DBServer实例“进程故障”告警产生。
    • 是，执行11。
    • 否，执行19。

11. 按“ALM-12007 进程故障”提供的步骤处理该告警。
12. 等待5分钟，查看告警列表中的DBService服务不可用告警是否恢复。
    • 是，处理完毕。
    • 否，执行19。

检查主备DBServer数据库进程状态。

13. 以root用户登录DBService浮动IP所在主机，执行su - omm命令切换至omm用户。
14. 执行cd ${DBSERVER_HOME}命令进入DBService服务的安装目录。
15. 执行sh sbin/status-dbserver.sh命令查看DBService的主备HA进程状态，状态是否查询成功。

    HAMode 
    double 
    
    NodeName                  HostName               HAVersion                StartTime                HAActive             HAAllResOK           HARunPhase          
    10_5_89_12                host01                 V100R001C01              2019-06-13 21:33:09      active               normal               Actived             
    10_5_89_66                host03                 V100R001C01              2019-06-13 21:33:09      standby              normal               Deactived           
    
    NodeName                  ResName                ResStatus                ResHAStatus              ResType             
    10_5_89_12                floatip                Normal                   Normal                   Single_active       
    10_5_89_12                gaussDB                Active_normal            Normal                   Active_standby      
    10_5_89_66                floatip                Stopped                  Normal                   Single_active       
    10_5_89_66                gaussDB                Standby_normal           Normal                   Active_standby  

    • 是，执行16。
    • 否，执行19。

16. 查看主备HA进程是否都处于abnormal状态。
    • 是，执行17。
    • 否，执行19。

17. 在FusionInsight Manager首页，选择“集群 > 待操作集群的名称 > 服务 > DBService > 更多 > 重启服务”重启DBService服务，查看界面是否提示重启成功。
    • 是，执行18。
    • 否，执行19。

18. 等待约两分钟，查看告警列表中的DBService服务不可用告警是否恢复。
    • 是，处理完毕。
    • 否，执行19。

收集故障信息。

19. 在FusionInsight Manager界面，选择“运维 > 日志 > 下载”。
20. 在“服务”中勾选待操作集群的“DBService”和“NodeAgent”。
21. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后1小时，单击“下载”。
22. 请联系运维人员，并发送已收集的故障日志信息。

告警清除

此告警修复后，系统会自动清除此告警，无需手工清除。

参考信息

不涉及。