更新时间:2024-12-06 GMT+08:00
ALM-23001 Loader服务不可用
告警解释
系统每60秒周期性检测Loader服务的可用性。当Loader服务不可用时产生该告警。当Loader服务恢复时,告警恢复。
告警属性
告警ID |
告警级别 |
是否自动清除 |
---|---|---|
23001 |
紧急 |
是 |
告警参数
参数名称 |
参数含义 |
---|---|
来源 |
产生告警的集群名称。 |
服务名 |
产生告警的服务名称。 |
角色名 |
产生告警的角色名称。 |
主机名 |
产生告警的主机名。 |
对系统的影响
如果Loader服务不可用,数据加载,导入,转换的功能也不可用。
可能原因
- Loader服务依赖的内部服务异常。
- ZooKeeper服务异常。
- HDFS服务异常。
- DBService服务异常。
- Yarn服务异常。
- Mapreduce服务异常。
- 环境故障:网络异常,Loader服务无法与其依赖的内部服务通信,无法提供服务。
- 软件故障:Loader服务无法正常运行。
处理步骤
检查ZooKeeper服务状态。
- 在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > ZooKeeper”查看ZooKeeper的运行状态是否正常。
- 选择“更多 > 重启服务”重新启动ZooKeeper服务实例。重启完成后在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行3。
- 在FusionInsight Manager的告警列表中,查看是否有“进程故障”告警产生。
- 在“ALM-12007 进程故障”的“定位信息”中查看“服务名”是否为“ZooKeeper”。
- 参考ALM-12007 进程故障的处理步骤处理该故障。
- 在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行7。
检查HDFS服务状态。
- 在FusionInsight Manager的告警列表中,查看是否有“HDFS服务不可用”告警产生。
- 参考ALM-14000 HDFS服务不可用的处理步骤处理该故障。
- 在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行10。
检查DBService服务状态。
- 在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > DBService”查看DBService的运行状态是否正常。
- 选择“更多 > 重启服务”重新启动DBService服务实例。重启完成后在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行12。
检查Mapreduce服务状态。
- 在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > Mapreduce”查看Mapreduce的运行状态是否正常。
- 选择“更多 > 重启服务”重新启动Mapreduce服务。重启完成后在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行16。
检查Yarn服务状态。
- 在FusionInsight Manager首页,选择“集群 > 待操作集群的名称 > 服务 > Yarn”查看Yarn的运行状态是否正常。
- 选择“更多 > 重启服务”重新启动Yarn服务实例。重启完成后在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行16。
- 在FusionInsight Manager的告警列表中,查看是否有“Yarn服务不可用”告警产生。
- 参考ALM-18000 Yarn服务不可用的处理步骤处理该故障。
- 在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行19。
检查Loader和依赖组件之间的网络连接。
- 在FusionInsight Manager界面,选择“集群 > 待操作集群的名称 > 服务 > Loader”。
- 单击“实例”,显示LoaderServer实例列表。
- 记录“LoaderServer(主)”行的“管理IP”。
- 以omm用户通过21获取的IP地址登录主LoaderServer所在的主机。
- 执行ping命令,查看主LoaderServer所在主机和依赖组件所在主机的网络连接是否正常。(依赖组件包括ZooKeeper、DBService、HDFS、Mapreduce和Yarn等,获取依赖组件所在主机的IP地址的方式和获取主LoaderServer IP地址的方式相同。)
- 联系网络管理员恢复网络。
- 在告警列表中,查看“Loader服务不可用”告警是否清除。
- 是,处理完毕。
- 否,执行26。
收集故障信息。
- 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。
- 在“服务”框中勾选待操作集群的如下节点信息。
- Zookeeper
- HDFS
- DBService
- Yarn
- Mapreduce
- Loader
- 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。
- 在FusionInsight Manager界面,选择“集群 > 待操作集群的名称 > 服务 > Loader”。
- 选择“更多 > 重启服务”,单击“确定”。
- 查看该告警是否已清除。
- 是,处理完毕。
- 否,执行32。
- 请联系运维人员,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
无。
父主题: MRS集群告警处理参考