ALM-50406 JobServer提交作业接口失败率超过阈值
本章节仅适用于MRS 3.5.0及之后版本。
告警解释
系统每30秒周期性检测JobServer中提交失败的接口占比,当失败率超出阈值(默认值为80%)时,触发该告警。
当失败率低于阈值时,告警恢复。
告警属性
告警ID |
告警级别 |
是否可自动清除 |
---|---|---|
50406 |
紧急 |
是 |
告警参数
参数名称 |
参数含义 |
---|---|
来源 |
产生告警的集群或系统名称 |
服务名 |
产生告警的服务名称 |
角色名 |
产生告警的角色名称 |
主机名 |
产生告警的主机名 |
对系统的影响
用户执行提交作业失败。例如:通过REST接口提交作业可能失败。
可能原因
该节点JobServer实例存在异常。
处理步骤
- 在FusionInsight Manager首页,选择“运维 > 告警 > 告警 > JobServer提交作业接口失败率 > 定位信息”。查看告警上报实例所在的节点主机信息。
- 在FusionInsight Manager首页,选择“集群 > 服务 > JobGateway > 实例”。
- 勾选上报告警的实例,选择“更多 > 滚动重启实例”。
重启期间服务业务可能受损或中断,建议选择业务低峰期操作。
- 查看实例重启后运行状态是否为良好。
- 在“运维 > 告警 > 告警”页签,查看该告警是否恢复。
- 是,处理完毕。
- 否,执行6。
收集故障信息
- 在FusionInsight Manager首页,选择“运维 > 日志 > 下载”。
- 在“服务”中勾选待操作集群的“JobGateway”。
- 单击右上角的设置日志收集的“开始时间”和“结束时间”,分别为告警产生时间的前后10分钟,单击“下载”。
- 请联系运维人员,并发送已收集的故障日志信息。
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
不涉及。