文档首页/ MapReduce服务 MRS/ 用户指南/ MRS集群运维/ MRS集群告警处理参考/ ALM-45181 OBS write接口调用失败数高于阈值
更新时间:2024-09-04 GMT+08:00

ALM-45181 OBS write接口调用失败数高于阈值

告警解释

系统每30秒周期性检测OBS write接口调用失败数是否高于阈值,当检测到大于所设置阈值时就会产生该告警 。

当OBS write接口调用失败数小于阈值时,该告警会自动清除。

告警属性

告警ID

告警级别

是否自动清除

45181

次要

告警参数

参数名称

参数含义

来源

产生告警的集群名称。

服务名

产生告警的服务名称。

角色名

产生告警的角色名称。

主机名

产生告警的主机名。

Trigger condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

OBS write接口调用失败数高于阈值,会影响上层大数据计算业务的正常执行,导致某些计算任务的执行失败。

可能原因

OBS服务端出现执行异常或严重超时。

处理步骤

  1. 登录FusionInsight Manager,选择“运维 > 告警 > 阈值设置 > meta > OBS的write接口调用失败总数”,将阈值或平滑次数参数的值根据实际情况调大。
  2. 观察界面告警是否清除。

    • 是,处理完毕。
    • 否,执行3

  3. 联系OBS运维人员查看OBS服务是否正常。

    • 是,执行4
    • 否,联系OBS服务运维人员修复OBS服务。

收集故障信息。

  1. 登录FusionInsight Manager界面,选择“集群 > 服务 > meta > 图表”,在“图表分类”选择“OBS数据写操作”,在“OBS的write接口调用失败数-所有实例”图表上查看OBS的write接口调用失败数最大值所在的实例的主机名称,例如,下图所示的主机名称为:node-ana-corevpeO003:

  2. 选择“运维 > 日志 > 下载”,在“服务”中勾选“meta > meta”。
  3. 在“主机”中勾选4查看的主机。
  4. 单击右上角的设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后30分钟,单击“下载”。
  5. 请联系运维人员,并发送已收集的故障日志信息。

告警清除

此告警修复后,系统会自动清除此告警,无需手工清除。

参考信息

无。