ALM-27010 DBService数据库文件句柄使用数超阈值
告警解释
系统每30秒周期性检查DBService数据库文件句柄使用数,若采集的数据库文件句柄使用数连续n次(n为设定的平滑次数,默认值为3)超过设定阈值时,系统将产生此告警。
当平滑次数为1,DBServer数据库文件句柄使用数小于或等于阈值时,该告警恢复;当平滑次数大于1,DBServer数据库文件句柄使用数连续n次(n为设定的平滑次数)小于阈值的90%时,该告警恢复。
本章节仅适用于MRS 3.6.0-LTS.1及之后版本。
告警属性
| 告警ID | 告警级别 | 告警类型 | 业务类型 | 是否可自动清除 |
|---|---|---|---|---|
| 27010 | 重要(默认阈值为10000) 次要(默认阈值为8000) | 业务质量告警 | FusionInsight Manager | 是 |
告警参数
| 类别 | 参数名称 | 参数含义 |
|---|---|---|
| 定位信息 | 来源 | 产生告警的集群名称。 |
| 服务名 | 产生告警的服务名称。 | |
| 角色名 | 产生告警的角色名称。 | |
| 主机名 | 产生告警的主机名。 | |
| 附加信息 | 门限值 | 告警触发的阈值。 |
| 当前值 | 当前采集的指标值。 |
对系统的影响
- 长期文件句柄使用数过高会导致系统无法打开新文件,数据库读写文件失败或性能急剧下降。
- 新业务连接因句柄耗尽无法建立,已有SQL执行时报“Too many open files”或“临时资源不可用”错误进而导致业务任务运行失败。
处理步骤
检查阈值设置是否合理。
- 在FusionInsight Manager,选择“运维 > 告警 > 阈值设置 > 待操作集群的名称 > DBService > 数据库 > DBService数据库文件句柄使用数”,查看该告警阈值是否合理。
- 单击“操作”列的“修改”,根据实际服务的使用情况修改告警阈值。
- 选择“集群 > 服务 > DBService”,在“概览”页面查看“DBService数据库文件句柄使用数”图表,检查DBService数据库文件句柄使用数是否低于设置的阈值。
- 等待2分钟查看告警是否自动恢复。
- 是,处理完毕。
- 否,执行步骤 5。
检查数据库文件句柄使用数。
- 以omm用户登录DBService主管理节点。
- 执行以下命令,查看DBService数据库文件句柄使用数是否超过阈值。
pgrep -u omm gaussdb | xargs -I{} sh -c 'ls /proc/{}/fd 2>/dev/null' | wc -l
- 根据实际情况处理已使用的文件句柄或者修改告警阈值,并等待2分钟,查看告警是否清除。
- 是,执行完毕。
- 否,执行步骤 8。
收集故障信息
告警清除
此告警修复后,系统会自动清除此告警,无需手工清除。
参考信息
不涉及。