
# ALM-27010 DBService数据库文件句柄使用数超阈值
#### 告警解释
系统每30秒周期性检查DBService数据库文件句柄使用数，若采集的数据库文件句柄使用数连续n次（n为设定的平滑次数，默认值为3）超过设定阈值时，系统将产生此告警。
当平滑次数为1，DBServer数据库文件句柄使用数小于或等于阈值时，该告警恢复；当平滑次数大于1，DBServer数据库文件句柄使用数连续n次（n为设定的平滑次数）小于阈值的90%时，该告警恢复。
本章节仅适用于MRS 3.6.0-LTS.1及之后版本。
#### 告警属性
| 告警ID  | 告警级别                                                                                   | 告警类型   | 业务类型                  | 是否可自动清除 |
|:---|:---|:---|:---|:---|
| 27010 | 重要（默认阈值为10000） 次要（默认阈值为8000） | 业务质量告警 | FusionInsight Manager | 是       |
   
#### 告警参数
| 类别                                                                  | 参数名称 | 参数含义       |
|:---|:---|:---|
| 定位信息                                                                | 来源   | 产生告警的集群名称。 |
| 定位信息                                                                | 服务名  | 产生告警的服务名称。 |
| 定位信息                                                                | 角色名  | 产生告警的角色名称。 |
| 定位信息                                                                | 主机名  | 产生告警的主机名。  |
| 附加信息  | 门限值  | 告警触发的阈值。   |
| 附加信息  | 当前值  | 当前采集的指标值。  |
   
#### 对系统的影响
- 长期文件句柄使用数过高会导致系统无法打开新文件，数据库读写文件失败或性能急剧下降。
- 新业务连接因句柄耗尽无法建立，已有SQL执行时报"Too many open files"或"临时资源不可用"错误进而导致业务任务运行失败。
 
#### 可能原因
- 告警阈值配置不合理。
- 数据库文件句柄使用数超过阈值。 进程打开了某个文件，该文件随后被rm或mv命令物理删除，但持有该文件的进程未重启或未关闭句柄，导致句柄残留且持续占用资源。
  
 
#### 处理步骤
**检查阈值设置是否合理**。
1. 在FusionInsight Manager，选择"运维 \> 告警 \> 阈值设置 \> *待操作集群的名称* \> DBService \> 数据库 \> DBService数据库文件句柄使用数"，查看该告警阈值是否合理。
   
   - 是，执行[步骤 3]。
   
   - 否，执行[步骤 2]。
   
   
   
   
2. 单击"操作"列的"修改"，根据实际服务的使用情况修改告警阈值。
3. 选择"集群 \> 服务 \> DBService"，在"概览"页面查看"DBService数据库文件句柄使用数"图表，检查DBService数据库文件句柄使用数是否低于设置的阈值。
   
   - 是，执行[步骤 4]。
   
   - 否，执行[步骤 5]。
   
   
   
   
4. 等待2分钟查看告警是否自动恢复。
   
   - 是，处理完毕。
   
   - 否，执行[步骤 5]。
   
   
   
   
**检查数据库文件句柄使用数**。
5. 以**omm**用户登录DBService主管理节点。
6. 执行以下命令，查看DBService数据库文件句柄使用数是否超过阈值。 
   **pgrep -u omm gaussdb \| xargs -I{} sh -c 'ls /proc/{}/fd 2\>/dev/null' \| wc -l**
   - 是，执行[步骤 7]。
   
   - 否，执行[步骤 8]。
   
   
   
   
7. 根据实际情况处理已使用的文件句柄或者修改告警阈值，并等待2分钟，查看告警是否清除。
   
   - 是，执行完毕。
   
   - 否，执行[步骤 8]。
   
   
   
   
**收集故障信息**
8. 在FusionInsight Manager界面，选择"运维 \> 日志 \> 下载"。
9. 在"服务"中勾选待操作集群的"DBService"，"OMS"。
10. 设置日志收集的主机，可选项，默认所有主机。
11. 单击右上角的时间编辑按钮设置日志收集的"开始时间"和"结束时间"分别为告警产生时间的前后10分钟，单击"下载"。
12. 请联系运维人员，并发送已收集的故障日志信息。
 
#### 告警清除
此告警修复后，系统会自动清除此告警，无需手工清除。
#### 参考信息
不涉及。
