ALM-16001 Hive数据仓库空间使用率超过阈值（2.x及以前版本）

告警解释

系统每30秒周期性检测Hive数据仓库空间使用率，该指标可在Hive服务监控界面查看，指标名称为“Hive已经使用的HDFS空间占可使用空间的百分比”。Hive数据仓库空间使用率指标默认提供一个阈值范围（85%），当检测到Hive数据仓库空间使用率超过阈值范围时产生该告警。

当Hive数据仓库空间使用率小于或等于阈值时，告警恢复。用户可通过增加仓库容量或释放部分已使用空间的方式降低仓库空间使用率。

告警属性

告警参数

对系统的影响

系统可能无法正常写入数据，导致部分数据丢失。

可能原因

• Hive使用HDFS容量上限过小。
• 系统磁盘空间不足。
• 部分数据节点瘫痪。

处理步骤

1. 扩展系统配置。
   1. 分析集群HDFS使用情况，增加HDFS分配给Hive使用的容量上限。

      登录MRS集群详情页面，单击“组件管理 > Hive > 服务配置”，将“基础配置”切换为“全部配置”，然后查找“hive.metastore.warehouse.size.percent”，调大该配置项。设配置项的值为A，HDFS总存储空间为B，阈值为C，Hive已经使用HDFS的空间大小为D。调整策略为A x B x C > D ，HDFS总存储空间可在HDFS监控界面查看，Hive已经使用HDFS的空间大小可在Hive的监控界面查看。

   2. 检查该告警是否恢复。
      • 是，操作结束。
      • 否，执行2.a

2. 对系统进行扩容。
   1. 添加节点。
   2. 检查该告警是否恢复。
      • 是，操作结束。
      • 否，执行3.a。

3. 检查数据节点是否正常。
   1. 登录MRS集群详情页面，选择“告警管理”。
   2. 查看是否有“ALM-12006 节点故障”、“ALM-12007 进程故障”、“ALM-14002 DataNode磁盘空间使用率超过阈值”告警。
      • 是，执行3.c。
      • 否，执行4。
   3. 分别参考ALM-12006 节点故障（2.x及以前版本）、ALM-12007 进程故障（2.x及以前版本）、ALM-14002 DataNode磁盘空间使用率超过阈值（2.x及以前版本）的处理步骤处理告警。
   4. 查看本告警是否恢复。
      • 是，操作结束。
      • 否，执行4。

4. 收集故障信息。
   1. 在MRS Manager界面，单击“系统设置 > 日志导出”。
   2. 请联系运维人员，并发送已收集的故障日志信息。

参考信息

无。