
# 默认监控告警
模型在进行训练时，需要重点关注系统资源的使用情况，例如：NPU，CPU，存储。
当前AOM服务可以监控上述系统资源，同时支持设置告警规则，关键指标如[表1 指标查看与告警配置建议]所示。
 表1指标查看与告警配置建议 
| 分类   | 关键指标          | 告警阈值             | 参考文档                                                                                                                                                                                                                                     |
|:---|:---|:---|:---|
| NPU  | AI处理器HBM内存利用率 | 连续2个周期原始值 \> 98% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
| CPU  | CPU使用率        | 连续2个周期原始值 \> 90% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
| 存储   | cache空间的使用率   | 连续2个周期原始值 \> 90% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
| 存储   | 容器空间的使用率      | 连续2个周期原始值 \> 90% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
| 内存   | 物理内存使用率       | 连续2个周期原始值 \> 90% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
| 文件系统 | 文件系统使用率       | 连续2个周期原始值 \> 90% | [通过AOM查看ModelArts监控指标](https://support.huaweicloud.com/resmgmt-modelarts/resmgmt-modelarts_0033.html) [创建指标告警](https://support.huaweicloud.com/usermanual-aom2/mon_01_0008.html#section2) |
   
