阈值告警最佳实践(旧版)
该功能对除西南-贵阳一、亚太-曼谷、亚太-新加坡、中国-香港、华北-北京一、华北-北京四、华东-上海一、华东-上海二、华南-广州和华南-深圳外的其他区域生效。
告警作为AOM应用运维管理中一项基础功能,在日常运维中发挥着重要作用。AOM告警可以对接华为云租户虚机、组件等数十种指标,通过短信、邮件等多种方式通知客户当前系统存在的问题。
AOM提供批量阈值告警和静态阈值告警两种方式。
- 批量阈值:支持批量设置阈值告警,设置某种阈值告警后可以应用到整个租户下面的所有的服务或者主机。同时支持一键创批量告警,涉及主机、组件等六种常用指标状态。
- 静态阈值:通过静态阈值规则可对应用(应用占用资源、应用请求时延、吞吐量、应用请求错误)、资源的指标设置阈值条件。当指标数据满足阈值条件时产生阈值告警,当没有指标数据上报时产生数据不足事件。
支持的指标
AOM可以支持设置阈值告警的指标类型如下。
类型 |
指标举例 |
---|---|
组件(进程) |
CPU内核总量、CPU内核占用、CPU使用率等 |
主机网络 |
接收Bps、接收错包率、发送错包率、总Bps。 |
主机磁盘、文件系统 |
磁盘读取速率、磁盘写入速率、磁盘使用率。 |
主机指标 |
CPU内核总量、物理内存使用率、主机状态、NTP偏移量。 |
应用性能指标 |
请求平均时延、错误调用次数、请求吞吐量。 |
更多指标可参见《AOM产品介绍》“指标总览”章节。
使用步骤
- 一键设置批量阈值。
- 登录AOM控制台,在左侧导航栏中选择“告警> 阈值规则”。
- 在“规则列表”页签中单击“一键创建默认阈值”。
AOM会自动创建6个阈值模板(可单击“静态阈值模板”页签,在列表中进行查看),与此同时AOM也会使用这6个模板分别创建6个默认的批量阈值规则(其监控对象为所有的主机或所有的组件)。例如,单击[node:default-static-rule] CPU Usage前的
,可批量监控您所有主机的CPU使用率。
若后续又新增了主机或组件,您不用做任何操作,AOM会自动将新增资源添加到规则中。
图1 默认批量阈值规则表1 默认批量阈值规则说明 默认批量阈值规则名称/其默认阈值模板名称
资源
指标
其阈值模板默认设置
- 规则:[node: default-static-rule] CPU Usage
- 模板:[node: default-static-template] CPU Usage
主机
CPU使用率
统计方式:平均值;阈值条件:>90%;连续周期:3次;统计周期:1分钟;告警级别:重要;发送通知:否
- 规则:[node: default-static-rule] Physical Memory Usage
- 模板:[node: default-static-template] Physical Memory Usage
物理内存使用率
- 规则:[node: default-static-rule] Node Status
- 模板:[node: default-static-template] Node Status
主机状态
统计方式:平均值;阈值条件:>0;连续周期:1次;统计周期:1分钟;告警级别:重要;发送通知:否
- 规则:[service: default-static-rule] CPU Usage
- 模板:[service: default-static-template] CPU Usage
组件
CPU使用率
统计方式:平均值;阈值条件:>90%;连续周期:3次;统计周期:1分钟;告警级别:重要;发送通知:否
- 规则:[service: default-static-rule] Physical Memory Usage
- 模板:[service: default-static-template] Physical Memory Usage
物理内存使用率
- 规则:[service: default-static-rule] Status
- 模板:[service: default-static-template] Status
组件状态
统计方式:平均值;阈值条件:>0;连续周期:1次;统计周期:1分钟;告警级别:重要;发送通知:否
- 使用自定义静态模板创建阈值规则。如果需要针对第一步中一键创建的指标之外的数据增加批量阈值,按照以下步骤操作。
- 使用模板创建静态阈值规则前,请先创建一个静态阈值模板。
- 登录AOM控制台,在左侧导航栏中选择“告警 > 阈值规则”,单击 右上角的“添加阈值”。
- 选择资源:输入阈值规则名称,单击“模板导入”,选择资源类型,在资源树上选择待监控的资源,单击“下一步”。
- 若开关为关闭状态:需您在资源树上自定义选择一个或多个资源,最多可选择100个资源。
- 若开关为开启状态:当资源类型为主机时,监控的资源为所有的主机;当资源类型为组件时,监控的资源为所有组件。该功能对新增的主机或组件也生效,若后续又新增了主机或组件,您不用做任何操作。
图2 选择待监控的资源 - 选择已创建的静态阈值模板。图3 批量静态阈值规则
- 单击“添加”,完成创建一条批量静态阈值规则,单击其前的
,可对其下的多个资源的同一指标批量监控。
当生成一条阈值告警时,您可在左侧导航栏中选择“告警 > 告警列表”,在告警列表中查看该告警;只要满足已设的通知策略,就会发送一条邮件或短信。
- 自定义创建单条阈值规则。如果需要针对第一步中一键创建的指标之外的数据增加单条阈值,按照以下步骤操作。
- 登录AOM控制台,在左侧导航栏中选择“告警 > 阈值规则”,单击右上角的“添加阈值”。
- 选择资源:在“阈值名称”文本框中输入阈值规则名称,单击“自定义创建”,选择资源类型,在资源树上选择待监控的资源,单击“下一步”。
- 资源树上最多可选择100个资源。
- 当选择多个资源时,创建操作完成后,会创建多个单条静态阈值规则,每个资源对应一个单条静态阈值规则。规则命名方式为:您在“阈值名称”文本框中设置的阈值规则名称加上0至9的序号(序号和资源选择时的先后顺序有关,先选择的资源序号越小,后选择的资源序号越大)。
图4 选择资源 - 定义阈值:选择待监控的指标,设置阈值条件、连续周期、告警级别、统计方式等参数,选择是否发送通知。
- 阈值条件:阈值告警的触发条件,由判断条件(>=、<=、>、<)和阈值组成。例如,阈值条件设置为“>85”,表示指标的实际值大于已设置的阈值85时,生成阈值告警。
- 连续周期:连续多少个周期满足阈值条件后,发送阈值告警。
- 统计方式:指标数据按照所设置的统计方式进行聚合。
- 统计周期:指标数据按照所设置的统计周期进行聚合。
- 选择是否发送通知:当静态阈值规则的状态(正常、超限阈值、数据不足)发生变化时,选择是否发送邮件或短信通知该变动。
- 如需使用邮件或短信方式发送通知,请选择“是”,则需设置通知策略,选择已创建的主题,选择触发场景。
- 如不需接收邮件或短信通知,请选择“否”。
- 触发场景:发送通知的触发条件。
触发场景您可选择多个。例如,当阈值状态变为超限阈值时,您需要收到通知,则触发场景选择超限阈值;只要阈值状态发生变化时,您都需要收到通知,则触发场景可以全选。
图5 定义阈值 - 单击“添加”,完成创建多个单条静态阈值规则,一个资源对应一个规则,可使用独立的规则对某个资源进行监控。
对于一个单条静态阈值规则,若其监控对象为某个主机,当主机的CPU使用率超限时,在告警界面产生阈值告警,可在左侧导航栏中选择“告警 > 告警列表”,在告警列表中查看该告警;当主机满足已设的通知策略时,就会发送邮件或短信。
图6 单条静态阈值规则
