• 分类

  异常检测

• 适用领域

  运营商网络

• 使用场景

  运维人员日常运维场景，对于大量告警场景，给出告警的严重程度，辅助运维人员找到关键告警。

• 功能说明

  支持不同服务告警，根据告警的内容，发生的频率等特征给出告警的严重程度，辅助运维人员找到关键告警。

• 输入数据
  1. 告警数据
     • 接入方式：kafka
     • 告警数据指标字段描述如表 告警数据指标表所示。

       表1 告警数据指标字段表

       名称	类型	长度	是否必须	描述
       serialId	String	255	Y	告警实例ID
       alarmSource	String	255	Y	告警资源
       reportTime	timestamp	29	Y	上报时间
       severity	String	255	Y	告警级别
       clearFlag	String	255	Y	清除记录
       raiseTime	timestamp	29	Y	异常上报时间
       neId	String	255	Y	网元ID
       normId	String	255	Y	日志ID
       title	String	255	Y	告警标识
       alarmType	String	255	Y	告警类型

• 输出数据
  1. 告警的严重程度
     • 接入方式：kafka
     • 告警输出alarm_event字段描述如表 告警输出表所示。

       表2 告警输出字段表

       名称	类型	长度	是否必须	描述
       serialId	String	255	Y	告警实例ID
       alarmSource	String	255	Y	告警资源
       reportTime	timestamp	29	Y	上报时间
       severity	String	255	Y	告警级别
       clearFlag	String	255	Y	清除记录
       raiseTime	timestamp	29	Y	异常上报时间
       neId	String	255	Y	网元ID
       normId	String	255	Y	日志ID
       title	String	255	Y	告警标识
       alarmType	String	255	Y	告警类型

• 使用约束

  训练的要求，最好积累一定数量的反馈数据，否则使用默认模型效果不好。

  历史数据重复导入，需要先重置，否则没有检测结果等。

• 流程样例

1. 数据对接 -> 告警排序 -> 记录集

数据对接：从OBS取文件到指定Kafka

告警排序：告警排序算法主体

记录集：将Kafka结果存入es中

2. 数据对接 -> 数据转换 -> 日志异常检测 -> 数据转换 -> 告警排序 -> 记录集

数据对接：从OBS取文件到指定Kafka

数据转换：转换成需要的格式

日志异常检测：其他原子能力

数据转换：转换成rank所需数据格式

告警排序：告警排序算法主体

记录集：将Kafka结果存入es中