操作说明

• 系统支持对OBS桶中的文件夹构建检测任务，日志异常检测的规则和限制如下：
  • 日志文件解析会依据文件名ASCII字典序由小到大解析。
  • 实时的对文件夹中新增加的日志文件进行增量检测；且对于已经解析过的文件，如果内容做了修改，不会再次被解析。
  • 页面当前最大仅支持展示最近15天时间窗口的检测数据。
  • 日志检测任务启动后，增量检测文件中的时间窗必须晚于已检测文件中时间窗；否则，需要增量检测的日志文件将被丢弃。
• 检测OBS桶中的日志之前，需要先在OBS桶中创建对应的目录和上传需要检测的日志文件。
  • 检测的日志文件必须满足如下条件，否则会导致无法识别、或者无法检测。
    • 文本文件不大于100M。
    • 文件名不包含特殊字符。
    • 文本文件的后缀为“*.log”。
    • 当前只支持utf-8编码的日志文件。
  • 上传本地日志到OBS桶中的操作，请参考本地上传完成。
• 鉴于仅自定义网元可以创建OBS任务，本章节以在自定义网元“Test”下创建任务为例介绍。

操作步骤

1. 在“数据接入”首页，选择自定义网元“Test”，进入“Test”网元的详情页面。
2. 创建OBS任务。
   1. “来源”选择“OBS”。
   2. 单击“服务名称”对应的按钮。
   3. 在弹出的“编辑”对话框中输入本次创建任务的“服务名称”，例如“Demo”。
   4. 单击“确定”，完成服务名称的添加，如下图所示。
      图1 完成服务添加
      

3. 配置OBS任务。
   1. 选择需要检测的OBS桶信息。

      在“OBS桶”对应的下拉列表框中选择需要检测的OBS桶信息。

   2. 选择需要检测日志文件的样本数据。
      1. 选择“样本数据”页签。

         该页签下显示当前OBS桶下所有可监控样本数据目录树和样本数据文件名称。

      2. 在目录树中，选择需要监控的样本数据文件。
         

         样本数据文件可以选择多个。

      3. 选中样本数据后，在“已选文件”下方可以看到已选中的文件名。
      4. 单击“保存配置”，页面右上角弹出“配置更新成功”提示信息，说明完成样本数据配置。
   3. 单击“刷新模型”，如下图所示。
      图2 刷新模型的任务进展
      
      

      模型优化完成后，所有新启动的检测任务，都将使用优化后的模型进行检测。

   4. 待模型刷新完成后，当前页面增加“监控路径”页签，如下图所示。
      图3 监控路径
      
   5. 选择需要检测的文件所在路径。
      1. 选择“监控路径”页签。

         在当前页签下展示OBS桶中可以监控路径的目录树。

      2. 在目录树中，选择需要监控的目录节点。

         在“已选路径”下可以看到所有已选中节点下可以监控到的最底层文件夹的相对路径信息。

      3. 配置“已选路径”的记录对应的“主机”信息。

         该主机信息配置为检测的服务器的IP地址。

      4. 单击“保存配置”，页面右上角弹出“配置更新成功”提示信息，说明完成监控路径配置。

4. 单击“启动检测”。

   页面自动跳转到日志检测结果页面，可以在“日志检测”目录查看检测结果，具体的查看方法请参见日志检测。

5. 管理OBS任务。
   • 暂停任务：

     在需要暂停任务页面，单击右下角的“暂停检测”。

   • 删除任务：

     鼠标放到需要删除任务对应的“服务名称”上面，单击“删除”，根据提示信息单击“确定”，完成删除。

   • 修改任务：
     • 仅支持修改检测的文件，即：
       • 修改需要检测的OBS桶，选择方法请参见3。
       • 修改需要检测的样本数据的操作步骤请参见3.b~3.e。
       • 修改需要检测的监控路径的操作步骤请参见3.e。
       

       所有修改操作执行后，需要先单击当前页面右下角的“暂停检测”，待任务停止后，再单击“启动检测”，修改后的配置才会应用到检测任务中。

     • 如需修改“服务名称”，请删除任务后重新创建。