使用Hive加载OBS数据并分析企业雇员信息 通过Flink作业处理OBS数据 通过Spark Streaming作业消费Kafka数据 通过Flume采集指定目录日志系统文件至HDFS 基于Kafka的Word Count数据流统计案例

查看更多 →

下载采集机日志（数据面） 功能介绍 下载对应采集机上的采集机日志。 URI URI格式 GET /softcomai/datalake/collection/v1.0/download/collectorLog/{collectorId} 参数说明 无。 请求 请求样例 GET

查看更多 →

步骤二：日志采集策略调整 日志作为安全运营提供重要数据支撑，护网/重保期间推荐使用一键接入功能接入全部日志，并调整自动转告警功能，结合模型和安全服务攻击日志，通过“告警管理”统一进行跟踪监控。 日志采集策略调整 登录安全云脑控制台，并进入目标工作空间管理页面。 在左侧导航栏选择“设置

查看更多 →

3。 表3 日志存储位置说明 日志存储位置 支持的日志类型 使用说明 LTS 容器标准输出日志 容器文件日志 节点日志 Kubernetes事件 请前往日志中心创建策略，具体配置方法请参见通过云原生日志采集插件采集容器日志。 AOM Kubernetes事件 当集群版本为1.19

查看更多 →

查看系统设备日志 系统会保存所有的设备消息记录，审计管理员可以定期检查设备日志，保障系统自身安全和确保符合合规要求。 操作步骤 使用审计管理员audadmin账号登录实例Web控制台 在左侧导航栏，选择“日志管理 > 设备日志”。 （可选）设置过滤条件，单击搜索，查询对应设备日志。

查看更多 →

Flume Flume基本原理 Flume与其他组件的关系 Flume开源增强特性 父主题： 组件介绍

查看更多 →

查看系统操作日志 系统会保存所有的操作记录，审计管理员可以定期检查系统日志，保障系统自身安全和确保符合合规要求。 操作步骤 使用审计管理员audadmin账号登录实例Web控制台。 在左侧导航栏，选择“日志管理 > 操作日志”。 （可选）设置过滤条件，单击搜索，查询对应操作审计日志。

查看更多 →

等多种方式将采集到的日志上报到LTS。日志接入LTS后，用户就可以在云日志服务控制台进行一系列操作，例如搜索与分析日志、使用统计图表或仪表盘可视化展示日志统计结果、设置日志告警、设置日志转储等。 日志接入前，需要确认开启ICAgent采集开关，请参考设置LTS日志采集配额和使用量预警。

查看更多 →

授权日志采集权限 场景描述 用户授权日志采集权限，即表明用户同意授权云日志审计服务对资产上报的日志进行收集、分析，并提供查询、预警等功能。云日志审计服务将会对相关数据采取对应的安全保障措施，用户享有随时访问、更改、删除相关数据的权利。云日志审计服务将会对用户的授权/取消授权操作进行记录。

查看更多 →

须知： 日志存储卷挂载后，会覆盖掉日志路径下已有的内容。请保证日志路径为一个独立的路径，否则原来的内容不可见。 AOM只采集最近修改过的前20个日志文件，且不采集子目录。 AOM只采集日志路径下的“.log”、“.trace”、“.out”文本日志文件。 日志存储空间 日志的存储空间大小。

查看更多 →

日志采集路径配置成功后，若已配置的路径下存在日志文件，则ICAgent会从已配置的路径中采集日志文件，采集大概需要1分钟，请您耐心等待。待采集完成后，您可执行如下操作： 查看虚机日志文件 在左侧导航栏中选择“日志 > 日志文件”，单击“主机”页签，查看采集到的日志文件。详细操作请参见查看日志文件。 查看虚机日志并进行分析

查看更多 →

的云原生日志采集插件，支持基于CRD的日志采集策略，可以根据您配置的策略规则，对集群中的容器标准输出日志、容器文件日志、节点日志及K8s事件日志进行采集与转发。安装云原生日志采集插件后，默认采集容器标准输出日志和集群内K8s事件。采集日志的详细使用方法请参见收集数据面日志。 约束与限制

查看更多 →

使用ICAgent插件采集日志 ICAgent插件采集日志概述 安装ICAgent（区域内主机） 安装ICAgent（区域外主机） 管理ICAgent 管理LTS主机组 裸金属服务BMS文本日志接入LTS 云容器引擎CCE应用日志接入LTS 云主机E CS 文本日志接入LTS ServiceStage容器应用日志接入LTS

查看更多 →

下载采集机日志（控制面） 功能介绍 下载对应采集机上的采集机日志。 URI URI格式 POST /softcomai/datalake/collection/v1.0/service/task/collectorLog/{collectorId} 参数说明 无。 请求 请求样例

查看更多 →

RD的日志采集策略，可以根据您配置的策略规则，对集群中的容器标准输出日志、容器文件日志及K8s事件日志进行采集与转发。同时支持上报K8s事件到AOM，用于配置事件告警，默认上报所有异常事件和部分正常事件。采集日志的详细使用方法请参见收集容器日志。 fluent-bit容器组件由华为云免费提供，不收取任何费用。

查看更多 →

在左侧导航栏选择“设置 > 采集管理”，进入采集管理页面后，选择“采集通道管理”页签，进入采集通道管理页面。 图2 进入采集通道管理页面 新增日志采集通道分组。 在采集通道管理页面中，单击“分组列表”右侧的。 自定义输入分组名称，并单击，完成新增。 新建日志采集通道。 在采集通道管理页面的分

查看更多 →

称进入集群，选择左侧导航栏的“日志中心”。 右上角单击“日志采集策略”，将显示当前集群所有上报LTS的日志策略。 单击上方“创建日志采集策略”，勾选“采集插件日志（NGINX Ingress控制器容器标准输出）”，单击确定。 图3 创建日志策略 系统将自动创建名为default-

查看更多 →

查看虚机日志 日志采集路径配置成功后，若已配置的路径下存在日志文件，则ICAgent会从已配置的路径中采集日志文件，采集大概需要1分钟，请您耐心等待。待采集完成后，您可执行如下操作： 查看虚机日志文件 在左侧导航栏中选择“日志分析 > 日志文件”，单击“主机”页签，查看采集到的日志文件。详细操作请参见查看日志文件。

查看更多 →

查询错误日志采集开关状态 功能介绍 查询数据库错误日志采集的开关状态。 调用接口前，您需要了解API 认证鉴权。 调用接口前，您需要提前获取到地区和终端节点，即下文中的Endpoint值。 调试 您可以在 API Explorer 中调试该接口。 URI GET https://{E

查看更多 →

ent采集开关”。 ICAgent采集开关是用来控制ICAgent是否对日志数据进行采集。 “ICAgent采集开关”默认打开，当您不需要采集日志时，通过关闭“ICAgent采集开关”停止日志采集，以减少资源占用。 “ICAgent采集开关”关闭后，ICAgent会停止采集日志，

查看更多 →

ICAgent插件采集日志概述 云日志服务LTS支持通过ICAgent采集方式上报日志。在创建日志接入时设置采集配置策略，例如解析规则、白名单规则、黑名单规则、上传原始日志等参数，实现定制化的采集策略。ICAgent采集配置定义了如何在 服务器 上采集同类日志并解析、发送到指定的日志流上。 ICAgent采集原理

查看更多 →