MgC利用部署在源端网络中的Edge设备完成数据采集。 数据采集架构图，如图1所示。 图1 Edge远程在线采集架构图 通过调用API在线采集云平台资源 适用于公有云部署场景，针对不同云服务提供商（友商）的云资源进行数据采集。使用API接口与其它云服务提供商的系统进行交互，实现数据的在线采集。不需要在源端网络中安装Edge设备。

查看更多 →

在左侧导航栏选择“设置 > 采集管理”，进入采集管理页面后，选择“采集通道管理”页签，进入采集通道管理页面。 图2 进入采集通道管理页面 在采集通道管理页面中，查看采集通道的详细信息。 表1 采集通道参数说明 参数名称 参数说明 分组列表 采集通道分组列表及各分组名称。 名称 采集通道的名称。 连接信息

查看更多 →

采集技术模型 接入扩展采集器（可选） 接入数据源 创建采集任务 父主题： 应用业务模型使用指导

查看更多 →

DSC上次与实例建立连接的时间。 数据流转日志采集状态 单击打开流转日志采集开关，进行日志采集。 单击打开流转日志采集开关，开通日志采集。“实例状态”为“开通中”正在开通采集，“实例状态”为“运行中”证明开启采集成功。 单击左上角“批量开通流转采集”批量开通日志流转采集。 关闭流转采集 登录管理控制台。 单击左上角的，选择区域或项目。

查看更多 →

页面性能采集 页面性能采集(WebPage)，页面性能采集器，获取页面性能相关信息。包括：类别、指标、指标名称、指标说明、单位、数据类型以及默认聚合方式。 表1 页面性能采集指标说明 指标类别 指标 指标名称 指标说明 单位 数据类型 默认聚合方式 Page指标集（Page，Page指标集相关信息。）

查看更多 →

设备监控采集 设备监控采集(AppDevice)是设备监控采集器，获取设备监控相关信息。包括：类别、指标、指标名称、指标说明、单位、数据类型以及默认聚合方式。 表1 设备监控采集(AppDevice)指标说明 指标类别 指标 指标名称 指标说明 单位 数据类型 默认聚合方式 设备

查看更多 →

Pod日志采集 本章节将介绍在Pod内进行日志采集，允许用户通过配置容器内自定义路径下的日志文件来采集日志，并通过自定义策略处理，上报到用户kafka日志中心。 资源限制 建议您为Fluent Bit预留50MB的内存。 约束与限制 当前不支持容器中软链路径的日志采集。 当前不支持容器标准输出采集上报到kafka。

查看更多 →

血缘采集概述 通过血缘采集，可以建立起数据元素之间的关系和依赖关系，从而形成一个清晰的数据血缘图。 目前支持血缘采集的文件类型以及采集须知，参见下表。 文件类型 采集须知 血缘模板 需要下载血缘模板，并填写相应数据。 父主题： 血缘采集

查看更多 →

数据源采集失败，如何重新采集？ 采集失败的数据源，处理完失败原因后，需要删除后通过新增数据源重新采集。 在任务列表页面，单击采集任务操作列的“查看”，进入任务详情页面。 单击采集项操作列的“新增数据源”，弹出新增数据源窗口。 选择区域和资源类型，单击“确认”按钮。新增数据源成功，系统开始对新增的数据源进行采集。

查看更多 →

上报采集过程 功能介绍 采集过程上报。 URI URI格式 POST /softcomai/datalake/collection/v1.0/report/process 参数说明 无。 请求 请求样例 POST https://ip:port/softcomai/datalake/collection/v1

查看更多 →

collectorStatus 否 String 采集机状态。 subNet 否 String 子网。 name 否 String 采集机名称。 packageName 否 String 采集机包名。 note 否 String 采集机备注。 createTime 否 String 采集机创建时间。 resourceUserName

查看更多 →

String 任务状态。 collectorId 是 String 采集机ID。 strategy 是 String 采集策略。 probeId 是 String 探针ID。 fileSize 否 String 本次采集的文件的大小。 响应 响应样例 {"success":true,"returnData":

查看更多 →

删除采集机 功能介绍 删除采集机。 URI URI格式 POST /softcomai/datalake/collection/v1.0/collectorConsole/delete 参数说明 无。 请求 请求样例 POST https://ip:port/softcomai/

查看更多 →

安装采集Agent 安装流程 安装前准备 校验签名文件 解压软件包 修改配置文件 安装采集Agent 安装后检查 启动采集Agent 卸载采集Agent 父主题： 数据接入

查看更多 →

检查单详情录入文本 采集GPS，在检查单详情页中找到GPS采集项进行采集 图9 检查单采集GPS 采集条码，在检查单详情页中找到采集项进行采集 图10 采集条码 采集日期或采集时间，在检查单详情页中找到采集项进行采集（以下图示仅为示例） 图11 检查单详情采集日期 采集签名，在检查单详情页中找到采集项进行采集

查看更多 →

性能数据采集 收集性能数据是收集指标和日志的过程，这些指标和日志提供有关工作负载性能的信息。 此数据包括数值，称为指标。 指标描述系统在特定时间点的状态。 它还包括包含组织成记录的不同类型的数据的日志。 通过收集性能数据，可以监视和分析工作负载的性能。 可以使用此信息来识别性能瓶

查看更多 →

采集主机资源 公网采集 内网采集 手动添加

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

开始采集后，默认每5分钟进行一次数据采集。 建议采集时长≥1小时，若采集时长不足，将无法获取7天和30天最大值以及平均值数据。 采集周期默认为7天，7天后会自动停止采集；采集周期内可以进行停止采集和重启采集操作；重启采集后，采集周期重新计算。 采集到的性能数据将保留180天，超期后会自动删除。

查看更多 →

采集元数据 创建元数据连接 创建并运行元数据同步任务 创建并运行 数据湖 元数据同步任务 查看元数据 父主题： 大数据血缘

查看更多 →

配置日志采集 CAE提供了日志采集的功能，当前只支持日志采集到LTS，可以配置日志采集路径，高级设置可配置单行日志或者多行合并为一行，默认为单行日志。 本章节以kafka组件为例，为您介绍自定义日志路径功能。 如果日志文件挂载到系统目录，如“/”、“/var/run”等，会导致组

查看更多 →