采集任务的调度频率选择 图4 部署采集任务 图5 编辑采集任务 图6 修改采集任务 未部署的采集任务才可以编辑 采集任务重新部署：部署失败的采集任务可以进行重新部署。 图7 采集子任务-1 图8 采集子任务-2 子任务重新部署 部署失败的子任务可以重新进行部署。 图9 子任务重新调度

查看更多 →

库表采集 左侧导航栏依次选择单击资源管理、库表管理、采集元数据，配置所需要的数据源表， 并依照数据标准规范，合理命名元数据名称，以及代码等项，将采集到的数据资源进行复制至部门资源库，找到部门资源库对应库表物化库表资源，最后通过数据桥接同步对应库表数据。 采集元数据： 图1 采集 复制元数据：

查看更多 →

日志采集类 日志出现重复/丢失的原因

查看更多 →

数据采集概述 数据采集是指使用Logstash通过多种方式采集各类日志数据。采集后，可以快速实现历史数据分析比对、数据关联分析、以及未知威胁发现等相关分析。 约束与限制 数据采集的Agent目前仅支持运行在Linux系统x86_64架构的E CS 主机上。ECS主机支持以下操作系统类型：Huawei

查看更多 →

。采集器描述对采集器采集的数据进行说明，指标集是规范采集的数据，采集参数可以让用户自定义采集的数据。 数据采集由APM Agent实现采集，比如java性能数据采集通过javaagent来实现。APM Agent采集的数据必须跟采集器的指标集的数据模型定义对应， 服务器 端才会得到处理。

查看更多 →

配置采集模板 配置指令式采集模板 父主题： 质量管理

查看更多 →

采集堆栈”。 采集单个实例的堆栈信息：单击要采集的实例，选择“更多 > 采集堆栈”。 根据界面提示，在弹框中选择需要采集的角色，采集内容，配置高级选项（若无特殊需求，保持默认配置即可），单击“确定”。 图1 采集堆栈 采集成功后，单击“下载”。 下载堆栈信息 选择“集群 > 待操作集群的名称

查看更多 →

网络监控采集 网络监控采集(AppNetwork)是网络监控采集器，获取网络监控相关信息。包括：类别、指标、指标名称、指标说明、单位、数据类型以及默认聚合方式。 表1 网络监控采集(AppNetwork)指标说明 指标类别 指标 指标名称 指标说明 单位 数据类型 默认聚合方式

查看更多 →

将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 缺少pymysql模块，可以查看是否有对应的egg包，如果没有，在“程序包管理”页面上传pyFile。具体步骤参考如下： 将egg包上传到指定的OBS桶路径下。 登录 DLI 管理控制台，单击“数据管理

查看更多 →

源端Mysql增量采集每小时执行一次时部分数据丢失 原因分析 任务中配置的时间戳字段为updatetime，源端数据库中createtime记录了数据插入的时间，查看未采集到的数据，updatetime要早于createtime，导致任务运行时数据还没有插入updatetime的

查看更多 →

在“由我创建的数据库实例登录”页面，单击“新增数据库实例登录”，打开新增数据库登录窗口。 图2 新增数据库实例登录 设置数据库实例登录信息。 图3 新增数据库实例登录信息 表1 参数说明 参数名称 说明 示例 数据库引擎 选择需要新增登录信息的数据库引擎。 MySQL 数据来源 数据来源取决于您所选的数据库引擎类型。

查看更多 →

时需要配置。 填写数据库的端口。 JDBC字符串 仅当“是否使用JDBC字符串”选择“是”时需要配置。 填写MYSQL数据库的JDBC格式连接串，格式：jdbc:mysql://host:port/dbname。 host为数据库的连接地址。 port为数据库的连接端口号。 dbname为要接入的MYSQL数据库名。

查看更多 →

单击“新增数据库实例登录”，打开新增数据库登录窗口。 图1 新增数据库实例登录 设置数据库实例登录信息。 图2 新增数据库实例登录信息 表1 参数说明 参数名称 说明 示例 数据库引擎 选择需要新增登录信息的数据库引擎。 MySQL 数据来源 目前支持如下数据来源： MySQL5.5、5

查看更多 →

MySQL-generallog采集器（app-discovery-mysql-generallog） 通过MySQL的general-log日志，采集客户端host和port信息。参数配置说明参见表1。 表1 MySQL-generallog采集器参数配置说明 参数 必选 配置说明

查看更多 →

MapReduce服务 全量日志（ICAgent采集文本日志） MapReduce服务 MRS 接入LTS - 30 RDS for MySQL 云数据库 RDS for MySQL 错误日志（MYSQL错误日志） 慢日志（MYSQL慢日志） 云数据库RDS for MySQL接入LTS - 31 RDS

查看更多 →

上报采集过程 功能介绍 采集过程上报。 URI URI格式 POST /softcomai/datalake/collection/v1.0/report/process 参数说明 无。 请求 请求样例 POST https://ip:port/softcomai/datalake/collection/v1

查看更多 →

collectorStatus 否 String 采集机状态。 subNet 否 String 子网。 name 否 String 采集机名称。 packageName 否 String 采集机包名。 note 否 String 采集机备注。 createTime 否 String 采集机创建时间。 resourceUserName

查看更多 →

String 任务状态。 collectorId 是 String 采集机ID。 strategy 是 String 采集策略。 probeId 是 String 探针ID。 fileSize 否 String 本次采集的文件的大小。 响应 响应样例 {"success":true,"returnData":

查看更多 →

删除采集机 功能介绍 删除采集机。 URI URI格式 POST /softcomai/datalake/collection/v1.0/collectorConsole/delete 参数说明 无。 请求 请求样例 POST https://ip:port/softcomai/

查看更多 →

安装采集Agent 安装流程 安装前准备 校验签名文件 解压软件包 修改配置文件 安装采集Agent 安装后检查 启动采集Agent 卸载采集Agent 父主题： 数据接入

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →