数据采集 使用kafka采集数据时报错IllegalArgumentException 采集数据时报错HoodieException 采集数据时报错HoodieKeyException 父主题： Hudi常见问题

查看更多 →

华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使用华为云服务。

查看更多 →

物联网平台支持第三方应用查询设备的基本信息，同时还支持查看设备上报的历史数据，能按时、天，月等维度查看设备上报的历史数据。 查询单个设备信息 批量查询设备信息列表 查询设备历史数据 查询设备影子历史数据 查询设备服务能力 父主题： 应用侧Python SDK API参考（联通用户专用）

查看更多 →

超额采集 关闭超额采集开关 打开超额采集开关 父主题： API说明

查看更多 →

采集配置 为了减少内存、数据库、磁盘空间占用，您可以按需进行采集设置。采集设置对所选应用生效。 操作步骤 在左侧导航栏中选择“采集管理 > 采集设置”。 在“应用”下拉列表框中选择应用。 单击打开采集开关。 采集开关默认打开，当您不需要采集某个应用的调用链和拓扑数据时，可通过关闭

查看更多 →

日志采集 “日志采集”处理器用于自定义日志信息，并显示在当前任务的运行日志中（日志级别为Debug）。 配置参数 基本配置 参数 说明 日志信息 设置日志内容，可使用常量，也可通过变量的方式引用前序步骤中的数据，具体请参考引用变量。 图1 日志采集 父主题： 处理器

查看更多 →

视频采集 描述 视频采集组件提供了视频采集功能，移动端需要采集视频信息时，可以使用该组件完成视频采集功能。 开放能力 视频采集为组件资产，提供视频采集组件，如图1所示。 图1 视频采集组件示例 视频采集组件提供的能力： 组件支持配置处理方式：公共或者ISDP+。 组件提供视频数据保存连接器，连接器处理视频数据。

查看更多 →

数据采集 数据采集概述 采集数据 采集管理 组件管理 父主题： 设置

查看更多 →

单击“采集状态”，查看主机的采集状态列表。 图1 查看采集状态 表1 采集状态说明 参数名称 说明 主机名称 主机名称。 IP 实例的IP地址。 实例名称 实例名称。 采集器 采集器名称。 单击“采集器”列的，支持按照采集器名称过滤。 状态 采集状态，包括：正常、采集错误以及未开始。 单击“状态”列的，支持按照状态过滤。

查看更多 →

公网采集 适用于采集云平台主机。目前支持的源端云平台为：阿里云、华为云、AWS、腾讯云、Azure。 本节介绍简单项目的公网采集步骤，复杂项目的公网采集步骤请参见创建公网采集任务。 通过公网采集的主机，需要迁移预检查通过或深度采集成功后，才可以创建迁移工作流。 前提条件 已在源端

查看更多 →

日志采集开关 “日志采集开关”默认打开，当不需要采集日志时，可关闭采集开关来停止日志采集，以减少资源占用。 “日志采集开关”关闭后，ICAgent将停止采集日志数据，且 云日志服务LTS 控制台的“日志采集开关”也将同步关闭。 父主题： 日志配置

查看更多 →

采集设置 概述 UniAgent 安装与配置 UniAgent 安装与配置（新版） CCE接入 管理主机组 管理主机组（受限开放） 代理区域管理 操作日志 父主题： 设置

查看更多 →

数据采集 组件控制器安装失败 采集节点或采集通道故障 组件控制器常用命令 父主题： 故障排除

查看更多 →

上报采集机采集数据 功能介绍 将采集到的数据上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/uploading 参数说明 无。 请求 请求样例 POST https://ip:port/softcoma

查看更多 →

上传采集机采集数据分片 功能介绍 将采集到的数据分片上报到server端。 URI URI格式 POST /softcomai/datalake/collection/v1.0/sliceUploading 参数说明 无。 请求 请求样例 POST https://ip:port

查看更多 →

编辑完成后，在上方选择“采集通道管理”页签，并单击目标采集通道操作列的“重启”，重启采集通道。 图9 重启采集通道 检查采集通道和采集节点状态。 重启完成后，在“采集通道管理”页面中，检查目标采集通道的健康状态。 图10 采集通道健康状态 在上方选择“采集节点管理”页签，页面，检查目标采集节点的健康状态。

查看更多 →

创建采集任务（采集Agent方式） 使用采集Agent场景需要用户在自己的网络区域安装采集Agent，保证和数据源网络可以正常通信。 安装采集Agent的方法请参考安装采集Agent。 气象数据不支持采集Agent方式。 支持的协议类型为：sftp、ftps、restful、co

查看更多 →

控制 控制连接器包含“中断”“条件判断”“继续”“遍历集合元素”“分支”“数据分片”“多分支条件”“终止”“流程块”“循环”“异常监控和处理”执行动作。 连接参数 控制连接器无需认证，无连接参数。 中断 中断（break），设置了中断节点，流运行到中断节点后，不会再往后面执行，并

查看更多 →

控制 控制连接器包含“中断”“条件判断”“继续”“遍历集合元素”“分支”“数据分片”“多分支条件”“终止”“流程块”“循环”“异常监控和处理”执行动作。 连接参数 控制连接器无需认证，无连接参数。 中断 中断（break），设置了中断节点，流运行到中断节点后，不会再往后面执行，并

查看更多 →

安装采集Agent 介绍如何安装采集Agent。 操作步骤 执行以下命令，在“NAIE_Collector_20.5.1_Linux_x64”路径下安装采集Agent。 cd NAIE_Collector_20.5.1_Linux_x64 执行如下命令： ./Install.sh

查看更多 →

采集任务的调度频率选择 图4 部署采集任务 图5 编辑采集任务 图6 修改采集任务 未部署的采集任务才可以编辑 采集任务重新部署：部署失败的采集任务可以进行重新部署。 图7 采集子任务-1 图8 采集子任务-2 子任务重新部署 部署失败的子任务可以重新进行部署。 图9 子任务重新调度

查看更多 →