创建采集任务（网络直连方式）

更新时间：2022-05-07 GMT+08:00

查看PDF

网络直连场景是指用户的数据源网络已和公网网络打通，用户可直接创建数据采集任务。

气象数据仅支持网络直连方式。

支持的协议类型为：sftp、ftps、restful、Kafka、database。

配置基本信息，参数说明见表1。

当数据接入方式选择“云>气象”或当数据接入方式选的是“其他数据接入”区域下的方式时，则无基本信息。

表1 基本信息参数说明
参数	说明
网管信息	当数据接入方式选择“云>施工数据”或“云>云服务数据”时，无此参数。必填项。数据所在的网管名称。选择了接入方式后，在下拉中选择。
数据类型	必填项。采集的数据的类型。支持多选。例如“性能数据”。

配置数据源信息，参数说明见表2。

当数据接入方式选择“云>气象”，则无数据源信息。

“数据类型”多选后，需要对每个数据类型下的数据源进行配置，这里以协议类型为“SFTP”为例。

表2 配置数据源信息
参数	说明
协议类型	必填项。数据源协议的类型。“数据类型”选择值后，在下拉框中选择。例如“SFTP”。当“协议类型”的值为“SFTP”或“FTPS”时，支持添加多数据源。
IP地址和端口	必填项。数据所在的主机的IP地址和端口号。
用户名	必填项。数据所在的主机的用户名。
密码	必填项。数据所在的主机的密码。
数据存放路径	必填项。采集的数据的存储路径。以“/”开头，不能有“../”或“~/”。

说明：

其他协议类型的数据源，配置参考请参见数据源配置参考。

（可选）配置数据存储,参数说明见表3。

当数据接入方式选择"其他数据接入>Kafka流数据"时，则需要执行此步骤。

表3 配置数据存储
参数	说明
存储类型	必填项。数据存储类型。
资源名称	选填项。如果选择存储类型为Kafka，支持选择该用户的mrs Kafka资源。
topic	选填项。 topic可选择已有值，也可用户手动输入用于新建topic。
副本数	选填项。 topic选择已有值时展示该topic的副本数；如果topic为新建场景用户需要手动输入副本数用作创建topic的参数，取值范围：1-2；
分区数	选填项。 topic选择已有值时展示该topic的分区数；如果topic为新建场景用户需要手动输入分区数用作创建topic的参数，取值范围：1-10；

配置任务信息，任务信息参数说明见表4。

表4 任务信息参数说明
参数	说明
任务名称	必填项。采集任务的名称。长度为1~64个字符，由数字、字母、中文和（_-）组成。
标签	选填项。标签信息。长度为0~64个字符，由数字、字母和（_-）组成。如果用于云地协同，此处填写须与网管UUID一致。
有效时间	选填项。成功执行采集任务采集到的文件的保留时间。
描述	选填项。对该采集任务的描述。长度为0~20个字符。

单击“创建”。
在“成功”对话框中单击“确认”。

采集任务创建成功后，自动显示在“采集任务”页签的任务列表中。

如果“数据类型”选择了多种，则系统显示的采集任务的名称为设置的任务名称后加下划线及数字区分。
（可选）在采集任务列表中，支持对已创建的任务做如下操作。
- 编辑任务：在采集任务列表中需要编辑的任务对应的“操作”列下，单击。
- 删除任务：在采集任务列表中需要删除的任务对应的“操作”列下，单击>。