-
数据资产管理服务
- 文档导读
- 产品介绍
- 快速入门
- 用户指南
-
API参考
- 使用前必读
- 接口简介
- 环境准备
- 接口使用方法
-
数据集
- 数据集订购接口
- 数据集发布接口
- 目录管理接口
- 数据集管理接口
- 数据集可视授权接口
-
订阅和审批接口
- 查询数据集订阅类型
- 申请订阅单个数据集
- 查询已经订阅的数据集
- 将需要订阅的数据集加入购物车
- 删除加入购物车的内容
- 查询加入购物车的内容
- 申请人员查看申请信息
- 查看具体的申请内容
- 添加审批人员信息
- 查看审批人员信息
- 删除审批人员信息
- 审批人员查看待审批或者已经审批的申请信息
- 审批人员审批申请信息
- 查询订购用户信息
- 查询用户订阅并下载成功的数据集信息
- 根据数据集ID查询用户订阅成功数据集详情信息
- 查看给定数据集的订阅情况
- 撤销未审批完成的订单
- 申请本地下载数据集
- 获取用户订阅申请状态
- 自动订阅数据集
- 查询自动订阅的数据集的下载状态
- 批量申请订阅数据集
- 数据集订阅到期续订和确认销毁
- 数据集订阅到期续订
- 重复提交校验
- 订阅付费数据集
- 根据ID订阅付费数据集
- 数据集下载接口
- 计量统计接口
- 用户信息管理接口
- 通知接口
- 标签接口
- 数据集评论接口
- 网图服务数据集查询接口
- 数据集备份恢复接口
- 数据资产账本接口
-
数据接入
- 管理软件包
- 管理采集机(运维)
- 管理采集机(用户)
-
管理采集任务
- 创建采集任务(数据准备,含机机接口)
- 创建采集任务
- 创建采集任务(控制节点,含机机接口)
- 编辑采集任务(数据节点,console页面)
- 启动采集任务(数据准备,含机机接口)
- 启动采集任务(控制节点,含机机接口)
- 启动采集任务(数据节点,console页面)
- 停止采集任务(数据准备,含机机接口)
- 停止采集任务(控制节点,含机机接口)
- 停止采集任务(数据节点console页面)
- 删除采集任务(数据准备,含机机接口)
- 删除采集任务(控制节点,含机机接口)
- 删除采集任务(数据节点,console页面)
- 连通性测试(数据准备,含机机接口)
- 连通性测试(数据准备,控制节点,含机机接口)
- 连通性测试(console,数据节点)
- 连通性测试(console,控制节点)
- 判断VPN是否打通
- 发送邮件
- 查询采集任务列表
- 采集任务发布数据集
- 查询采集任务详情
- 更新采集任务(数据节点)
- 查询采集任务状态列表
- 获取任务采集批次信息
- 获取任务批次采集信息
- 查询采集任务日志
- 删除采集文件记录
- 根据标签查询采集任务(数据准备)
- 查询采集任务状态(数据准备)
- 查询项目OBS信息(数据准备)
- 项目ID与采集任务ID关联(数据准备)
- 项目ID与采集任务ID取消关联(数据准备)
- 下载采集数据记录
- 查询kafkatopic信息
- 上传kafka证书
- 查询国家或者城市编码
- 根据协议类型获取协议类别列表
- 根据协议和采集机ID获取对应的探针包信息
- 根据采集机ID获取所有探针包信息
- 获取探针自定义参数
- 管理本地上传任务
- 数据接入备份恢复
- 采集机相关接口(机机接口)
- 订购数据服务相关接口
- 管理用户信息
- 施工数据相关接口
- 网图服务相关接口
- 数据解析
- 数据备份
- 数据恢复
- 数据准备
- 公共参数
- 修订记录
- 常见问题
- 产品术语
-
数据集服务
- 文档导读
- 产品介绍
- 快速入门
- 用户指南
-
API参考
- 使用前必读
- 接口简介
- 环境准备
- 接口使用方法
- 数据集服务订购接口
- 数据集发布接口
- 目录管理接口
- 数据集管理接口
- 数据集可视授权接口
-
订阅和审批接口
- 查询数据集订阅类型
- 申请订阅单个数据集
- 查询已经订阅的数据集
- 将需要订阅的数据集加入购物车
- 删除加入购物车的内容
- 查询加入购物车的内容
- 申请人员查看申请信息
- 查看具体的申请内容
- 添加审批人员信息
- 查看审批人员信息
- 删除审批人员信息
- 审批人员查看待审批或者已经审批的申请信息
- 审批人员审批申请信息
- 查询订购用户信息
- 查询用户订阅并下载成功的数据集信息
- 根据数据集ID查询用户订阅成功数据集详情信息
- 查看给定数据集的订阅情况
- 撤销未审批完成的订单
- 获取用户订阅申请状态
- 自动订阅数据集
- 查询自动订阅的数据集的下载状态
- 批量申请订阅数据集
- 数据集订阅到期续订和确认销毁
- 数据集订阅到期续订
- 重复提交校验
- 订阅付费数据集
- 根据ID订阅付费数据集
- 数据集下载接口
- 计量统计接口
- 用户信息管理接口
- 通知接口
- 标签接口
- 数据集评论接口
- 网图服务数据集查询接口
- 数据集服务备份恢复接口
- 数据资产账本接口
- 公共参数
- 修订记录
- 常见问题
- 产品术语
- 数据生成服务
- 模型训练服务
- 文档下载
- 通用参考
链接复制成功!
使用场景模板创建工程
使用系统内置场景模板快速编排创建工程。
前提条件
已有内置场景模板。
操作步骤
- 创建工程入口。
- 在数据服务首页“我的数据工程”页签,单击“新建工程”,进入新建工程界面。
- 在数据服务左侧导航,选择“工具箱>数据准备>工程列表”页签,单击“创建”,进入新建工程界面。
- 配置工程信息,参数说明见表1。
表1 工程信息参数配置说明 参数
说明
工程名称
必填项。
工程的名称,由汉字、小写字母(a~z)、大写字母(A~Z)、数字(0~9)和特殊字符(_-.@)组成,长度为1~80个字符。
工程描述
选填项。
工程的描述信息,由汉字、小写字母(a~z)、大写字母(A~Z)、数据(0~9)和特殊字符(-_,、::。??;;}{)(!,.!)组成,长度为0~1000个字符。
标签
选填项。
用于标识工程所属的分类或作用。由汉字、小写字母(a~z)、大写字母(A~Z)、数字(0~9)和特殊字符(_-.)组成,长度为1~64个字符。
不同标签之间使用英文逗号隔开。
调度配置
可选项。
工程是否会定期自动执行。默认工程定期自动执行功能是关闭状态。
单击
,开启工程定期自动执行功能,该工程不能包含采集任务;单击
,关闭工程定期自动执行功能。
调度周期
当开启工程定期自动执行功能时,才有此参数。
必选项。
工程自动执行的周期。
调度时间间隔
当开启工程定期自动执行功能时,才有此参数。
必选项。
工程自动执行的时间间隔。
调度开始时间
当开启工程定期自动执行功能时,才有此参数。
必选项。
工程第一次自动执行的开始时间。
调度时间说明
当开启工程定期自动执行功能时,才有此参数。
工程自动执行的周期。
创建方式
必选项。
支持的创建方式:自定义创建和模板创建。默认的创建方式是“模板创建”。
此处选择“自定义创建”。
- 单击“下一步”。
- 在左侧模板区域,按场景选择一个模板。
这里以“标准数据治理发布模板”为例,用户根据实际情况进行选择。
在工程编排界面,编排工程节点。在模板中也可以自行删除或添加节点进行编排。
- 删除节点:鼠标移动到需要删除的节点上,单击
。
- 新增节点:在左侧用鼠标拖拽对应节点下的任务组件至右侧空白区域,配置任务信息完成后,单击“确定”;将任务组件按执行顺序连线。
任务信息配置请参见附录 任务配置参考。
- 删除节点:鼠标移动到需要删除的节点上,单击
- 配置采集节点的任务。
- 在“采集任务”节点下方,单击“添加任务”。
- 配置本地上传的任务信息,配置参考请参见表2的“本地上传”。
- 单击“确定”。
添加采集阶段的任务完成后,在采集任务下显示新添加的采集任务。
- 配置数据解析节点的任务。
- 在“数据解析”节点下,单击“添加任务”。
- 操作请参考附录 任务配置参考的“数据解析”。
- 单击“确定”。
添加数据解析节点的任务完成后,在数据解析下显示先添加的解析任务。
- 配置数据处理节点的任务。
- 在“数据处理”节点下方,单击“添加任务”。
- 操作请参考附录 任务配置参考的“数据处理”。
- 单击“确定”。
添加数据处理的任务完成后,在数据处理下显示新添加的处理任务。
- 配置数据加载节点的任务。
- 在“数据加载”节点下方,单击“添加任务”。
- 操作请参考附录 任务配置参考的“数据加载”。
- 单击“确定”。
添加数据加载的任务完成后,在数据加载下显示新添加的加载任务。
- 配置数据建模节点的任务。
- 在“数据建模”节点下方,单击“添加模型”。
- 操作请参考附录 任务配置参考的“数据模型”。
- 单击“确定”。
添加数据建模的任务完成后,在数据建模下显示新添加的数据模型。
- 配置数据集发布节点的任务。
- 在“数据集发布”节点下方,单击“添加任务”。
- 配置发布任务信息,配置参考请参见附录 任务配置参考的“数据集发布”。
- 单击“确定”。
添加数据集发布的任务完成后,在数据集发布下显示新添加的发布任务。
- 所有节点配置完成后,单击
,在“确认”对话框单击“确认”。
创建工程成功后,进入“工程详情”界面。
- (可选)在“工程详情”界面,支持如下操作。
- 查看任务详情:单击任务名称,可以查看该任务信息、日志信息、数据信息和历史记录。
- 修改工程:单击
,可以修改工程基本信息。
- 删除工程:单击
,可以删除该工程。