作业总览
在作业总览中平台支持创建数据标记,数据图标、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。
- 数据回放类型的算子作业不需要选择输出仓库。
- 状态是待脱敏或者脱敏中的数据包不能运行数据回放类型的作业。
- 数据包类型必须是Rosbag类型。
- 当选择数据集算子时,数据类型可支持选择通用存储和数据场景。
创建作业(数据包)
- 在左侧菜单栏中,单击“数据处理 > 数据处理”。
- 选择“作业总览”页签,单击“创建作业”。
图1 创建作业
- 处理算子:根据需要选择算子。
- 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。
- 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。
- 环境变量:配置算子的环境变量。允许添加的环境变量个数不超过10个。
- Key:只能由英文、数字、和特殊符号(,-_)组成,且需要以字母开头 。长度不超过64个字符。
- Value:只能由英文、数字和特殊符号(\/,.[]-_)组成 。长度不超过512个字符。
- 数据类型:选择“数据包”。
- 选择数据:选择需要操作的数据包中的数据。
- 输出目录:选择可输出的通用存储的目录。
- 单击“创建”, 在作业总览页面可查看创建好的作业。
创建作业(通用存储)
- 在左侧菜单栏中,单击“数据处理 > 数据处理”。
- 选择“作业总览”页签,单击“创建作业”。
图2 创建作业
- 处理算子:选择输出类型为数据集的算子。
- 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。
- 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。
- 数据类型:选择“通用存储”。
- 选择存储目录:选择需要操作的通用存储中的数据。
- 输出目录:选择可输出的通用存储的目录。
- 单击“创建”, 在作业总览页面可查看创建好的作业。
创建作业(数据场景)
- 在左侧菜单栏中,单击“数据处理 > 数据处理”。
- 选择“作业总览”页签,单击“创建作业”。
图3 创建作业
- 处理算子:选择输出类型为数据集的算子。
- 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。
- 优先级:设定任务的优先级,数值取[-50,50]的整数,数字越大,优先级越高。
- 数据类型:选择“数据场景”。
- 选择数据场景:选择需要操作的数据场景中的数据。
- 输出目录:选择可输出的通用存储的目录。
- 单击“创建”, 在作业总览页面可查看创建好的作业。
数据处理作业相关操作
在“作业总览”页签,还可以完成以下操作。
任务 |
操作步骤 |
---|---|
作业详情 |
单击操作栏中的“详情”,可查看作业的详情。 |
作业日志 |
|
重启作业 |
单击操作栏中的“重启”,可根据需要保持或修改资源规格(默认显示当前资源规格),将目标作业进行重启。
说明:
仅支持作业状态为“失败”、“停止”、“运行异常”和“上传失败”的作业。 |
停止作业 |
|
删除作业 |
|
重新上传作业 |
单击操作栏中的“更多 > 重新上传”,可重新上传作业。
说明:
仅支持作业状态为“上传失败”的作业。 |
搜索作业 |
选择“ID”、“数据包ID”或“算子”,在搜索输入框中输入搜索条件,按回车键即可查询。 |