- 最新动态
- 产品介绍
-
用户指南
- 环境准备
- IAM权限管理
- 数据管理
- 数据集成
- 数据开发
- 解决方案
- 运维调度
- 配置管理
- 配置
- 使用教程
-
参考
-
节点
- 节点概述
- CDM Job
- DIS Stream
- DIS Dump
- DIS Client
- Rest Client
- Import GES
- MRS Kafka
- Kafka Client
- CS Job
- DLI SQL
- DLI Spark
- DWS SQL
- MRS SparkSQL
- MRS Hive SQL
- MRS Presto SQL
- MRS Spark
- MRS Spark Python
- MRS Flink Job
- MRS MapReduce
- CSS
- Shell
- RDS SQL
- ETL Job
- OCR
- Create OBS
- Delete OBS
- OBS Manager
- Open/Close Resource
- Data Quality Monitor
- Sub Job
- SMN
- Dummy
- For Each
- 表达式
-
节点
- 修订记录
- API参考
- 常见问题
- 产品术语
- 通用参考
链接复制成功!
批作业监控
批处理:调度作业
作业开发完成后,用户可以在“作业监控”页面中管理作业的调度任务,例如:执行调度、暂停调度、恢复调度、停止调度。

- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,单击“执行调度”/“暂停调度”/“恢复调度”/“停止”。
批处理:调度依赖作业
当批处理作业在“调度配置”页签中配置有依赖作业,而依赖作业没有执行调度,您可以在“作业监控”页面对该批处理作业执行调度时设置是否启动依赖的作业。如何配置依赖作业,请参见配置作业调度任务。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,选择配置好有依赖作业的作业。
- 在作业的“操作”列,单击“执行调度”。
当依赖的作业没有执行调度,您在执行调度该作业时可以设置为只启动当前作业或同时启动依赖的作业。图2 启动作业
批处理:通知设置
用户可以通过该功能配置某一个作业的通知任务,当作业运行异常或成功时向相关人员发送通知。同时,用户也可以在“运维调度”中配置通知任务,请参见通知管理。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,选择“更多 > 通知设置”,弹出“新建通知”页面,参考表1配置通知参数。
- 单击“确定”,为作业配置通知任务。
批处理:实例监控
用户可以通过该功能查看某一个作业所有实例的运行记录。
批处理:调度配置
快速跳转至作业开发页面的“调度配置”。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,选择“更多 > 调度配置”。
批处理:作业依赖关系视图
支持查看作业与其他作业的依赖关系。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 单击作业名称,选择“作业依赖”页签。查看作业间的依赖关系。
图3 作业依赖视图
单击视图中的作业,将进入该作业的开发页面。
批处理:补数据
补数据是指作业执行一个调度任务,在过去某一段时间里生成一系列的实例。用户可以通过补数据,修正历史中出现数据错误的作业实例,或者构建更多的作业记录以便调试程序等。
只有配置了周期调度的作业,才支持使用该功能。如需查看补数据的执行情况,请参见补数据监控。
当作业正在补数据时,请勿修改作业配置,否则会影响补数据过程中生成的作业实例。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,选择“更多 > 补数据”。
- 弹出“补数据”对话框,配置如所示表1的参数。
图4 补数据参数
- 单击“确定”,开始补数据,并进入“补数据监控”页面。
批处理:批量处理作业
DLF支持批量执行调度、停止作业、配置通知任务。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 勾选作业名称前的复选框,单击“执行调度”/“停止”/“通知配置”,批量处理相应的作业。
批处理:查看最近的实例
用户可以通过该功能查看某一个作业正在运行的5条实例信息。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 单击作业名称前方的
,显示“最近的实例”页面,查看最近的实例包含的节点详细信息。
批处理:查看所有实例
用户可以通过“运行记录”页面查看某一个作业的所有运行记录,以及根据实际需求对实例/节点进行更多操作。
- 登录DLF管理控制台。
- 在数据开发模块控制台的左侧导航栏,选择“运维调度 > 作业监控”。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 单击作业名称,进入“运行记录”页面。
支持批量停止、重跑、继续执行、强制成功多个实例,使用说明参见表2。
其中,批量重跑多个实例时,重跑的顺序如下:
- 如果作业不依赖上一调度周期,多个实例并行重跑。
- 如果作业自依赖,多个实例串行重跑,以上一调度周期中实例执行完成的先后顺序为准,先执行完成的先重跑。
图5 批量操作 - 在实例的“操作”列,提供如表2所示的操作。
- 单击实例前方的
,显示该实例所有节点的运行记录。
- 在节点的“操作”列,提供如表3所示的操作。
表3 操作(节点) 操作项
说明
查看日志
查看节点的日志信息。
手工重试
节点的状态为“失败”时,支持重新运行节点。
说明:
只有节点的“节点属性 > 高级 > 失败策略”设置为“挂起当前作业执行计划”时,才可以执行该操作。
强制成功
节点的状态为“失败”时,支持将该节点强制变更为“成功”状态。
说明:
只有节点的“节点属性 > 高级 > 失败策略”设置为“挂起当前作业执行计划”时,才可以执行该操作。
更多 > 跳过
节点的状态为“待运行”或“已暂停节点”时,支持跳过该节点。
更多 > 暂停
节点的状态为“待运行”时,支持暂停运行该节点,该暂停节点的后续节点将会被阻塞。
更多 > 恢复
节点的状态为“已暂停”时,支持恢复运行该节点。