批作业监控
批作业监控提供了对批处理作业的状态进行监控的能力。
批处理作业支持作业级别的调度计划,可以定期处理批量数据,主要用于实时性要求低的场景。批作业是是由一个或多个节点组成的流水线,以流水线作为一个整体被调度。被调度触发后,任务执行一段时间必须结束,即任务不能无限时间持续运行。
您可以在“作业监控 > 批作业监控”页面查看批处理作业的调度状态、调度频率、调度开始时间等信息,以及进行如表1所示的操作。
序号 |
支持的操作项 |
说明 |
---|---|---|
1 |
根据“作业名”或“责任人名”搜索作业 |
- |
2 |
根据“作业是否配置通知”、“调度状态”、“作业标签”或“下次计划时间”范围,筛选作业 |
- |
3 |
批量配置作业 |
通过勾选作业名称前的复选框,支持批量执行操作。 |
4 |
查看作业实例状态 |
单击作业名称前方的,显示“最近的实例”页面,查看该作业最近的实例信息。 |
5 |
查看作业的节点信息 |
单击作业名称,在打开的页面中点击作业节点,查看该节点的相关关联作业/脚本与监控信息。 |
6 |
调度作业相关 |
在作业的“操作”列,支持执行调度、暂停调度、恢复调度、停止调度、调度配置等,详情请参见批作业监控:调度作业。 |
7 |
通知设置 |
在作业的“操作”列,选择 ,弹出“新建通知”页面,参考表1配置通知参数。 |
8 |
实例监控 |
在作业的“操作”列,选择 ,跳转到实例监控页面,查看该作业所有实例的运行记录。 |
9 |
补数据 |
在作业的“操作”列,选择 ,弹出“补数据”对话框,详情请参见批作业监控:补数据。 |
10 |
添加作业标签 |
在作业的“操作”列,选择 ,弹出 对话框,详情请参见批作业监控:添加作业标签。 |
批作业监控:调度作业
作业开发完成后,用户可以在“作业监控”页面中管理作业的调度任务,例如:执行调度、暂停调度、恢复调度、停止调度。
- 登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。
图3 选择数据开发
- 在数据开发主界面的左侧导航栏,选择 。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,单击“执行调度”/“暂停调度”/“恢复调度”/“停止”。
批作业监控:补数据
补数据是指作业执行一个调度任务,在过去某一段时间里生成一系列的实例。用户可以通过补数据,修正历史中出现数据错误的作业实例,或者构建更多的作业记录以便调试程序等。
只有配置了周期调度的作业,才支持使用该功能。如需查看补数据的执行情况,请参见补数据监控。
当作业正在补数据时,请勿修改作业配置,否则会影响补数据过程中生成的作业实例。
- 登录DataArts Studio控制台。选择实例,点击“进入控制台”,选择对应工作空间的“数据开发”模块,进入数据开发页面。
图5 选择数据开发
- 在数据开发主界面的左侧导航栏,选择 。
- 单击“批作业监控”页签,进入批作业的监控页面。
- 在作业的“操作”列,选择 。
- 弹出“补数据”对话框,配置如表2所示的参数。
图6 补数据参数
- 单击“确定”,开始补数据,并进入“补数据监控”页面。