查看MRS作业详情和日志
用户通过管理控制台可在线查看当前MRS集群内所有作业的状态详情,以及作业的详细配置信息和运行日志信息。
由于Spark SQL和Distcp作业在后台无日志,因此运行中的Spark SQL和Distcp作业不能在线查看运行日志信息。
查看作业状态
- 登录MRS管理控制台。
- 选择“现有集群”,选中一个运行中的集群并单击集群名称,进入集群信息页面。
- 单击“作业管理”,即可查看当前MRS集群已创建的作业列表及状态。
作业列表默认按提交时间顺序排列,各类作业列表参数说明如表1所示,可通过作业类型和作业状态快速筛选作业。
表1 作业列表参数 参数
参数说明
作业名称/ID
作业的名称,新增作业时配置。
ID是作业的唯一标识,作业新增后系统自动赋值。
用户名称
提交作业的用户名称。
作业类型
作业类型。
说明:在MRS集群“文件管理”页面进行文件的导入导出操作后,您可以在“作业管理”页面查看Distcp类型的作业详情。
状态
显示作业的状态。
- 已提交:作业已提交。
- 已接受:作业提交成功后的初始状态。
- 运行中:作业执行过程中。
- 已完成:作业执行完成,并且执行成功。
- 已终止:作业执行过程中,停止执行。
- 异常:作业执行过程中报错,或者作业执行完成,但执行失败。
执行结果
显示作业执行完成的结果。
- 未定:正在执行的作业。
- 成功:执行成功的作业。
- 终止:执行中被手动终止的作业。
- 失败:执行失败的作业。
说明:作业执行成功或失败后都不能再次执行,只能重新添加作业。
队列名称
提交作业用户绑定的资源队列的名称。
作业提交时间
记录作业提交的开始时间。
作业结束时间
记录作业执行完成或手工停止的时间。
操作
对当前作业执行相关操作,请参考管理MRS集群作业。
查看MRS作业日志
- 登录MRS管理控制台。
- 选择“现有集群”,选中一个运行中的集群并单击集群名,进入集群基本信息页面。
- 选择 。
- 在需要查看作业对应的“操作”列中,单击“更多 > 查看详情”。
弹出“查看详情”窗口,显示该作业的配置信息。
- 选择一个运行中的作业,在作业对应的“操作”列中,单击“查看日志”。
弹出一个新页面,显示作业执行的实时日志信息。
- 每个租户并发提交作业和查看日志的个数均为10。
- 当选择保留作业日志到OBS或HDFS时,系统在作业执行结束后,将日志压缩并存储到对应路径。因此,此类作业运行结束后,作业状态仍然为“运行中”,需等日志存储成功后,状态变更为“已完成”。日志存储花费时间依赖于日志大小,需要数分钟以上。