停止删除MRS集群作业
在MRS集群运行过程中,用户提交的作业可能因资源配置不当、数据异常或逻辑错误导致长时间运行或卡死,需要及时停止以释放集群资源。同时,作业执行完成后,历史作业记录会持续累积,影响作业列表的可读性,需要定期清理不再需要的作业记录。那么,如何停止正在运行的异常作业以及删除已完成的历史作业?MRS管理控制台支持手动停止正在运行的作业和删除作业记录的操作,帮助用户高效管理集群作业生命周期。
停止MRS集群作业
本节介绍通过MRS管理控制台手动停止正在运行的作业的操作步骤。
Spark SQL作业不支持停止。作业停止后状态更新为“已终止”,并且该作业不可重新执行。
- 登录MRS管理控制台。
- 选择“现有集群”,选中一个待操作的运行中的集群并单击集群名称,进入集群概览信息页面。
- 选择“作业管理”。
- 停止不需要继续运行的作业,以释放集群资源。选择一个运行中的作业,在作业对应的“操作”列中,选择。
验证停止结果:
作业状态由“运行中”更新为“已终止”,表示作业已成功停止。可在作业列表中确认该作业状态已变更。
删除MRS集群作业
本节介绍通过MRS管理控制台删除作业记录的操作步骤,支持删除单个作业和批量删除作业。
作业删除后不可恢复,删除后作业的运行日志和配置信息将一并清除,请谨慎操作。建议在删除前确认作业已执行完成且无需保留运行记录。
- 登录MRS管理控制台。
- 选择“现有集群”,选中一个待操作的运行中的集群并单击集群名称,进入集群概览信息页面。
- 选择。
- 在需要删除作业对应的“操作”列中,选择。如果确认删除,在弹出的“删除作业”窗口中输入“DELETE ”,单击“确定”。
此处只能删除单个作业,返回作业列表,确认被删除的作业已从列表中消失,表示删除成功。
- 勾选多个作业,单击作业列表左上方的“删除”。如果确认删除,在弹出的“删除作业”窗口中输入“DELETE ”,单击“确定”。
可以删除一个、多个或者全部作业。返回作业列表,确认被删除的作业已从列表中消失。如作业数量较多,可刷新页面后确认。
常见问题
Q:停止作业后作业状态仍显示运行中怎么办?
- 等待1~2分钟后刷新页面,作业状态更新可能存在短暂延迟;
- 确认作业类型,Spark SQL作业不支持停止,如尝试停止Spark SQL作业将无效;
- 检查作业关联的Yarn Application是否已终止,可在Manager界面选择“集群 > 服务 > Yarn > 概览”,进入Yarn WebUI界面查看Application列表。
Q:删除作业时报错“作业正在运行无法删除”怎么办?
A:正在运行的作业不允许直接删除,请先执行停止操作后再删除。
Q:批量删除作业时部分作业删除失败怎么办?
- 检查删除失败的作业是否仍处于运行中状态,运行中的作业无法删除;
- 如个别作业删除持续失败,可尝试单独删除该作业并查看具体错误提示。
相关文档
- 了解如何创建和提交MRS作业,请参考提交MRS作业。
- 了解如何查看MRS作业运行状态和日志,请参考查看MRS作业详情和日志。
- 了解MRS作业管理的完整功能,请参考MRS作业介绍。