更新时间:2022-12-14 GMT+08:00

任务完成后Container挂载的文件目录未清除

问题

使用了CGroups功能的场景下,任务完成后Container挂载的文件目录未清除。

回答

即使任务失败,Container挂载的目录也应该被清除。

上述问题是由于删除动作超时导致的。完成某些任务所使用的时间已远超过删除时间。

为避免出现这种场景,您可以参考修改集群服务配置参数,进入Yarn“全部配置”页面。在搜索框搜索“yarn.nodemanager.linux-container-executor.cgroups.delete-timeout-ms”配置项来修改删除时间的时长。参数值的单位为毫秒。