任务完成后Container挂载的文件目录未清除
问题
使用了CGroups功能的场景下,任务完成后Container挂载的文件目录未清除。
回答
即使任务失败,Container挂载的目录也应该被清除。
上述问题是由于删除动作超时导致的。完成某些任务所使用的时间已远超过删除时间。
为避免出现这种场景,您可以参考修改集群服务配置参数,进入Yarn“全部配置”页面。在搜索框搜索“yarn.nodemanager.linux-container-executor.cgroups.delete-timeout-ms”配置项来修改删除时间的时长。参数值的单位为毫秒。