系统容器异常退出

问题现象

在训练创建后出现“系统容器异常退出”的故障。

[ModelArts Service Log]2022-10-11 19:18:23,267 - file_io.py[1ine:748] - ERROR:
	stat:404
	errorCode:NoSuchKey
	errorMessage:The specifiedkey does not exist.
	reason:Not Found
	request-id:00000183C6C4010℃66D399E000COE3xx
	retry:0
[ModelArts Service Log]2022-10-11 19:18:23,267 - modelarts-downloader.py[line:90] - ERROR: modelarts-downloader. py: Download directory failed: [Errno
{'status': 404, ......}] file or directoryor bucket not found.

原因分析

出现该问题的可能原因如下：

1. OBS相关错误。
   1. OBS文件不存在。The specified key does not exist。
   2. 用户OBS权限不足。
   3. OBS限流。
   4. OBS其他问题。
2. 磁盘空间不足。

处理方法

1. 如果是OBS相关错误。
   1. OBS文件不存在。The specified key does not exist。

      参考日志提示“errorMessage:The specified key does not exist”章节处理。

   2. 用户OBS权限不足。

      参考 5.5.1 日志提示“reason:Forbidden”。

   3. OBS限流。

      参考5.1.1 OBS复制过程中提示“BrokenPipeError: Broken pipe”。

   4. OBS其他问题。

      请参考OBS服务端错误码或者采集request id后向OBS客服进行咨询。

2. 如果是空间不足。

   参考 常见的磁盘空间不足的问题和解决办法章节处理。