更新时间:2024-05-06 GMT+08:00

如何查看训练作业日志

在训练作业详情页,训练日志窗口提供日志预览、日志下载、日志中搜索关键字、系统日志过滤能力。

  • 预览

    系统日志窗口提供训练日志预览功能,如果训练作业有多个节点,则支持查看不同计算节点的日志,通过右侧下拉框可以选择目标节点预览。

    图1 查看不同计算节日志

    当日志文件过大时,系统日志窗口仅加载最新的部分日志,并在日志窗口上方提供全量日志访问链接。打开该链接可在新页面查看全部日志。

    图2 查看全量日志
    • 如果全部日志超过500M,可能会引起浏览页面卡顿,建议您直接下载日志查看。
    • 预览链接在生成后的一小时内,支持任何人打开并查看。您可以分享链接至他人。
    • 请注意日志中不能包含隐私内容,否则会造成信息泄露。
  • 下载

    训练日志仅保留30天,超过30天会被清理。如果用户需要永久保存日志,请单击系统日志窗口右上角下载按钮下载日志至本地保存,支持批量下载多节点日志。用户也可以在创建训练作业时打开永久保存日志按钮,保存训练日志至指定OBS路径。

    针对使用Ascend规格创建的训练作业,部分系统日志暂不支持直接在训练日志窗口下载,请在创建训练作业时指定OBS路径用于保存训练日志。

    图3 下载日志
  • 搜索关键字

    用户可以在系统日志右上角的搜索框搜索关键字,如图4所示。

    图4 搜索关键字

    系统支持高亮关键字并实现搜索结果间的跳转。搜索功能仅支持搜索当前页面加载的日志,如果日志加载不全(请关注页面提示)则需要下载或者通过打开全量日志访问链接进行搜索。全量日志访问链接打开的新页面可以通过Ctrl+F进行搜索。

  • 系统日志过滤
    图5 系统日志复选框

    如果勾选了系统日志复选框,则日志中呈现系统日志和用户日志。如果去勾选,则只显示用户日志。