最新动态

更新时间:2024/11/25 GMT+08:00

本文介绍了AI开发平台ModelArts各特性版本的功能发布和对应的文档动态,欢迎体验。

2024年11月

序号

功能名称

功能描述

阶段

相关文档

1

ModelArts文档全新升级

按照产品形态区分用户指南,原有的ModelArts控制台对应操作手册合入ModelArts Standard用户指南。

新增ModelArts Lite Server、ModelArts Lite Cluster用户指南。

商用

ModelArts Standard使用流程

Lite Server使用流程

Lite Cluster使用流程

2024年03月

序号

功能名称

功能描述

阶段

相关文档

1

训练作业的故障恢复情况

当训练作业发生故障恢复时(例如进程级恢复、POD级重调度、JOB级重调度等),可以在作业详情页面查看故障恢复详情,里面记录了训练作业的启停情况。

商用

查看故障恢复详情

2

训练支持配置自定义规格

在创建训练作业时,支持配置专属资源池的自定义规格,进而提升资源池的利用率。

商用

创建训练作业

2023年12月

序号

功能名称

功能描述

阶段

相关文档

1

国际站新增计费说明文档

介绍ModelArts的计费模式和计费项,也说明了如何变更计费模式、如何续费、如何查看费用账单、如何停止计费等。

商用

计费说明

2023年11月

序号

功能名称

功能描述

阶段

相关文档

1

创建专属资源池新增网段参数

创建专属资源池时,支持用户选择默认填充的网段和用户自定义网段。

商用

创建资源池

2

创建专属资源池新增控制节点分布参数

创建专属资源池时,支持选择控制节点的分布位置,可选择随机分配和自定义可用区。

商用

创建资源池

3

专属资源池支持IPv6

支持创建网络和创建专属资源池时选择开启IPv6功能。

商用

创建资源池

4

Notebook cache盘容量上报

当前开发环境的cache盘使用时,没有容量告警,在使用时很容易超过限制,并直接重启Notebook实例。重启后多种配置重置,会导致用户数据丢弃,环境丢失,造成很不好的使用体验。因此提供了cache盘使用情况的监控和告警,并将数据上报至AOM平台。

商用

Notebook cache盘容量告警上报

5

在线服务支持存储挂载功能

支持创建在线服务时选择存储挂载的功能。在服务运行时将存储卷以本地目录的方式挂载到计算节点(计算实例)。

商用

部署为在线服务

6

在线服务支持IPv6

支持创建在线服务时选择开启IPv6功能。

商用

部署为在线服务

7

CloudShell提供问题定位提示

训练作业处于非运行状态、权限不足等原因会导致无法CloudShell使用,用户可根据界面提供的提示定位原因。

商用

使用CloudShell登录训练容器

8

训练作业支持配置容器运行时的用户ID

创建训练作业,启动方式选择预置框架,引擎版本选择自定义时,支持用户自定义容器运行时的用户ID。

商用

创建训练作业

9

新增文档“预置框架启动流程说明”

介绍了Tensorflow、PyTorch等预置训练框架启动原理。

商用

预置框架启动流程说明

10

专属资源池新增替换节点功能

专属资源池新增对单个节点替换的功能。

商用

查看资源池详情

11

专属资源池新增节点故障隔离码列表

提供节点故障隔离码及对应检测方法定位故障。

商用

资源池异常处理

2023年10月

序号

功能名称

功能描述

阶段

相关文档

1

“工具指南”文档下线

工具指南文档已下线,内容合并至“开发环境> 本地IDE> 本地IDE(PyCharm)> PyCharm Toolkit插件连接Notebook”中。

下线

PyCharm ToolKit介绍

2023年08月

序号

功能名称

功能描述

阶段

相关文档

1

ModelArts推理平台支持大模型导入

ModelArts推理平台支持大模型场景下的AI应用管理和服务部署。

商用

使用大模型创建AI应用部署在线服务

2

训练作业支持按资源池维度筛选训练作业

训练作业详情列表页面,支持按资源池维度筛选训练作业。

商用

停止、重建或查找作业

2023年05月

序号

功能名称

功能描述

阶段

相关文档

1

新增使用Grafana查看AOM中的监控指标资料

Grafana是一种数据可视化工具,支持灵活而又复杂多样的监控视图和模板,ModelArts提供了几种常用的监控视图模板,可以导入Grafana中,配置后就可以通过Grafana查看上报到AOM中的ModelArts监控指标。

商用

使用Grafana查看AOM中的监控指标

2

Notebook实例事件更新

完善Notebook实例整个生命周期的事件信息。

商用

查看Notebook实例事件

3

ModelArts CLI面向本地开发场景支持任务提交、实例支持镜像构建能力展示与镜像切换

ModelArts CLI,即ModelArts命令行工具,是一个跨平台命令行工具,用于连接ModelArts服务并在ModelArts资源上执行管理命令。支持用户在ModelArts Notebook及线下虚拟机中与云端服务交互,可以实现命令自动补全、鉴权、镜像构建、提交ModelArts训练作业、提交DLI Spark作业、OBS数据拷贝等。

商用

ModelArts CLI命令参考

4

在线服务支持Websocket访问

WebSocket访问在线服务,客户端和服务端只需要完成一次握手,两者之间就可以建立持久性的连接,并进行双向数据传输。

商用

WebSocket访问在线服务

5

AI应用管理创建AI应用子章节标题优化

创建AI应用子章节标题与管理控制台创建AI应用页面元模型来源保持一致。

商用

创建AI应用

6

上线训练作业优先级细粒度权限配置功能

使用新版专属资源池进行训练的作业,支持在创建训练作业时设置任务优先级,默认用户权限可选择优先级1和2,配置了"设置作业为高优先级"权限的用户可选择优先级1~3。

商用

设置作业为高优先级权限

2023年03月

序号

功能名称

功能描述

阶段

相关文档

1

上线新版专属资源池

新版专属资源池是一个全面的技术和产品的改进,主要功能有专属资源池类型归一、自助专属池网络打通、更加完善的集群信息、自助管理集群加速卡驱动和更细粒度的资源划分。

商用

资源池管理

2023年01月

序号

功能名称

功能描述

阶段

相关文档

1

标签管理服务TMS

ModelArts支持对接标签管理服务TMS,在ModelArts中创建资源消耗性任务(例如:创建Notebook、训练作业、推理在线服务)时,可以为这些任务配置标签,通过标签实现资源的多维分组管理。

商用

ModelArts如何通过标签实现资源分组管理

创建Notebook实例

部署为在线服务

2

数据标注平台

数据标注平台功能下线,原团队标注的LabelConsole功能融合至ModelArts-Console。

下线

登录数据标注平台

3

新版训练优化事件查看功能

事件信息提示优化,用户能更清晰地知道当前训练阶段及耗时情况。

商用

查看训练作业事件

4

上线查看Notebook实例事件查看功能

当Notebook实例启动和运行时,可以在Notebook实例详情页中查看具体的事件。通过查看事件,用户可以看到实例的运行或者异常状态详情。

商用

查看Notebook实例事件

2022年11月

序号

功能名称

功能描述

阶段

相关文档

1

SDK参考中新增文件传输内容

支持上传本地文件和文件夹至OBS,支持下载OBS文件和文件夹至本地。

公测

文件传输(推荐)

2

新增API参考的权限策略和授权项

新增开发环境权限(新版)、训练作业权限(新版)内容,主要介绍了开发环境和训练作业的细化权限说明。

公测

开发环境权限(推荐)

训练作业权限(推荐)

2022年08月

序号

功能名称

功能描述

阶段

相关文档

1

国际站上线PyCharm工具指南

AI开发者会使用PyCharm工具开发算法或模型,为方便快速将本地代码提交到ModelArts的训练环境,ModelArts提供了一个PyCharm插件工具PyCharm ToolKit,协助用户完成代码上传、提交训练作业、将训练日志获取到本地展示等,用户只需要专注于本地的代码开发即可。

公测

本地IDE(PyCharm)

2

训练作业卡死检测

训练作业在运行中可能会因为某些未知原因导致作业卡死,如果不能及时发现,就会导致无法及时释放资源,从而造成极大的资源浪费。为了节省训练资源成本,提高使用体验,ModelArts提供了卡死检测功能,能自动识别作业是否卡死,并在日志详情界面上展示,同时能配置通知及时提醒用户作业卡死。

公测

训练作业卡死检测

3

补齐调用在线服务接口的多语言示例

ModelArts支持通过API接口进行在线服务预测,为更好的指导开发者使用,本次补齐多种认证方式下的Python和Java语言的请求示例。

公测

访问在线服务

4

用户可以在Notebook实例中更改SSH配置信息

在创建Notebook实例时,如果配置了SSH远程开发,当用户需要更换密钥对或白名单时,则可以在Notebook的实例详情页修改SSH的配置信息。

公测

修改Notebook SSH的配置信息

5

查看所有子账号的Notebook实例

给子用户授予listAllNotebookslistUsers权限时,在Notebook页面上,打开查看所有,可以看到IAM项目下所有子用户创建的Notebook实例 。

公测

查看所有子账号的Notebook实例

2022年05月

序号

功能名称

功能描述

阶段

相关文档

1

新版训练故障自动恢复功能

在训练模型因硬件故障而导致训练失败时,提供容错检查和自动恢复能力。

公测

训练作业容错检查

2

新版训练支持使用自定义镜像创建算法和训练作业

新版训练管理中,支持使用自定义镜像的方式创建并运行训练作业。

公测

使用自定义镜像创建新版训练作业

3

新版训练上线事件查看功能

在训练作业运行周期中,可通过查看事件功能,了解训练作业运行过程,遇到任务异常时,更加准确的排查定位问题。

公测

训练作业事件

2022年03月

序号

功能名称

功能描述

阶段

相关文档

1

国际站上线新版开发环境Notebook功能

国际站站点上线新版开发环境Notebook。新版Notebook2.0较旧版Notebook版本增加了本地IDE远程连接Notebook等功能,更方便用户使用。

公测

开发工具介绍

2022年01月

序号

功能名称

功能描述

阶段

相关文档

1

委托授权功能优化

委托授权功能优化,将ModelArts委托权限更细化,用户可以根据实际需要自定义和周边交互服务的授权。

公测

配置访问授权

2021年12月

序号

功能名称

功能描述

阶段

相关文档

1

“模型”更名为“AI应用”

为了更好的区分模型和AI应用的概念,将界面上的“模型管理”更名为“AI应用管理”。“模型”指的是模型文件;“AI应用”指的是可以直接部署的镜像,或是封装封装后的模型,亦或是自动学习获取到的应用。

公测

AI应用管理

2021年10月

序号

功能名称

功能描述

阶段

相关文档

1

下线使用访问密钥授权

ModelArts使用过程中涉及到OBS、SWR、IEF等服务交互,需要用户配置授权,允许Modelarts访问这些依赖服务。过去的使用访问密钥授权功能下线,后续由委托授权方式替代。

公测

使用委托授权(推荐)

2021年09月

序号

功能名称

功能描述

阶段

相关文档

1

上线新版数据集

新版数据集中,创建数据集与创建数据标注任务解耦,更方便用户使用。

公测

创建数据集

创建标注作业

2

上线新版训练日志

在新版训练日志查看界面中,可以自动识别出导致训练作业失败的常见错误,并给出解决方案建议。

公测

训练日志详情

故障排除 > 训练作业

2021年05月

序号

功能名称

功能描述

阶段

相关文档

1

新版训练支持超参搜索功能

modelarts支持的超参搜索功能,在无需算法工程师介入的情况下,即可自动进行超参的调优,在速度和精度上超过人工调优。

商用

超参搜索

2

上线新版训练管理

新版训练作业和新版算法管理相互耦合,为您提供更优质的训练体验。旧版训练仍然保留。

公测

训练管理(New)

2021年02月

序号

功能名称

功能描述

阶段

相关文档

1

开放授权管理接口

开放授权管理接口后,用户可以直接调用API进行授权管理。

商用

授权管理

2

新增基础教程(配置ModelArts使用权限)

如果您申请了一个华为云帐号,且需要将帐号权限分配给多个用户使用ModelArts。可参考本案例指导完成权限分配,使得子帐号具备华为云及相关服务的操作权限

商用

配置ModelArts使用权限

2020年11月

序号

功能名称

功能描述

阶段

相关文档

1

Notebook更新工作环境(旧版Notebook已下线,请使用新版Notebook)

每个工作环境支持多种AI引擎,可以在同一个Notebook实例中使用所有支持的AI引擎。本次变更,更新创建Notebook时工作环境的展示。

商用

创建Notebook实例

2020年08月

序号

功能名称

功能描述

阶段

相关文档

1

开发环境:重构Notebook使用指南,获取帮助更加便捷

ModelArts开发环境集成了开源的Jupyter Notebook和JupyterLab,用户可根据使用习惯选择一种方式进行模型开发。本次优化Notebook使用指导,将Jupyter Notebook的使用与JupyterLab使用区分开,更方便查找,且针对不同类型用户,可端到端使用某一个开发工具完成任务。

商用

Notebook使用指南

2

数据管理:“表格”类型数据集支持DWS数据源

针对新建的“表格”类型数据集,支持多种多样的数据源输入,如OBS、DWS、DLI、MRS。本次新增支持DWS的表数据作为数据源输入,满足更丰富的使用场景。

公测

“表格”类型数据集

2020年07月

序号

功能名称

功能描述

阶段

相关文档

1

开发环境:支持GitHub代码库功能(旧版Notebook的功能,已下线,git代码库的下载请参考新版使用Git插件)

创建Notebook时支持使用GitHub代码库,支持下载GitHub的公共仓库和私有仓库,且可基于JupyterLab的git插件进行图形化操作。

商用

支持GitHub代码库

2

数据管理:支持视频类型的数据集管理

新增支持视频类型的数据集,可在ModelArts中对视频进行标注,识别出视频中每个物体的位置及分类。

公测

视频类型数据集