管理Notebook资源
管理中心提供了用于统一管理Notebook资源的功能,空间管理员可以通过该功能集中管理所有租户的个人运行环境及计算资源。
数据开发中的Notebook作业开发提供了一个交互式的开发环境,提供全托管式JupyterLab云化版本,即开即用。个人运行环境是Notebook的基础开发环境。绑定计算资源可以为Notebook作业开发提供了多种计算引擎,便于用户进行Notebook作业开发,降低使用成本和技术门槛。管理中心支持创建、启用、停用和删除Notebook个人运行环境,支持绑定和解绑计算资源。
Notebook当前为受限使用功能。如需使用该特性,请联系客服或技术支持人员。
目前仅支持华东二局点申请开放使用。该功能受限于当前Region的ECS资源。
当前Notebook功能处于首版本公测阶段,建议仅用于个人开发和测试。
前提条件
- 个人运行环境
- 已购买Notebook资源组。请参考管理Notebook资源组章节。
- 已存在系统镜像。查看镜像请参考管理镜像章节。
- 计算资源
- 绑定MRS Spark计算资源之前,已创建MRS集群。
- 绑定Fabric SQL计算资源之前,已创建计算资源工作空间和端点。
约束与限制
- 个人运行环境
- 一个用户在当前工作空间最多能创建10个Notebook。
- 系统预置角色中,不同角色的权限如下。
- 当前工作空间管理员以及具有DAYU Administrator或者Tenant Administrator权限的用户,可以创建归属人为自己的运行环境,可以“删除”、“操作”、“查询”和“编辑”工作空间下的所有运行环境。为其他用户创建运行环境时,需要先创建归属人为自己的运行环境后,再通过修改“环境归属人”为目标用户。
- 开发者可以“新建”、“删除”、“操作”、“查询”和“编辑”环境归属人为自己的运行环境。但不能修改归属人为他人的运行环境。
- 用户自定义角色的用户,拥有“新建”权限时,只能创建环境归属人为自己的运行环境且能对其进行管理。拥有“删除”、“操作”、“查询”和“编辑”权限时,可以对工作空间下的所有运行环境进行对应操作,其中“查询”是执行其他操作的前提,对于没有查询权限的运行环境,则无法对其执行删除、编辑操作。只有拥有“编辑”权限时才可以修改运行环境的环境归属人。创建自定义角色请参考(可选)自定义工作空间角色。
- 如果用户同时拥有系统预置角色和用户自定义角色,其权限取两种角色权限的并集。
- 计算资源
- 系统预置角色中,不同角色权限如下。
- 当前工作空间管理员以及具有DAYU Administrator或者Tenant Administrator权限的用户,可以绑定、解绑、查询和编辑计算资源。
- 开发者仅具有查看权限。
- 运维者具有查看和编辑计算资源的权限。
- 用户自定义角色的用户,拥有“新建”、“删除”、“查询”和“编辑”权限时,可以对工作空间下的所有计算资源进行绑定、解除绑定、查询和编辑操作创建自定义角色请参考(可选)自定义工作空间角色。
- 如果用户同时拥有系统预置角色和用户自定义角色,其权限取两种角色权限的并集。
- 当前仅支持MRS Spark和Fabric SQL资源类型。
- 绑定MRS计算引擎需要先创建MRS 3.5.1-LTS版本集群,支持Spark 3.3.1版本。
- 系统预置角色中,不同角色权限如下。
创建个人运行环境
- 登录DataArts Studio管理控制台。
详情请参考访问DataArts Studio实例控制台。
- 在DataArts Studio控制台首页,选择对应工作空间的“管理中心”模块,进入管理中心页面。
- 在管理中心页面,单击“Notebook资源管理”,进入Notebook资源管理页面,选择“Notebook运行环境”页签。 图1 Notebook运行环境
- 单击“创建个人运行环境”,配置个人运行环境。配置参数如表1所示。
表1 创建个人运行环境参数 参数
描述
运行环境名称
输入运行环境名称。
环境归属人
运行环境的归属人,默认为创建用户。
所属资源组
选择Notebook所属的资源组。个人运行环境需要从资源组中获取资源,用于Notebook脚本的执行。未购买Notebook资源组,请参考管理Notebook资源组进行购买。
运行资源规格
配置运行Notebook作业开发的资源规格。
镜像选择
选择所需的镜像。查看系统镜像请参考管理镜像章节。
自动停止
勾选自动停止后,在设定时长范围内无操作则自动停止运行环境。输入值在1-72之间,单位:小时。默认1小时。
描述(可选)
输入描述信息。最多1000个字符。
- 单击“创建”,完成个人运行环境的创建。
个人运行环境创建完之后,单击操作列中的“启用”激活Notebook作业开发运行环境。然后跳转至数据开发页面,开始您的Notebook作业开发之旅。Notebook作业开发详见使用Notebook在线开发和调试。
管理个人运行环境
- 启动个人运行环境:单击操作列中的“启动”,启动Notebook作业开发个人运行环境。
- 停止个人运行环境:单击操作列中的“停止”,停止Notebook作业开发个人运行环境。
- 删除个人运行环境:单击操作列中的“删除”,输入“DELETE”后,再单击“确认”,删除已创建的个人运行环境。删除后,个人运行环境中已创建的作业开发脚本均会同步删除,请谨慎操作。
- 编辑个人运行环境:在运行环境为“已停用”状态时,单击操作列的“编辑”,对运行环境进行编辑。如需更改环境归属人,需要当前工作空间管理员以及具有DAYU Administrator或者Tenant Administrator权限的用户或拥有“编辑”权限的自定义角色用户,在运行环境创建好后进行修改。
- 查看个人运行环境详情:单击个人运行环境名称,进入详情页,查看个人运行环境详情。
绑定/解绑计算资源
绑定计算资源
- 登录DataArts Studio管理控制台。
详情请参考访问DataArts Studio实例控制台。
- 在DataArts Studio控制台首页,选择对应工作空间的“管理中心”模块,进入管理中心页面。
- 在管理中心页面,单击“Notebook资源管理”,进入Notebook资源管理页面,选择“计算资源”页签。 图2 计算资源
- 单击“绑定计算资源”,配置绑定计算资源。配置参数如表2所示。
表2 绑定计算资源参数 参数
描述
资源类型
选择Notebook作业开发依赖的计算引擎。当前支持绑定MRS Spark和Fabric SQL。
资源名称
输入计算资源名称。
MRS集群
资源类型选择“MRS Spark”时,选择MRS集群。
购买集群请参见购买MRS集群。MRS集群创建完成后,可以在“现有集群”中查看MRS集群的基本信息。
计算资源工作空间
资源类型选择“Fabric SQL”时配置,工作空间是Fabric的基本单元,请选择Fabric SQL的所属工作空间。
创建资源空间请进入EI领域的数智融合计算服务 DataArtsFabric控制台,创建工作空间。创建工作空间的操作请参见创建工作空间。
端点
资源类型为“Fabric SQL”时,选择计算资源工作空间后配置端点,端点是执行SQL任务时必需的计算资源。
创建SQL端点的操作请参见创建SQL端点。
- 单击“确定”,绑定计算资源。
解绑计算资源
单击计算资源列表操作列中的“解除绑定”,输入“UNBIND”后,再单击“确认”,将绑定的计算资源进行解绑。计算资源解绑后,Notebook作业开发将无法继续使用该引擎,请谨慎操作。
管理计算资源
- 编辑计算资源:单击计算资源列表操作列中的“编辑”,编辑修改绑定的计算资源。其中,资源类型不支持修改。
- 查看计算资源详情:单击计算资源名称,查看计算资源详情。