管理Notebook资源
管理中心提供了用于统一管理Notebook资源的页面,空间管理员可在此集中管理所有租户的个人运行环境及计算资源。
数据开发中的Notebook作业开发提供了一个交互式的开发环境,提供全托管式JupyterLab云化版本,即开即用。个人运行环境是Notebook的基础开发环境。绑定计算资源可以为Notebook作业开发提供了多种计算引擎,便于用户进行Notebook作业开发,降低使用成本和技术门槛。管理中心支持创建、启用、停用和删除Notebook个人运行环境,支持绑定和解绑计算资源。
前提条件
- 个人运行环境
- 已购买Notebook资源组。请参考管理Notebook资源组章节。
- 已存在系统镜像或自定义镜像。查看和创建镜像请参考管理镜像章节。
- 计算资源
- 绑定MRS Spark计算资源之前,已创建MRS集群。
- 绑定DLI Spark计算资源之前,已创建DLI 队列和委托。
- 绑定Fabric SQL计算资源之前,已创建计算资源工作空间和端点。
约束与限制
- 个人运行环境
- 一个用户在当前工作空间最多能创建10个Notebook。
- 仅当前工作空间管理员、开发者,以及具有DAYU Administrator或者Tenant Administrator权限的用户,可以创建和管理所有Notebook个人运行环境。且开发者仅可以为自己创建个人运行环境,仅可以管理环境归属人为自己的个人运行环境。运维者和访客仅具有查看权限。
- 计算资源
- 仅当前工作空间管理员以及具有DAYU Administrator或者Tenant Administrator权限的用户,可以绑定、解绑和编辑计算资源。开发者仅具有查看权限。运维者具有查看和编辑计算资源的权限。
- 当前仅支持MRS Spark、DLI Spark和Fabric SQL资源类型。
- 绑定MRS计算引擎需要先创建MRS 3.5.1-LTS版本集群,支持Spark 3.3.1版本。
- 绑定DLI计算引擎需要先创建DLI通用队列,队列支持Spark 3.3.1版本。
创建个人运行环境
- 参考访问DataArts Studio实例控制台,登录DataArts Studio管理控制台。
- 在DataArts Studio控制台首页,选择对应工作空间的“管理中心”模块,进入管理中心页面。
- 在管理中心页面,单击“Notebook资源管理”,进入Notebook资源管理页面,选择“Notebook运行环境”页签。 图1 Notebook运行环境
- 单击“创建个人运行环境”,配置个人运行环境。配置参数如表1所示。
表1 创建个人运行环境参数 参数
描述
运行环境名称
输入运行环境名称。
环境归属人
选择运行环境的归属人。环境归属人才具有该个人运行环境的管理权限。
说明:工作空间管理员以及具有DAYU Administrator或者Tenant Administrator权限的用户可以指定环境归属人。开发者仅可以选择自己为环境归属人。
所属资源组
选择Notebook所属的资源组。个人运行环境需要从资源组中获取资源,用于Notebook脚本的执行。未购买Notebook资源组,请参考管理Notebook资源组进行购买。
运行资源规格
配置运行Notebook作业开发的资源规格。
镜像选择
选择所需的镜像。支持选择系统镜像和用户自定义镜像。查看系统镜像和创建用户自定义镜像请参考管理镜像章节。
自动停止
勾选自动停止后,在设定时长范围内无操作则自动停止运行环境。输入值在10-120之间,单位:分钟。默认10分钟。
描述(可选)
输入描述信息。最多1000个字符。
- 单击“创建”,完成个人运行环境的创建。
个人运行环境创建完之后,单击操作列中的“启用”激活Notebook作业开发运行环境。然后跳转至数据开发页面,开始您的Notebook作业开发之旅。Notebook作业开发详见使用Notebook在线开发和调试代码。
管理个人运行环境
- 启用个人运行环境:单击操作列中的“启用”,启用Notebook作业开发个人运行环境。
- 停止个人运行环境:单击操作列中的“停用”,停用Notebook作业开发个人运行环境。
- 删除个人运行环境:单击操作列中的“删除”,输入“DELETE”后,再单击“确认”,删除已创建的个人运行环境。删除后,个人运行环境中已创建的作业开发脚本均会同步删除,请谨慎操作。
- 查看个人运行环境详情:单击个人运行环境名称,进入详情页,查看个人运行环境详情。
绑定/解绑计算资源
绑定计算资源
- 参考访问DataArts Studio实例控制台,登录DataArts Studio管理控制台。
- 在DataArts Studio控制台首页,选择对应工作空间的“管理中心”模块,进入管理中心页面。
- 在管理中心页面,单击“Notebook资源管理”,进入Notebook资源管理页面,选择“计算资源”页签。 图2 计算资源
- 单击“绑定计算资源”,配置绑定计算资源。配置参数如表2所示。
表2 绑定计算资源参数 参数
描述
资源类型
选择Notebook作业开发依赖的计算引擎。当前支持绑定MRS Spark、DLI Spark和Fabric SQL。
资源名称
输入计算资源名称。
MRS集群
资源类型选择“MRS Spark”时,选择MRS集群。
购买集群请参见购买MRS集群。MRS集群创建完成后,可以在“现有集群”中查看MRS集群的基本信息。
DLI队列
资源类型选择“DLI Spark”时配置。DLI服务中的队列即为计算资源,计算资源是使用DLI服务的基础。
委托
资源类型选择“DLI Spark”时配置,添加委托后才有权限使用该计算资源。
创建委托操作请参见创建DLI自定义委托权限。
计算资源工作空间
资源类型选择“Fabric SQL”时配置,工作空间是Fabric的基本单元,请选择Fabric SQL的所属工作空间。
创建资源空间请进入EI领域的数智融合计算服务 DataArtsFabric控制台,创建工作空间。创建工作空间的操作请参见创建工作空间。
端点
资源类型为“Fabric SQL”时,选择计算资源工作空间后配置端点,端点是执行SQL任务时必需的计算资源。
创建SQL端点的操作请参见创建SQL端点。
- 单击“确定”,绑定计算资源。
解绑计算资源
单击计算资源列表操作列中的“解除绑定”,输入“UNBIND”后,再单击“确认”,将绑定的计算资源进行解绑。计算资源解绑后,Notebook作业开发将无法继续使用该引擎,请谨慎操作。
管理计算资源
- 编辑计算资源:单击计算资源列表操作列中的“编辑”,编辑修改绑定的计算资源。其中,资源类型不支持修改。
- 查看计算资源详情:单击计算资源名称,查看计算资源详情。