使用DataArts Studio Notebook连接AuraJobV2端点并提交作业
DataArts Studio Notebook镜像内置了Aura DataFrame SDK,创建AuraJobV2端点后,您可以在DataArts Notebook中使用魔法命令连接AuraJobV2端点,进行交互式数据开发。
DataArts Studio Notebook当前处于受限使用阶段,如需使用请提交工单申请开通。
前提条件
- 已创建AuraJobV2端点且端点状态为“运行中”。具体操作,请参见创建Aura引擎端点。
- 已创建LakeFormation实例,并在LakeFormation实例中创建Catalog及数据库。具体操作,请参见创建LakeFormation实例并规划元数据。
- 已购买DataArts Studio实例和创建工作空间。具体操作,请参见购买并配置DataArts Studio。
- 已购买Notebook资源组。具体操作,请参见购买资源组。
- 已创建并行文件系统。具体操作,请参见创建并行文件系统。
步骤一:连接AuraJobV2端点
- 在AI DataLake管理控制台页面,单击导航栏左下方的“DataArts Studio”,进入DataArts Studio作业开发界面。
- 新建运行环境。
- 在“数据开发 > 作业开发”页面的右下角,单击“运行环境为空”,选择“新建环境”,配置以下参数并单击“创建”创建Notebook。
- 运行环境名称:输入自定义名称。
- 所属资源组:选择已创建的Notebook资源组。
- 运行资源规格:选择所需的运行资源规格。
- 镜像选择:选择Notebook镜像。
- 在页面右上角,将鼠标悬浮在“未连接”上,在弹出提示框中,单击“选择运行环境”选择已创建的Notebook。
- 在“数据开发 > 作业开发”页面的右下角,单击“运行环境为空”,选择“新建环境”,配置以下参数并单击“创建”创建Notebook。
- 在“Notebook环境目录”区域右键单击“我的文件”选择“新建 Notebook”,配置Notebook名称并选择存放的目录,单击“确定”。
- 绑定计算资源。
- 在页面右上角,单击“Python”,在弹出的提示框中,单击“绑定计算资源”,配置参数后,单击“确定”。
表1 绑定AuraJobV2端点参数 参数
示例
说明
资源类型
Fabric SQL
选择Notebook作业开发依赖的计算引擎。本示例选择“Fabric SQL”。
资源名称
aura_sql_966da08a
输入计算资源名称。
计算资源工作空间
workspace_auratest
选择的AuraJobV2端点所属的工作空间。
端点
aura-endpoint-test001
选择AuraJobV2端点名称。
- 在页面右上角,单击“Python”,在弹出的提示框中,单击创建的计算资源名称。
- 在页面右上角,单击“Python”,在弹出的提示框中,单击“绑定计算资源”,配置参数后,单击“确定”。
- 在Notebook中的单元格输入以下魔法命令,连接运行作业的AuraJobV2端点。
con = %aura_frame --lf_catalog_name xxx --obs_bucket_name xxx --obs_directory_base xxx/test --default_database xxx
表2 参数说明 参数
说明
lf_catalog_name
连接的LakeFormation中的Catalog名称。
obs_bucket_name
用于存储UDF的OBS并行文件系统名称。
obs_directory_base
用于存储UDF的OBS并行文件系统路径。
default_database
连接的LakeFormation中的默认数据库。
单击左上角的
运行命令,回显以下信息,即表示连接AuraJobV2端点成功:[INFO] [Aura Frame] 2026-09-30 11:21:36 Setting guc options: 'SET timezone = UTC; SET obs_result_format = 2;SET current_schema = database****;' [INFO] [Aura Frame] 2026-09-30 11:21:36 Created session 01a0f054-f093-7059-8f71-bf173d08**** successfully.
步骤二:提交作业
使用DataArts Studio Notebook提交作业的详细操作,请参见基于Aura DataFrame的多模数据处理。