更新时间:2025-04-23 GMT+08:00
分享

资源管理

解释说明

用户可以通过资源管理功能,上传自定义代码或文本文件作为资源,在节点运行时调用。可调用资源的节点包含DLI Spark、MRS Spark、MRS MapReduce和DLI Flink Job。

创建资源后,配置资源关联的文件。在作业中可以直接引用资源。当资源文件变更,只需要修改资源引用的位置即可,不需要修改作业配置。

约束限制

该功能依赖于OBS服务或MRS HDFS服务。

操作步骤

  1. 在资源目录中,单击,弹出“新建目录”页面,配置资源目录参数。
  2. 单击“确定”,新建目录。
  3. 单击“新建资源”,弹出“新建资源”页面,配置如表1所示的参数。单击“确定”,新建资源。
    表1 资源管理参数

    参数

    是否必选

    说明

    名称

    资源的名称,只能包含英文字母、数字、中文字符、“_”“-”,且长度为1~32个字符。

    类型

    选择资源的文件类型:

    • jar:用户jar文件。
    • pyFile:用户Python文件。
    • file:用户文件。
    • archive:用户AI模型文件。支持的文件后缀名为:zip、tgz、tar.gz、tar、jar。

    资源位置

    选择资源所在的位置,当前支持OBS和HDFS两种资源存储位置。HDFS当前只支持MRS Spark、MRS Flink Job、MRS MapReduce节点。

    文件路径

    当“资源位置”选择OBS时,文件路径选择OBS文件路径。

    当“资源位置”选择HDFS时,文件路径选择MRS集群名称。

    依赖包

    当前只支持DLI Spark节点。

    选择已上传到OBS中的依赖Jar包。“类型”“jar”“pyFile”时,配置该参数。

    选择目录

    选择资源所属的目录,默认为根目录。

    描述

    资源的描述信息。

相关文档