创建自定义算子

前提条件

已完成开发自定义算子。

计费说明

使用自定义算子产生的费用包含在ModelArts数据精炼计费中，不单独计费。计费详情，请参见数据管理计费项。

创建自定义算子

1. 登录ModelArts管理控制台，在左侧导航栏选择“数据准备 > 数据精炼”。
2. 在“智能精炼”页面右上方单击“精炼配置”。

   

3. 单击“自定义”页签，在页面右上角单击“创建”。
4. 在“创建算子”页面，配置相关信息，单击“立即创建”。

   表1 创建算子参数说明

   参数		说明	示例值
   基本信息	名称	名称需以字母或中文开头和结尾，仅支持字母、数字、中文、中划线和下划线，长度2~128个字符。	DATA-FILTERING
   	版本	默认为V1。当算子更新时，同步更新版本。	V1
   	算子类别选择	按作用分类，快速定位数据精炼算子。 数据转换：对已有字段做确定性的格式或结构变更（如类型转换、编码统一、脱敏），不引入新的语义信息，处理前后信息含量不变。 数据过滤：按条件对每条记录做独立判断，不符合条件的整条剔除。判断只看当前记录本身，不依赖其他记录。 数据标注：为已有记录追加语义标签、属性或评分（如分类标签、检测框、质量分），原内容不变，标签用于说明“这条数据是什么/质量如何”，服务于模型训练或评估。	数据过滤
   	描述	自定义算子的描述。最大支持200个字符。	-
   算子配置	算子执行实例规格类型	支持选择CPU或NPU。	CPU
   	输入数据集类型	请确认算子输入数据集类型与输出数据集类型保持一致，并确保与算子包中对应数据集类型的数据集格式符合平台要求，该配置项创建后不可修改。 输入数据集类型支持选择文本、图片、视频和其他。	图片，基础图片
   	界面参数	配置算子参数的信息，支持选择“暂不配置”和“立即配置”。 单击“立即配置”，配置算子参数的名称、界面显示名称、参数类型、约束类型等信息。在算子参数卡片右侧，单击“预览”，可以查看参数效果；单击“删除”，则删除该算子参数。 在算子参数卡片下方，单击“添加界面参数”，可配置多个算子参数。最大支持添加50个算子参数。单击“界面效果预览”，可查看已配置的所有算子参数。	立即配置，配置参数参见表2
   算子包上传	来源	上传已开发的算子包（前提条件获取），支持选择“对象存储服务OBS”和“本地上传”。支持上传1个tar文件，文件大小不超过4GB，tar包内文件名仅支持英文字符。 存储类型：支持选择“对象存储 OBS-对象桶”和“对象存储 OBS-并行文件系统”。 存储地址：配置待连接至本平台的数据当前所在的存储地址，用于后续数据管理与访问。必须以obs://或/开头，必须以.tar结尾，且除前缀外不得出现//。	本地上传，对象存储 OBS-对象桶，obs://dataset-test/DATA_FILTERING_IMAGE/，选择本地tar包上传

   表2 界面参数配置示例

   参数名称（key值）	界面显示名称	参数类型	约束类型	是否必填	默认值	参数描述
   width_limit	最小宽度	INT	不涉及	否	200	图片的最小宽度（像素），小于此值的图片将被过滤。
   height_limit	最小高度	INT	不涉及	否	200	图片的最小高度（像素），小于此值的图片将被过滤。
   file_size_limit	最小文件大小	INT	不涉及	否	5120	图片的最小文件大小（字节），小于此值的图片将被过滤。
   aspect_ratio_limit	最大宽高比	FLOAT	不涉及	否	3	图片的最大宽高比（宽÷高），大于此值的图片将被过滤。

5. 创建完后，在“自定义”页签，可以看到新创建的算子卡片。
   图1 自定义算子
   

后续操作

创建智能精炼时，可添加已创建的自定义算子。算子名称后有图标，表示自定义算子。具体操作，请参见创建智能精炼。

图2 添加自定义算子