更新时间:2025-01-05 GMT+08:00
分享

清洗图片类数据集

清洗图片类数据集任务前,请先完成数据导入操作,具体步骤请参见导入数据至盘古平台

创建图片类数据集清洗任务

创建图片类数据集清洗任务步骤如下:

  1. 登录ModelArts Studio大模型开发平台,在“我的空间”模块,单击进入所需空间。
  2. 在左侧导航栏中选择“数据工程 > 数据加工 > 数据清洗”,单击界面右上角“创建清洗任务”。
  3. 在“创建清洗任务”页面,选择需要清洗的图片类数据集,单击“下一步”。
  4. 进入“清洗步骤编排”页面。对于图片类数据集,可选择的清洗算子请参见表1
    1. 在左侧“添加算子”分页勾选所需算子。
    2. 在右侧“清洗步骤编排”页面配置各算子参数,可拖动右侧“”以调整算子执行顺序。
      图1 算子编排
    3. 在编排过程中,可单击右上角“保存为新模板”将当前编排流程保存为模板。后续创建新的数据清洗任务时,可直接单击“选择加工模板”进行使用。

      若选择使用加工模板,将删除当前已编排的清洗步骤。

      图2 选择加工模板
  5. 清洗步骤编排完成后,单击右下角“启动清洗”,将启动清洗任务。

    当数据清洗任务运行成功后,状态将从“运行中”变为“运行成功”,表示数据已经完成清洗。

在完成数据清洗后,如果无需使用数据标注功能,可直接在“数据清洗”页面单击操作列“生成”,生成加工数据集。

加工后的数据集可在“数据工程 > 数据加工 > 加工数据集”中查看。

相关文档