人工校准
您可以通过可视化标注界面,对数据集进行人工校准,并一键生成标准化数据集并同步至我的数据,供智能精炼等任务使用。
约束限制
- 人工校准仅支持文本生成SFT类型的数据集,且数据集格式为标准格式或ShareGPT格式。
- 一个IAM账号最大创建10个人工校准任务。
- 数据集样本数不能超过10000个。
创建人工校准
- 登录ModelArts管理控制台,在左侧导航栏选择“数据准备 > 数据精炼”。
- 在“人工校准”页签右上角,单击“创建”,在“创建人工校准”页面,配置相关信息,单击“确定”。
表1 创建人工校准参数说明 参数
说明
示例值
基本信息
名称
默认为data-calibration-年月日时分秒,您也可以自定义名称。支持大小写英文字母、数字、中划线、下划线及中文,长度限制为1~128位。
data-calibration-20261008174320
描述
自定义人工校准的描述。最大支持512个字符。
-
任务到期时间
最多可配置30天,人工校准任务到期后将无法操作,请在截止日期前完成。
2026/11/07 23:59:59
校准配置
标注类型
支持文本类型。
文本,文本生成 SFT
关联数据集
根据您所选择的校准场景,自动筛选可进行人工校准的我的数据集类型。单击卡片,选择前提条件已创建的数据集,单击“确定”。
标准格式
当人工校准任务状态变为“进行中”时,表示任务创建成功。
图1 人工校准创建成功
执行人工校准任务
通过可视化标注界面完成校准。支持修正标注错误、补充缺失标注,融合精准校验、批量核对功能,确保数据准确。
- 在“人工校准”页签,在状态为“进行中”的人工校准任务右侧,单击“标注”。
- 对问答对中的内容进行校对,单击“提交”。
- 内容不正确:按需修改不正确的内容。
- 内容无效:在页面右下角单击“无效数据”。设为无效数据后,标注内容将恢复为初始内容。
人工校准任务名称右侧会显示任务的进度。
图2 人工标注
- 标注完成后,在页面右上角,单击“退出”,在“退出标注”对话框,单击“确定”。
退出后,仅保存已提交的样本标注修改;未提交的标注修改将不会保存。当所有数据均标注后,任务状态会显示为“已完成”。
图3 人工校准任务完成
生成数据集
将校准结果汇总导出,整合校准数据。支持预览详情、校验完整性,一键生成标准化数据集并同步至我的数据,供后续使用。
- 在“人工校准”页签,单击人工校准任务右侧的“生成”。
- 在“生成数据集”面板,配置相关信息,单击“确定”。
表2 生成数据集参数说明 参数
说明
示例值
数据集名称
自定义数据集的名称。支持大小写英文字母、数字、中划线、下划线及中文,长度限制为1~128位。
dataset
输出数据内容
按需选择已标注数据、未标注数据、有效数据、无效数据。
已标注数据、有效数据
存储地址
支持选择“对象存储 OBS - 对象桶”或者“对象存储 OBS - 并行文件系统”。您可以单击
图标选择OBS存储地址或者手动输入存储地址。存储地址必须以“obs://”或者“/”开头,以“/”结尾,且除前缀外不得出现“//”,例如obs://bucketname/path/或者/bucketname/path/。其他人的共享桶路径仅支持手动输入。obs://bucketname/path/
数据集属性
单击
图标,可按需配置数据集的属性,例如行业、语言等。-
描述
自定义数据集的描述。最大长度不超过512个字符。
-
数据集状态
上线后的数据集才可被下游模型训练等作业任务调用。
- 打开“立即上线数据集”,生成数据集在“资产管理 > 数据 > 我的数据”页面为“已上线”状态,可以被下游模型训练等作业直接使用。
- 关闭“立即上线数据集”,生成数据集在“资产管理 > 数据 > 我的数据”页面为“未上线”状态,不可被下游模型训练等作业直接使用,需要手动上线数据集后才能使用。
打开“立即上线数据集”
- 在左侧导航栏,选择,单击“我的数据”页签,可以看到数据集及上线状态。更多信息,请参见我的数据。 图4 数据集已上线
查看人工校准任务详情
在“人工校准”页签,单击人工校准任务名称,可以查看校准任务详情,例如已完成校准的样本数、总样本数、总进度、校准任务的基本信息、关联的数据集、生成的数据集等。
删除人工校准任务
您可以删除不需要的人工校准任务。删除后,人工校准任务无法恢复,请谨慎操作。
- 在“人工校准”页签,单击人工校准任务名称右侧的“删除”。
- 在“删除人工校准任务”对话框,输入DELETE,单击“确定”。
常见问题
创建人工校准时,为什么关联数据集没有显示已创建的数据集?
人工校准仅支持文本生成SFT类型、且数据集格式为标准格式或ShareGPT格式的数据集。您创建的数据集可能不满足上述要求,因此未在关联数据集中显示。请创建符合要求的数据集,或通过智能精炼修改已有数据集的格式后重试。