创建文本类数据集评估任务

创建文本类数据集评估任务前，请先完成创建文本类数据集加工任务。

创建文本类数据集评估任务步骤如下：

1. 登录ModelArts Studio大模型开发平台，进入所需操作空间。
   图1 进入操作空间
   
2. 在左侧导航栏中选择“数据工程 > 数据评估 > 评估任务”，单击界面右上角“创建评估任务”。
   图2 创建评估任务
   
3. 在“数据集选择”页签选择需要进行评估的加工数据集，并设置抽样规格，即从数据集中抽取一定比例数据用于评估。
   图3 选择数据集
   
4. 单击“下一步”选择需要使用的评估标准。标准选择完成后，单击“下一步”设置评估人员。
   图4 选择评估标注
   
   图5 选择评估人员
   
5. 评估人员设置完成后，单击“下一步”填写任务名称。单击“完成创建”，将返回“评估任务”页面，创建成功后状态将显示为“已创建”状态。
6. 评估任务创建成功后，单击操作列“评估”进入评估页面。
   图6 评估数据集质量
   
7. 在评估页面，可参考评估项对当前数据的问题进行标注，且不满足时需要单击“不通过”，满足则单击“通过”。对于文本类数据集而言，可选择问题内容后，单击鼠标右键进行数据问题的标注。
   图7 标记数据集问题
   
8. 全部数据评估完成后，评估状态显示为“100%”，表示当前数据集已经评估完成，可以回退到“评估任务”页面，查看，单击操作列“报告”，获取数据集质量评估报告。