
# 标注文本类数据集
 #### 创建文本类数据集标注任务
标注文本类数据集任务前，请先完成数据导入操作，具体步骤请参见[导入数据至盘古平台](https://support.huaweicloud.com/usermanual-pangulm/pangulm_04_0025.html)。
数据标注功能支持创建标注任务、标注数据集（标注作业）、审核标注后的数据集（审核作业）与管理标注任务（任务管理）。其中，不同角色权限支持的功能及展示的前端界面略有差异，详见[表1]。
 表1不同角色支持的数据标注任务权限清单 
| 角色名称  | 创建标注任务 | 标注作业任务 | 审核作业任务 | 任务管理任务 |
|:---|:---|:---|:---|:---|
| 超级管理员 | **√**  | **√**  | -      | **√**  |
| 管理员   | **√**  | **√**  | -      | **√**  |
| 标注管理员 | **√**  | **√**  | -      | **√**  |
| 标注作业员 | -      | **√**  | -      | -      |
| 标注审核员 | -      | -      | **√**  | -      |
   
**创建文本类数据集标注任务步骤如下：**
1. 登录ModelArts Studio大模型开发平台，在"我的空间"模块，单击进入所需空间。
   图1我的空间   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601726699.png) 
2. 在左侧导航栏中选择"数据工程 \> 数据加工 \> 标注任务"，单击页面右上角"创建标注任务"。
3. 在"创建标注任务"页面选择需要标注的文本类数据集，并选择标注项。选择标注项时，不同类型的数据文件对应的标注项有所差异，可基于页面提示进行选择。 其中，"单轮问答"标注项支持"AI辅助标注"功能。
   图2创建标注任务   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601606721.png)
   ![](https://support.huaweicloud.com/usermanual-pangulm/public_sys-resources/note_3.0-zh-cn.png)
   开启使用AI辅助标注前，请确保有已部署的NLP大模型，具体步骤详见[创建NLP大模型部署任务](https://support.huaweicloud.com/usermanual-pangulm/pangulm_04_0176.html)。
   
4. 可选择开启"多人作业"功能，开启后，可选择多人协同完成作业，并增加审核功能可供选择。参考[表2]配置标注分配与审核。
    表2标注分配与审核配置 
   | 参数类型 | 参数名称 | 参数说明                                                                                                                                                                                                                                                                                   |
   |:---|:---|:---|
   | 标注分配 | 标注员  | 添加标注人员与数量。                                                                                                                                                                                                                                                                             |
   | 标注审核 | 是否审核 | - 否，标注后不进行审核操作。  - 是，审核员会检查标注员的标注内容，若发现问题，审核员可注明原因并驳回标注数据，标注员需重新标注。                                       |
   | 标注审核 | 审核员  | 添加审核人员与数量。                                                                                                                                                                                                                                                                             |
   | 标注审核 | 审核要求 | - 全部审核：要求审核员对全部数据，逐条进行人工审核，才能完成审核任务。  - 可部分审核：审核员在审核一部分数据后，发现标注质量均很高，则可以一键提交剩余待审核数据，默认审核通过，即可完成审核任务。   |
      
   
5. 配置完成后，单击"完成创建"。
6. 在"标注任务"页面，单击当前标注任务操作列的"作业"，可执行标注作业任务。 其中，对于"标注作业员"角色，可单击"标注"执行标注作业任务。
   如果需要将该标注任务移交给其他人员，可以单击"移交"，并设置移交人员以及移交数量，单击"确定"。
   
7. 进入标注页面后，逐一对数据进行标注。 如[图3]，以标注单轮问答数据为例，需要逐一确认问题（Q）及答案（A）是否正确，如果问题或答案不正确，可以对其进行二次编辑。并且支持MarkDown格式内容编辑和预览。
   图3文本类数据集标注示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571047542.png)
   图4文本类数据集标注示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601726685.png)
   图5文本类数据集标注示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601606709.png)
   图6文本类数据集标注示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207166.png)
   图7文本类数据集标注示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207174.png)
   
   
8. 一条数据标注完成后，单击"提交"可继续标注剩余数据。所有数据标注完成后，页面会出现标注任务成功的提示。
![](https://support.huaweicloud.com/usermanual-pangulm/public_sys-resources/note_3.0-zh-cn.png)
在完成数据标注后，如果无需进行标注审核，可直接在"标注任务 \> 任务管理"页签单击"生成"，生成加工数据集。
生成的加工数据集可在"数据工程 \> 数据管理 \> 数据集 \> 加工数据集"中查看。
#### AI辅助功能介绍
标注任务中，标注员对单条数据可选择地执行标注数据的智能生成，具体操作如下。
1. 在"创建标注任务"页面，选择数据集、开启AI辅助并选择模型后单击"完成创建"。 
   图8AI辅助功能   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571047548.png)
   
   
2. 在"标注任务"页面，单击任务名称对应操作列的"作业"，可进入标注界面。 
   图9标注任务   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571047550.png)
   
   
3. 单击"设置"按钮，修改AI标注模型后单击"确定"。 
   图10设置   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601606725.png)
   
   
4. 单击"重新生成"，生成新的答案。 
   图11重新生成   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571047528.png)
   
   
5. 单击"一键应用"，重新生成的内容将会被显示在答案框里。 
   图12一键应用   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601726683.png)
   
   
 
#### 审核标注后的文本类数据集
如果在[创建文本类数据集标注任务]时启用了标注审核功能，则在完成标注后可以审核标注结果。对于审核不合格的数据可以填写不合格原因并驳回给标注员重新标注。
该操作需要具备**标注审核员**角色权限。
审核文本类数据集标注结果的步骤如下：
1. 登录ModelArts Studio平台，在"我的空间"模块，单击进入所需空间。
   图13我的空间   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601726667.png) 
2. 在左侧导航栏中选择"数据工程 \> 数据加工 \> 标注任务"。
3. 单击"审核"可进入审核页面审核数据。 如果需要将该审核任务移交给其他人员，可以单击"移交"，并设置移交人员以及移交数量，单击"确定"。
   
4. 进入审核页面后，可通过单击"通过"或"不通过"逐一对数据进行审核，直至所有数据审核完成。
![](https://support.huaweicloud.com/usermanual-pangulm/public_sys-resources/note_3.0-zh-cn.png)
在完成数据标注审核后，需在"数据工程 \> 标注任务"页面单击"生成"，生成加工数据集。
生成后的加工数据集可在"数据工程 \> 数据管理 \> 数据集 \> 加工数据集"中查看。
#### 管理标注后的文本类数据集
平台支持超级管理员、管理员、标注管理员对标注的数据集进行如下操作：
- 生成：在完成数据标注审核后，需超级管理员、管理员、标注管理员角色在"标注任务"页面的操作列单击"生成"，生成加工数据集。 生成后的加工数据集可在"数据工程 \> 数据管理 \> 数据集 \> 加工数据集"中查看。
  
- 结束：管理员角色可在"标注任务"页面的操作列单击"更多 \> 结束"，结束当前标注任务。
- 编辑：如果该标注任务支持"AI辅助标注"和"审核"功能，管理员角色可在"标注任务"页面的操作列单击"更多 \> 编辑"，选择是否开启"AI辅助标注"功能并选择"审核要求"。
- 删除：管理员角色可在"标注任务"页面的操作列单击"更多 \> 删除"，删除当前标注任务。
 
