# 发布图片类数据集
数据发布是将数据集发布为特定格式的"发布数据集"的过程，用于后续模型训练等操作。
**图片类数据集支持发布的格式为：**
- **标准格式：** 如[图1]，平台默认的格式。该格式的数据集不能应用于盘古大模型的模型开发中，但可以发布为资产。
  图1图片类数据集标准格式示例   
  ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571047862.png) 
- **盘古格式：** 如[图2]，训练盘古大模型时，需要发布为该格式，可以用于盘古大模型的模型开发。当前仅文本类、图片类数据集支持发布为盘古格式。
  图2图片类数据集盘古格式示例   
  ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601607045.png) 
#### 创建图片类数据集发布任务
创建图片类数据集发布任务步骤如下：
1. 登录ModelArts Studio大模型开发平台，在"我的空间"模块，单击进入所需空间。
   图3我的空间   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207502.png) 
2. 在左侧导航栏中选择"数据工程 \> 数据发布 \> 发布任务"，单击界面右上角"创建发布任务"。
3. 在"创建发布任务"页面，筛选数据集模态，如"图片 "类型的数据集。
   图4筛选数据集模态
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601727005.png)
   
   
4. 选择数据集，单击"下一步"。
5. 在"基本配置"中选择数据用途、数据集可见性。 由于数据工程需要支持对接盘古大模型，为了使这些数据集能够被这些大模型正常训练，平台支持发布不同格式的数据集。
   当前支持标准格式、盘古格式：
   - **标准格式**：数据工程功能支持的原始格式。该格式的数据集可发布到资产中，但下游模型开发不可见。
   
   - **盘古格式**：使用盘古大模型训练时所需要使用的数据格式，该数据集将被用于ModelArts Studio大模型开发平台的模型开发中使用。
    
   ![](https://support.huaweicloud.com/usermanual-pangulm/public_sys-resources/note_3.0-zh-cn.png)
   如果使用该数据集训练盘古大模型，请将发布格式配置为**盘古格式**。
   
6. 根据数据集是否进行拆分，勾选"数据集拆分"。如勾选，设置好训练集和验证集的比例，如[图5]所示：
   图5数据集拆分示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207500.png) 
7. 填写数据集名称、描述，设置扩展信息后，单击"确定"执行数据集发布操作。 当任务状态显示为"运行成功"时，说明数据发布任务执行成功，生成的"发布数据集"可在"数据工程 \> 数据管理 \> 数据集 \> 发布数据集"中查看。
   
8. 单击任务id，可以查看发布任务详情。发布任务详情界面包含"基本信息"和"日志管理"2个tab页，其中基本信息又包含"任务详情"、"配置信息"、"数据来源"、"生成数据集"几个部分。在"生成数据集"表格的记录数列中，展示训练集和验证集各自的数量，如[图7]所示。
   图6查看任务详情   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601607053.png)
   图7生成数据集表格示例   
   ![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207498.png)