更新时间:2024-10-16 GMT+08:00
分享

创建提示词评估数据集

批量评估提示词效果前,需要先上传提示词变量数据文件用于创建对应的评估数据集。

提示词变量是一种可以在文本生成中动态替换的占位符,用于根据不同的场景或用户输入生成不同的内容。其中,变量名称可以是任意的文字,用于描述变量的含义或作用。

提示词评估数据集约束限制

  • 上传文件限xlsx格式。
  • 数据行数不小于10行,不大于50行。
  • 数据不允许相同表头,表头数量小于20个。
  • 数据单条文本长度不超过1000。

    创建数据集时会对相关限制条件进行校验。

数据参考格式

图1 数据参考格式
图2 数据示例

创建提示词评估数据集

  1. 登录盘古大模型套件平台。
  2. 在左侧导航栏中选择“数据工程 > 提示用例管理”。
    图3 提示用例管理
  3. 单击页面右上角“创建提示用例集”,进入创建弹窗。
  4. 单击存储位置最右侧的图标,选择数据集文件所对应的obs路径,然后输入数据集名称、描述,创建数据集。
    创建数据集前,请先将数据上传至OBS。
    图4 创建数据集

相关文档