# 创建多模态大模型评测数据集
多模态大模型支持人工评测和基于大模型的评测，人工评测方式需要通过人工创建的评测数据集和评测指标项对模型生成的回答进行评测，评测时需要人工基于创建好的评测项对模型回答进行打分，评测完成后会基于打分结果生成评测报告。
创建多模态大模型的评测任务，需要用户在自己的obs桶中准备好数据。数据格式为图片存放目录+jsonl文件，目录结构如下：
图1目录结构   
![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002571207230.png)
其中jsonl文件内容格式为图片+QA对格式：
图2图片+QA对   
![](https://support.huaweicloud.com/usermanual-pangulm/zh-cn_image_0000002601726741.png)