查看模型评测任务详情
在“模型评测”页面的评测任务列表,找到目标评测任务,单击任务名称,进入评测任务详情界面,可以查看该任务的模型评测详情和评测指标(单任务/任务集)、视频回放。
筛选评测任务
当前评测任务如果有多次运行记录,可以选择运行记录的流水号查看某次运行记录的任务详情。
模型评测详情和评测指标(单任务)
| 参数 | 说明 |
|---|---|
| 基础信息 | |
| 任务ID | 本次评测任务的任务ID。 单击 |
| 描述 | 本次任务的描述信息,通过此描述可以清晰了解任务目的、场景等信息。 |
| 创建时间 | 本次任务的创建时间。 |
| 评测对象 | |
| 模型 | 本次评测任务选择模型信息,包括模型名称、版本。 |
| 模型服务名称 | 本次评测任务选择已部署模型服务。 |
| 模型服务ID | 本次评测任务选择已部署模型服务ID。 单击 |
| 评测配置 | |
| 评测类型 | 本次任务选择“单任务”。 |
| 任务场景资产 | 本次任务选择的评测仿真资产,即仿真场景。 |
| 评测次数 | 本次任务的模型评测次数。 |
| 超时时长(秒) | 本次任务可以超出的时长。 |
| 评测结果保存路径 | 本次任务的评测结果(保存的视频、日志文件等)保存路径。 单击 |
| 回放视频保存设置 | 本次任务是否已配置回放视频保存设置。 如果已配置,鼠标移至该参数处会显示设置名称。 图4 回放视频保存设置示例 |
| 成功采样比例 | 本次任务回放视频保存设置选择“执行成功-标准耗时”时设置的成功采样比例。 |
| 评测种子值 | 本次任务的评测种子值,场景随机化的确定性因子,用于可复现的场景随机化。 |
| 资源配置 | |
| 资源池 | 本次任务的资源池类型,支持“公共资源池”和“专属资源池”。 |
| 开发环境 |
|
| 开发环境OBS挂载路径 |
|
| 任务自动停止 |
|
| 启动方式 | 本次任务的启动方式,分为“自动启动”和“手动启动”。 当选择“专属资源池”且勾选“开发环境”时,仅支持手动启动方式。 |
按照图标展示评测执行成功率、评测执行时间。
| 参数 | 说明 |
|---|---|
| 评测执行成功率 | 本次任务的模型评测成功率(成功次数/总次数)。 |
| 评测执行时间 | 本次任务的评测时间(秒),主要分为执行成功最大时间、执行成功最小时间、执行成功平均时间、总执行时间。 |
模型评测详情和评测指标(任务集)
| 参数 | 说明 |
|---|---|
| 基础信息 | |
| 任务ID | 本次评测任务的任务ID。 单击 |
| 描述 | 本次任务的描述信息,通过此描述可以清晰了解任务目的、场景等信息。 |
| 创建时间 | 本次任务的创建时间。 |
| 评测对象 | |
| 模型 | 本次评测任务选择模型信息,包括模型名称、版本。 |
| 模型服务名称 | 本次评测任务选择已部署模型服务。 |
| 模型服务ID | 本次评测任务选择已部署模型服务ID。 单击 |
| 评测配置 | |
| 评测类型 | 本次任务选择“任务集”。 |
| 任务类型 | 本次任务的任务类型,目前仅支持Libero。 |
| 任务套件 | 本次任务选择Libero任务套件。 |
| 参数配置 | 本次任务的配置参数。 如果已配置,鼠标移至该参数处会显示参数配置详情。 图7 参数配置示例 |
| 评测结果保存路径 | 本次任务的评测结果(保存的视频、日志文件等)保存路径。 单击 |
| 资源配置 | |
| 资源池 | 本次任务的资源池类型,支持“公共资源池”和“专属资源池”。 |
| 参数 | 说明 |
|---|---|
| 总体成功率 | 本次任务的总体成功率(成功次数/任务总次数)。 |
| 分套件成功率 | 本次任务分套件的成功率(成功次数/总次数)。 |
| 任务指标 | 按照列表展示分套件的子任务评测回合、成功率等信息。 |
视频回放
在视频回放区域会显示与评测次数一致的回放视频,并显示本次测评成功/失败,还可以在线播放/下载视频。







