更新时间:2025-03-10 GMT+08:00
分享

步骤三:创建评测

Octopus支持自定义内置评测配置和自定义评测镜像,并根据评测指标或评测镜像对仿真算法开展评测。

本节以创建内置评测配置为例。

创建内置评测配置

  1. 在左侧菜单栏中单击“仿真服务 > 评测管理”。
  2. 单击“新建评测”,填写基本信息。

    • 评测名称:只能包含数字、英文、中文、下划线、中划线,不得超过64个字符。
    • 评测描述:不得包含“@#$%^&*< > \”特殊字符,不得超过255个字符。
    • 评测类型:选择“内置评测配置”。
    • 评测模式:选择“实时评测”和“延时评测”。

  3. 以上信息填写无误后,单击“确认”。仿真评测创建成功。

编辑评测指标

评测类型为内置评测配置时,可为评测添加或删除评测指标,便于管理。

  1. 单击评测名称,在评测项目详情页,自定义评测配置部分,单击“编辑”。
  2. 单击“添加评测指标”,选择需要添加的指标,单击“确认”。
  3. 设置指标的阈值和重要度。

    • 阈值设置:单击“阈值设置”列中的编辑按钮,可设置对应阈值。部分指标支持设置阈值,请以界面展示为准。
    • 重要度:在“重要度”列选择主要或次要。

  4. 设置评分方案。

    可选主要次要log函数、主要次要均匀权重、全部均匀权重。

  5. 删除评测指标。

    单击评测指标“操作”列内的“删除”,删除该评测指标。

    被任务使用的评测项目和镜像不能删除。

  6. 以上信息选择无误后,单击“保存”,评测指标编辑完成。

相关文档