“是否绘图”请选择“是”，可以通过绘图查看模型的测试验证效果。 图3 异常检测模型测试 单击“异常检测模型测试”代码框左侧的图标。等待模型测试完成。 模型测试打印结果示例，如图4所示。截图仅为模型测试打印结果的一部分，具体以实际打印结果为准。 图中黑点是模型预测的异常点，红点是原始异常点。 图4 模型测试结果 父主题：

查看更多 →

模型测试效果会通过表格的形式在下方展示。 第一列内容的含义如下所示： 0.0：标注为0的所有样本。可以理解为标签。 1.0：标注为1的所有样本。可以理解为标签。 macro average：所有标签结果的平均值。 weighted average：所有标签结果的加权平均值。 第一行内容的含义如下所示，即模型优劣的评价指标：

查看更多 →

。 单击列表的“结果”按钮，可查看当前任务的所有测试结果（标粉红的结果为异常记录）。 单击结果列表的“详情”，可查看单条的结果详细信息。 单击结果详情-查看debug日志，可查看详细的执行记录。 结果告警功能 登录业务巡检平台。 单击顶部“功能测试”，进入自动化测试模块。 依次单

查看更多 →

正好映射了测试金字塔由下向上的各层，越下层的测试在越早的阶段执行，越上层的测试在越后的阶段执行。这类似于汽车制造流水线的各个环节，每个环节的组装结束后都会进行必要的检查通过才进入到下一个环节，在软件DevOps开发过程中Pipeline流水线承载了这样的组装、检查测试过程。 测试左移、测试右移

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

高质量的重要课题。 测试是一种用来促进鉴定产品的正确性、完整性、安全性和质量的过程。测试是保障产品质量、提高产品可靠性的重要手段，在面对规模和复杂度不断提升的产品时，全场景、大规模、高并发等的测试服务平台已成为提升软件测试效率、质量的必备要素。 华为云为客户提供专属的测试自动化规

查看更多 →

一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 benchmark代码目录 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_

查看更多 →

TestPlan接口脚本的逻辑控制步骤 设置CodeArts TestPlan接口脚本的测试用例参数 设置CodeArts TestPlan接口脚本的环境参数 导入CodeArts TestPlan接口自动化用例测试数据集 接口自动化用例内置函数说明 接口自动化用例系统关键字说明 父主题：

查看更多 →

一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 benchmark代码目录 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

联营测试中有的性能自动化用例没有在测试总结里显示。 从模板加载来的性能自动化用例的名称只能修改”XXX”部分，其他的文字不能改动，这样自动生成测试总结的时候才能被识别到。 父主题： 验证中心

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

多模态模型推理性能测试 多模态模型推理的性能测试目前仅支持静态性能测试。 静态性能测试是指评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代

查看更多 →

1. 由于接口自动化中的部分组件，在性能自动化中不支持，因此导入的用例可能存在部分功能缺失的情况。导入后，缺失部分的功能包括：关键字、if判断、循环、分组、后置步骤、响应提取、除响应码以外的检查点类型、请求体中的文件类型、全局和局部变量，以及HEAD、OPTION的请求类型。 2

查看更多 →

多模态模型推理性能测试 多模态模型推理的性能测试目前仅支持静态性能测试。 静态性能测试是指评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

人。 自动化部署对接 接入类型为License类的联营商品，则必须对接自动化部署；其他接入类型，暂不需对接自动化部署。对接成功后，商品将支持：客户可一键购买及开通商品部署所依赖的云资源，结合商家的自动部署脚本可实现应用软件商品的一键自动部署能力。自动化部署能力可提升用户的购买、使

查看更多 →

--device=Ascend 上述命令中：modelFile指定生成的mindir模型文件；device指定运行推理的设备。其他用法请参考benchmark文档。 测试结果如下所示： 图1 测试结果 父主题： 性能调优

查看更多 →

建手工测试用例。 用例规范检查 测试计划服务支持对创建的接口自动化测试用例进行规范检查，根据检查结果对用例进行优化。详细的编写规范请参考测试用例编写规范。 此功能为您提供65天试用期，如果您想继续使用，后续需要开通测试计划专业版套餐或CodeArts专业版以上套餐来延续您的高阶体验

查看更多 →