“是否绘图”请选择“是”，可以通过绘图查看模型的测试验证效果。 图3 异常检测模型测试 单击“异常检测模型测试”代码框左侧的图标。等待模型测试完成。 模型测试打印结果示例，如图4所示。截图仅为模型测试打印结果的一部分，具体以实际打印结果为准。 图中黑点是模型预测的异常点，红点是原始异常点。 图4 模型测试结果 父主题：

查看更多 →

模型测试效果会通过表格的形式在下方展示。 第一列内容的含义如下所示： 0.0：标注为0的所有样本。可以理解为标签。 1.0：标注为1的所有样本。可以理解为标签。 macro average：所有标签结果的平均值。 weighted average：所有标签结果的加权平均值。 第一行内容的含义如下所示，即模型优劣的评价指标：

查看更多 →

。 单击列表的“结果”按钮，可查看当前任务的所有测试结果（标粉红的结果为异常记录）。 单击结果列表的“详情”，可查看单条的结果详细信息。 单击结果详情-查看debug日志，可查看详细的执行记录。 结果告警功能 登录业务巡检平台。 单击顶部“功能测试”，进入自动化测试模块。 依次单

查看更多 →

正好映射了测试金字塔由下向上的各层，越下层的测试在越早的阶段执行，越上层的测试在越后的阶段执行。这类似于汽车制造流水线的各个环节，每个环节的组装结束后都会进行必要的检查通过才进入到下一个环节，在软件DevOps开发过程中Pipeline流水线承载了这样的组装、检查测试过程。 测试左移、测试右移

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

TestPlan接口脚本的逻辑控制步骤 设置CodeArts TestPlan接口脚本的测试用例参数 设置CodeArts TestPlan接口脚本的环境参数 导入CodeArts TestPlan接口自动化用例测试数据集 接口自动化用例内置函数说明 接口自动化用例系统关键字说明 父主题：

查看更多 →

高质量的重要课题。 测试是一种用来促进鉴定产品的正确性、完整性、安全性和质量的过程。测试是保障产品质量、提高产品可靠性的重要手段，在面对规模和复杂度不断提升的产品时，全场景、大规模、高并发等的测试服务平台已成为提升软件测试效率、质量的必备要素。 华为云为客户提供专属的测试自动化规

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

且输入输出长度也在一定范围内变化时，模型的延迟和吞吐。该场景能模拟实际业务下动态的发送不同长度请求，能评估推理框架在实际业务中能支持的并发数。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx.zip的llm_tools/llm_evaluation目录下。

查看更多 →

在导入页面选择需要导入的用例，单击“确定”执行导入操作。 1. 由于接口自动化中的部分组件，在性能自动化中不支持，因此导入的用例可能存在部分功能缺失的情况。导入后，缺失部分的功能包括：关键字、if判断、循环、分组、后置步骤、响应提取、除响应码以外的检查点类型、请求体中的文件类型、全局和

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

多模态模型推理性能测试 benchmark方法介绍 静态性能测试：评估在固定输入、固定输出和固定并发下，模型的吞吐与首token延迟。该方式实现简单，能比较清楚的看出模型的性能和输入输出长度、以及并发的关系。 性能benchmark验证使用到的脚本存放在代码包AscendCloud-LLM-xxx

查看更多 →

--device=Ascend 上述命令中：modelFile指定生成的mindir模型文件；device指定运行推理的设备。其他用法请参考benchmark文档。 测试结果如下所示： 图1 测试结果 父主题： 性能调优

查看更多 →

用例规范检查 测试计划服务支持对创建的接口自动化测试用例进行规范检查，根据检查结果对用例进行优化。详细的编写规范请参考测试用例编写规范。 此功能为您提供65天试用期，如果您想继续使用，后续需要开通测试计划专业版套餐或CodeArts专业版以上套餐来延续您的高阶体验 完成新建接口

查看更多 →

set, 1 warning (0.00 sec) ​ 基于TPCH 10 scale的数据，针对上述的查询示例Q1、Q2、Q3。开启与关闭LIMIT OFFSET下推功能的性能对比如下。 图1 性能对比 父主题： LIMIT OFFSET下推

查看更多 →

性能测试 性能测试是一种软件测试形式，通过性能测试工具模拟正常、峰值及异常负载等状态下对系统的各项性能指标进行测试的活动，它关注运行系统在特定负载下的性能，可帮助你评估系统负载在各种方案中的功能，涉及系统在负载下的响应时间、吞吐量、资源利用率和稳定性，以帮助确保系统性能满足基线要

查看更多 →

set, 1 warning (0.00 sec) ​ 基于TPCH 10 scale的数据，针对上述的查询示例Q1、Q2、Q3。开启与关闭LIMIT OFFSET下推功能的性能对比如下。 图1 性能对比 父主题： LIMIT OFFSET下推

查看更多 →

count(*) from sbtest1 where id/k in (... ...); 性能对比如下表所示： 表1 性能数据 测试方法 开启转换 关闭转换（不适用range_opt） 性能对比 带索引 0.09 2.48 提升26.5倍 父主题： IN谓词转子查询

查看更多 →

选填。自定义对于该用例的描述信息。 前提条件 选填。自定义输入执行该用例的前提条件。 手工测试步骤 选择。打开该开关则用例包含手动测试部分。 手动测试步骤描述 必填。输入该步骤的具体指定动作。可添加多条（手工测试步骤开关打开才有此功能）。 手动测试步骤预期结果 必填。输入该步骤执行后的预期结果

查看更多 →

组合”的文件夹中，查看已经保存的组合关键字。 场景2 参考设置接口关键字，将本案例中的测试步骤存储到关键字库的接口中。 在“关键字库 > 组合”的页面中，单击需要储存的对应文件夹旁边的。在页面中输入“组合关键字名称”、“描述”。 单击“接口”页签，选择需要添加的关键字所在的文件夹，单击需要添加的关键字右

查看更多 →