CN115964301B - 一种消费机的应用测试方法及系统 - Google Patents
一种消费机的应用测试方法及系统 Download PDFInfo
- Publication number
- CN115964301B CN115964301B CN202310032437.2A CN202310032437A CN115964301B CN 115964301 B CN115964301 B CN 115964301B CN 202310032437 A CN202310032437 A CN 202310032437A CN 115964301 B CN115964301 B CN 115964301B
- Authority
- CN
- China
- Prior art keywords
- test
- simulation
- configuration
- result
- network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Test And Diagnosis Of Digital Computers (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种消费机的应用测试方法及系统,运用于测试数据处理领域;本发明通过模拟生成测试对象、服务对象与测试应用场景,配置相应的链路向测试服务器上传测试请求,获取到测试回返的网络应用请求后,应用模拟生成的测试数据进行应用测试,根据测试报告与测试服务端的比对结果,识别测试过程中存在的异常数据集,通过聚类算法清洗异类数据集后,重新进行测试并生成测试结果,完成应用测试过程;通过测试能够有效提高设备在出厂前保证整机质量和寿命,降低了设备在出厂后出现缺陷的概率。
Description
技术领域
本发明涉及测试数据处理领域,特别涉及为一种消费机的应用测试方法及系统。
背景技术
随着国家越来越重视教育信息化建设,学校也加大了对校园信息化、智能化的投入并推出智慧校园、智慧食堂,而消费机的使用正是智慧食堂里的一个缩影,在消费机上刷卡或扫码支付后取餐不仅能提高食堂效率、减少交易出错概率,同时也可以科学准确的统计消费和库存数据,减少浪费,随着校园信息化的建设,消费机也会越来越普及。
为了在设备出厂前保证整机质量和寿命,使得设备出厂后用户能够拥有更良好的体验,因此如何降低设备在出厂后出现缺陷的概率,从出厂质量保证到终端用户使用前碰到问题进行现场排查正是该发明的初衷。
发明内容
本发明旨在解决降低消费机备在出厂后出现缺陷的概率问题,提供一种消费机的应用测试方法及系统。
本发明为解决技术问题采用如下技术手段:
本发明提供一种消费机的应用测试方法,包括以下步骤:
基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景;
针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法。
进一步地,所述基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景的步骤中,包括:
采用轻量虚拟化技术,创建至少一个或多个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
根据所述配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化。
进一步地,所述针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求的步骤中,包括:
获取测试网络的配置文件,并获取各端口的配置信息,基于所述配置文件和所述配置信息构建测试数据库;
解析所述配置文件,获取各端口之间配置的链路,构建端口连接关系矩阵;
构建所述端口连接关系矩阵时,基于所述配置文件的数量对应添加配置策略,调取所述端口连接关系矩阵中的数据流,其中,所述配置策略包括数据包协议策略、网络传输策略和网络负载策略;
针对所述测试数据库、所述端口连接关系矩阵和所述数据流,生成测试完毕的预期结果。
进一步地,所述获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告的步骤中,包括:
创建并提交所述测试场景对应的测试任务至所述预设服务端;
接收到所述预设服务端发布的测试指令后,分配所述模拟测试对象和所述模拟服务对象对应的测试服务ip及测试端口,基于所述测试服务ip及所述测试端口动态设置对应的配置脚本;
输入所述测试任务对应的脚本地址,通过导入所述配置脚本至所述脚本地址中,并通过预设脚本命令执行所述测试指令。
进一步地,所述将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求的步骤中,包括:
获取所述预期结果中的配置操作;
判断所述测试报告是否匹配所述配置操作;
若否,则判定所述测试报告中存在与所述预期结果差异的误差结果,所述比对结果无法达到所述预设要求。
进一步地,所述则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果的步骤中,包括:
检测所述测试结果的仿真完成信号,其中,所述仿真完成信号包括本地仿真或云端仿真;
判断所述仿真完成信号是否采集成功;
若是,则针对所述测试结果的仿真完成信号,将所述仿真完成信号对应的仿真结果保存到本地或云端,并获取测试过程的仿真环境。
进一步地,所述则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果的步骤中,包括:
获取初始测试样本集,其中,所述初始测试样本集包括测试数据和所述测试数据的对应标注;
确定所述初始测试样本集对应的聚类算法,将所述对应标注作为簇数,利用所述聚类算法,对所述测试数据进行聚类以生成聚类结果,其中,所述聚类结果中包括所述测试数据的对应标签,每个簇数中包括多个测试数据样本;
选取所述聚类结果中的每个对应标注与所述对应标签不一致的测试数据,确认为异常测试数据样本。
本发明还提供一种消费机的应用测试系统,包括:
生成模块,用于基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景;
测试模块,用于针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
判断模块,用于将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
执行模块,用于若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
第二执行模块,用于若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法。
进一步地,所述生成模块还包括:
创建单元,用于采用轻量虚拟化技术,创建至少一个或多个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
建立单元,用于根据所述配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
验证单元,用于在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化。
进一步地,所述测试模块还包括:
获取单元,用于获取测试网络的配置文件,并获取各端口的配置信息,基于所述配置文件和所述配置信息构建测试数据库;
构建单元,用于解析所述配置文件,获取各端口之间配置的链路,构建端口连接关系矩阵;
调取单元,用于构建所述端口连接关系矩阵时,基于所述配置文件的数量对应添加配置策略,调取所述端口连接关系矩阵中的数据流,其中,所述配置策略包括数据包协议策略、网络传输策略和网络负载策略;
生成单元,用于针对所述测试数据库、所述端口连接关系矩阵和所述数据流,生成测试完毕的预期结果。
本发明提供了一种消费机的应用测试方法及系统,具有以下有益效果:
本发明通过模拟生成测试对象、服务对象与测试应用场景,配置相应的链路向测试服务器上传测试请求,获取到测试回返的网络应用请求后,应用模拟生成的测试数据进行应用测试,根据测试报告与测试服务端的比对结果,识别测试过程中存在的异常数据集,通过聚类算法清洗异类数据集后,重新进行测试并生成测试结果,完成应用测试过程;通过测试能够有效提高设备在出厂前保证整机质量和寿命,降低了设备在出厂后出现缺陷的概率。
附图说明
图1为本发明一种消费机的应用测试方法一个实施例的流程示意图;
图2为本发明一种消费机的应用测试系统一个实施例的结构框图。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明,本发明为目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
下面将结合本发明的实施例中的附图,对本发明的实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参考附图1,为本发明一实施例中的一种消费机的应用测试方法,包括:
S1:基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景;
S2:针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
S3:将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
S4:若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
S5:若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法。
在本实施例中,系统基于需要测试的应用类型生成模拟测试对象与模拟服务对象,根据模拟测试对象和模拟服务对象在预先设定有的测试模板中选中对应的测试类型,以生成对应的测试场景(例如,模拟测试对象为学生群体,模拟服务对象为校园群体,则对应需要选取的测试类型即为智慧取餐消费机,对应的测试场景为智慧食堂);系统通过针对这些模拟测试对象、模拟服务对象和测试场景,构建至少一条或多条配置链路(例如测试场景为智慧食堂时,基于智慧取餐消费机之间的数据交换能力,构建相应条数的配置链路,如智慧取餐消费机的数量为1台,则对应的配置链路为1条;智慧取餐消费机的数量为2台,则对应的配置链路为2条),通过配置链路向预先设有的测试服务端上传关于模拟测试对象的相关信息和模拟服务对象的相关信息(相关信息包括模拟测试对象的模拟身份信息、模拟支付信息与模拟服务对象的模拟身份信息、模拟收款信息),而后获取到测试服务端回返的网络应用请求(网络应用请求用以:向测试服务端请求获取测试资源,提高模拟测试信息,得到测试允许指令后即可进行测试),应用该网络应用请求即可对模拟测试对象和模拟服务对象进行测试,以生成与测试类型相应的测试报告;系统将测试报告的内容与测试服务端预先设有的预期结果进行差异性比对,生成比对结果后判断该比对结果是否达到测试服务端预先设定的测试要求,以执行对应的步骤;例如,系统判定到比对结果能够达到测试服务端设定的测试要求,则此时系统会基于测试报告中的预测试内容进行测试,生成相应的测试结果;例如,系统判定到比对结果无法达到测试服务端预先设有的预期结果,则此时系统会判定到测试报告中存在有异常测试数据集,导致测试无法按预期完成,此时系统会应用预先设有的一种或多种聚类算法对测试报告中的初始测试数据集进行数据清洗,去除初始测试数据集中的异常数据集,以生成测试数据集,而后应用测试数据集根据模拟测试对象、模拟服务对象与测试场景进行测试,生成清洗测试结果。
在本实施例中,基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景的步骤中,包括:
采用轻量虚拟化技术,创建至少一个或多个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
根据所述配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化。
在本实施例中,系统利用计算虚拟化技术,将物理测试服务器的硬件资源分配成了多台虚拟计算机,而且,利用网络虚拟化技术,在物理测试服务器中虚拟出虚拟网络交换机,并实现虚拟计算机之间及其与外部物理计算机的网络连接,因此,仅用测试物理服务器就可创建一套模拟机系统运行的硬件和网络环境,从而实现模拟机软件的部署、运行及测试;相比传统方式中需要多台计算机才能搭建的模拟机测试环境,极大节省测试平台所需的设备与配置数量,节约了运行成本和测试成本,提高了测试效率。
在本实施例中,针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求的步骤中,包括:
获取测试网络的配置文件,并获取各端口的配置信息,基于所述配置文件和所述配置信息构建测试数据库;
解析所述配置文件,获取各端口之间配置的链路,构建端口连接关系矩阵;
构建所述端口连接关系矩阵时,基于所述配置文件的数量对应添加配置策略,调取所述端口连接关系矩阵中的数据流,其中,所述配置策略包括数据包协议策略、网络传输策略和网络负载策略;
针对所述测试数据库、所述端口连接关系矩阵和所述数据流,生成测试完毕的预期结果。
在本实施例中,系统通过获取测试网络的配置文件和各个计算机端口的配置信息,基于这些配置文件和配置信息构建临时进行应用测试的测试数据库,而后系统解析配置文件,获取到各个计算机端口之间配置的链路与链路关系,以构建属于计算机端口连接关系的关系矩阵(如:在一个支持VLAN特性的交换网络中,把交换机与终端计算机直接相连的链路称为Access链路;在一条Access链路上运动的帧只能是不带标签的帧,而且这些帧只能属于某个特定的VLAN,并存在于一个关系矩阵中),构建端口连接关系矩阵时,基于配置文件的数量对应添加配置策略(包括数据包协议策略、网络传输策略和网络负载策略),同一应用通常需要部署到多个环境中进行运行测试,每个测试针对各个部署环境需要编辑不同的环境配置文件,因此通过根据配置文件添加对应的配置策略,并确定该应用软件的待配置环境,以针对待配置环境生成环境配置文件,同时调取关系矩阵中存在的数据流,在数据流配置文件之间查看数据的能力,使得确定异常数据值、查看转换更改列值的方式以及发现转换失败的原因变得更加轻松;最后系统针对临时测试数据库、端口连接关系矩阵与数据流,以生成测试服务端测试完毕的预期结果。
在本实施例中,获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告的步骤中,包括:
创建并提交所述测试场景对应的测试任务至所述预设服务端;
接收到所述预设服务端发布的测试指令后,分配所述模拟测试对象和所述模拟服务对象对应的测试服务ip及测试端口,基于所述测试服务ip及所述测试端口动态设置对应的配置脚本;
输入所述测试任务对应的脚本地址,通过导入所述配置脚本至所述脚本地址中,并通过预设脚本命令执行所述测试指令。
在本实施例中,系统通过创建并提交与测试场景相应的测试任务至测试服务端后,能够接收到测试服务端发布的测试指令,根据该测试指令即可分配模拟测试对象与模拟服务对象相应的临时测试服务ip及其测试端口,基于该临时测试服务ip及其测试端口,动态设置对应的配置脚本(由于系统启动过程中会按照一定的规则读取配置文件信息,配置文件的信息里面记录了sqlmap的namespace和sql脚本文件的对应关系,一旦加载之后会从内存中将该条对应记录删除,因此为了避免重复加载造成系统异常,测试服务ip及其测试端口会动态调整设置自身的配置脚本),系统输入测试任务对应的脚本地址后,通过导入动态设置好的配置脚本至对应的脚本地址中,预先设置好的脚本命令就会基于测试服务ip及其测试端口,执行相应的测试指令。
在本实施例中,将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求的步骤中,包括:
获取所述预期结果中的配置操作;
判断所述测试报告是否匹配所述配置操作;
若否,则判定所述测试报告中存在与所述预期结果差异的误差结果,所述比对结果无法达到所述预设要求。
在本实施例中,系统通过获取测试服务端预期结果中的配置操作,判断该配置操作是否存在预先设定有的缺陷,以执行对应的步骤;例如,系统获取到测试报告中存在测试过程无法正常完成的问题,而预期结果中的配置操作不存在测试过程无法正常完成的问题,则此时系统会判定测试报告无法匹配预期结果中的配置操作,此时系统会根据测试报告与配置操作存在的误差结果,对测试数据集中相应的数据集进行识别搜索;例如,系统获取到测试报告中不存在与预期结果的配置操作相应的问题,则此时系统会判定测试报告能够匹配预期结果中的配置操作,系统会根据测试报告中的完整测试过程,正常生成测试结果。
在本实施例中,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果的步骤中,包括:
检测所述测试结果的仿真完成信号,其中,所述仿真完成信号包括本地仿真或云端仿真;
判断所述仿真完成信号是否采集成功;
若是,则针对所述测试结果的仿真完成信号,将所述仿真完成信号对应的仿真结果保存到本地或云端,并获取测试过程的仿真环境。
在本实施例中,系统通过检测测试结果中设定好的仿真完成信号,判断该仿真完成信号是否采集成功,以执行对应的不同步骤;例如,系统无法检测到测试结果设定好的仿真完成信号,则此时系统会判定仿真完成信号采集失败,即代表系统此时会判定测试结果并未被系统收录,测试结果可能因为网络干扰而被影响,需要重新检测仿真完成信号;例如,系统检测到测试结果的仿真完成信号被成功采集,则此时系统会针对仿真完成信号将对应的仿真结果保存至本地或云端,并获取到测试过程的仿真环境,当本地测试结束后,所有的测试结果会自动记录在本地文件或者云端中,可以根据需求将本地文件合并入仿真结果数据库,理论上本地测试的仿真结果在格式和内容上应与测试结果数据库的文件兼容,以方便测试数据的管理。
在本实施例中,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果的步骤中,包括:
获取初始测试样本集,其中,所述初始测试样本集包括测试数据和所述测试数据的对应标注;
确定所述初始测试样本集对应的聚类算法,将所述对应标注作为簇数,利用所述聚类算法,对所述测试数据进行聚类以生成聚类结果,其中,所述聚类结果中包括所述测试数据的对应标签,每个簇数中包括多个测试数据样本;
选取所述聚类结果中的每个对应标注与所述对应标签不一致的测试数据,确认为异常测试数据样本。
在本实施例中,系统通过获取初始测试样本集后,确认清洗初始测试样本集所对应需要的聚类算法,并将测试数据的对应标注作为簇数,利用聚类算法对测试数据进行聚类以生成聚类结果,继而从聚类结果中得到各个带有对应标注的测试数据,选取聚类结果中与对应标签不一致的测试数据作为异常测试数据样本(例如,计算机需要测试识别茶杯,首先需要准备多个茶杯颜色的测试训练集,然后把测试训练集输入至计算机中,训练电脑从测试训练集的多个测试样本中识别出所需要的茶杯颜色,计算机识别到茶杯颜色后认为它不是所需颜色,但识别到期望结果是茶杯,计算机则会从同个测试训练集中搜寻其他测试样本,直至测试出茶杯颜色为所需颜色后,即可选取得出测试训练集中的异常测试数据样本,即除了所需茶杯颜色外的其他颜色),对异常测试数据样本进行数据清洗,剔除这些不一致的测试数据,得到清洗后的测试数据集后,应用测试数据集进行测试,即可生成所需的测试结果。
参考附图2,为本发明一实施例中一种消费机的应用测试系统,包括:
生成模块10,用于基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景;
测试模块20,用于针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
判断模块30,用于将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
执行模块40,用于若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
第二执行模块50,用于若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法。
在本实施例中,生成模块10基于需要测试的应用类型生成模拟测试对象与模拟服务对象,根据模拟测试对象和模拟服务对象在预先设定有的测试模板中选中对应的测试类型,以生成对应的测试场景(例如,模拟测试对象为学生群体,模拟服务对象为校园群体,则对应需要选取的测试类型即为智慧取餐消费机,对应的测试场景为智慧食堂);测试模块20通过针对这些模拟测试对象、模拟服务对象和测试场景,构建至少一条或多条配置链路(例如测试场景为智慧食堂时,基于智慧取餐消费机之间的数据交换能力,构建相应条数的配置链路,如智慧取餐消费机的数量为1台,则对应的配置链路为1条;智慧取餐消费机的数量为2台,则对应的配置链路为2条),通过配置链路向预先设有的测试服务端上传关于模拟测试对象的相关信息和模拟服务对象的相关信息(相关信息包括模拟测试对象的模拟身份信息、模拟支付信息与模拟服务对象的模拟身份信息、模拟收款信息),而后获取到测试服务端回返的网络应用请求(网络应用请求用以:向测试服务端请求获取测试资源,提高模拟测试信息,得到测试允许指令后即可进行测试),应用该网络应用请求即可对模拟测试对象和模拟服务对象进行测试,以生成与测试类型相应的测试报告;判断模块30将测试报告的内容与测试服务端预先设有的预期结果进行差异性比对,生成比对结果后判断该比对结果是否达到测试服务端预先设定的测试要求,以执行对应的步骤;例如,系统判定到比对结果能够达到测试服务端设定的测试要求,则此时执行模块40会基于测试报告中的预测试内容进行测试,生成相应的测试结果;例如,系统判定到比对结果无法达到测试服务端预先设有的预期结果,则此时第二执行模块50会判定到测试报告中存在有异常测试数据集,导致测试无法按预期完成,此时系统会应用预先设有的一种或多种聚类算法对测试报告中的初始测试数据集进行数据清洗,去除初始测试数据集中的异常数据集,以生成测试数据集,而后应用测试数据集根据模拟测试对象、模拟服务对象与测试场景进行测试,生成清洗测试结果。
在本实施例中,生成模块还包括:
创建单元,用于采用轻量虚拟化技术,创建至少一个或多个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
建立单元,用于根据所述配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
验证单元,用于在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化。
在本实施例中,系统利用计算虚拟化技术,将物理测试服务器的硬件资源分配成了多台虚拟计算机,而且,利用网络虚拟化技术,在物理测试服务器中虚拟出虚拟网络交换机,并实现虚拟计算机之间及其与外部物理计算机的网络连接,因此,仅用测试物理服务器就可创建一套模拟机系统运行的硬件和网络环境,从而实现模拟机软件的部署、运行及测试;相比传统方式中需要多台计算机才能搭建的模拟机测试环境,极大节省测试平台所需的设备与配置数量,节约了运行成本和测试成本,提高了测试效率。
在本实施例中,测试模块还包括:
获取单元,用于获取测试网络的配置文件,并获取各端口的配置信息,基于所述配置文件和所述配置信息构建测试数据库;
构建单元,用于解析所述配置文件,获取各端口之间配置的链路,构建端口连接关系矩阵;
调取单元,用于构建所述端口连接关系矩阵时,基于所述配置文件的数量对应添加配置策略,调取所述端口连接关系矩阵中的数据流,其中,所述配置策略包括数据包协议策略、网络传输策略和网络负载策略;
生成单元,用于针对所述测试数据库、所述端口连接关系矩阵和所述数据流,生成测试完毕的预期结果。
在本实施例中,系统通过获取测试网络的配置文件和各个计算机端口的配置信息,基于这些配置文件和配置信息构建临时进行应用测试的测试数据库,而后系统解析配置文件,获取到各个计算机端口之间配置的链路与链路关系,以构建属于计算机端口连接关系的关系矩阵(如:在一个支持VLAN特性的交换网络中,把交换机与终端计算机直接相连的链路称为Access链路;在一条Access链路上运动的帧只能是不带标签的帧,而且这些帧只能属于某个特定的VLAN,并存在于一个关系矩阵中),构建端口连接关系矩阵时,基于配置文件的数量对应添加配置策略(包括数据包协议策略、网络传输策略和网络负载策略),同一应用通常需要部署到多个环境中进行运行测试,每个测试针对各个部署环境需要编辑不同的环境配置文件,因此通过根据配置文件添加对应的配置策略,并确定该应用软件的待配置环境,以针对待配置环境生成环境配置文件,同时调取关系矩阵中存在的数据流,在数据流配置文件之间查看数据的能力,使得确定异常数据值、查看转换更改列值的方式以及发现转换失败的原因变得更加轻松;最后系统针对临时测试数据库、端口连接关系矩阵与数据流,以生成测试服务端测试完毕的预期结果。
在本实施例中,测试模块还包括:
创建单元,用于创建并提交所述测试场景对应的测试任务至所述预设服务端;
分配单元,用于接收到所述预设服务端发布的测试指令后,分配所述模拟测试对象和所述模拟服务对象对应的测试服务ip及测试端口,基于所述测试服务ip及所述测试端口动态设置对应的配置脚本;
导入单元,用于输入所述测试任务对应的脚本地址,通过导入所述配置脚本至所述脚本地址中,并通过预设脚本命令执行所述测试指令。
在本实施例中,系统通过创建并提交与测试场景相应的测试任务至测试服务端后,能够接收到测试服务端发布的测试指令,根据该测试指令即可分配模拟测试对象与模拟服务对象相应的临时测试服务ip及其测试端口,基于该临时测试服务ip及其测试端口,动态设置对应的配置脚本(由于系统启动过程中会按照一定的规则读取配置文件信息,配置文件的信息里面记录了sqlmap的namespace和sql脚本文件的对应关系,一旦加载之后会从内存中将该条对应记录删除,因此为了避免重复加载造成系统异常,测试服务ip及其测试端口会动态调整设置自身的配置脚本),系统输入测试任务对应的脚本地址后,通过导入动态设置好的配置脚本至对应的脚本地址中,预先设置好的脚本命令就会基于测试服务ip及其测试端口,执行相应的测试指令。
在本实施例中,判断模块还包括:
第二获取单元,用于获取所述预期结果中的配置操作;
判断单元,用于判断所述测试报告是否匹配所述配置操作;
执行单元,用于若否,则判定所述测试报告中存在与所述预期结果差异的误差结果,所述比对结果无法达到所述预设要求。
在本实施例中,系统通过获取测试服务端预期结果中的配置操作,判断该配置操作是否存在预先设定有的缺陷,以执行对应的步骤;例如,系统获取到测试报告中存在测试过程无法正常完成的问题,而预期结果中的配置操作不存在测试过程无法正常完成的问题,则此时系统会判定测试报告无法匹配预期结果中的配置操作,此时系统会根据测试报告与配置操作存在的误差结果,对测试数据集中相应的数据集进行识别搜索;例如,系统获取到测试报告中不存在与预期结果的配置操作相应的问题,则此时系统会判定测试报告能够匹配预期结果中的配置操作,系统会根据测试报告中的完整测试过程,正常生成测试结果。
在本实施例中,执行模块还包括:
检测单元,用于检测所述测试结果的仿真完成信号,其中,所述仿真完成信号包括本地仿真或云端仿真;
第二判断单元,用于判断所述仿真完成信号是否采集成功;
第二执行单元,用于若是,则针对所述测试结果的仿真完成信号,将所述仿真完成信号对应的仿真结果保存到本地或云端,并获取测试过程的仿真环境。
在本实施例中,系统通过检测测试结果中设定好的仿真完成信号,判断该仿真完成信号是否采集成功,以执行对应的不同步骤;例如,系统无法检测到测试结果设定好的仿真完成信号,则此时系统会判定仿真完成信号采集失败,即代表系统此时会判定测试结果并未被系统收录,测试结果可能因为网络干扰而被影响,需要重新检测仿真完成信号;例如,系统检测到测试结果的仿真完成信号被成功采集,则此时系统会针对仿真完成信号将对应的仿真结果保存至本地或云端,并获取到测试过程的仿真环境,当本地测试结束后,所有的测试结果会自动记录在本地文件或者云端中,可以根据需求将本地文件合并入仿真结果数据库,理论上本地测试的仿真结果在格式和内容上应与测试结果数据库的文件兼容,以方便测试数据的管理。
在本实施例中,第二执行模块还包括:
第三获取单元,用于获取初始测试样本集,其中,所述初始测试样本集包括测试数据和所述测试数据的对应标注;
聚类单元,用于确定所述初始测试样本集对应的聚类算法,将所述对应标注作为簇数,利用所述聚类算法,对所述测试数据进行聚类以生成聚类结果,其中,所述聚类结果中包括所述测试数据的对应标签,每个簇数中包括多个测试数据样本;
选取单元,用于选取所述聚类结果中的每个对应标注与所述对应标签不一致的测试数据,确认为异常测试数据样本。
在本实施例中,系统通过获取初始测试样本集后,确认清洗初始测试样本集所对应需要的聚类算法,并将测试数据的对应标注作为簇数,利用聚类算法对测试数据进行聚类以生成聚类结果,继而从聚类结果中得到各个带有对应标注的测试数据,选取聚类结果中与对应标签不一致的测试数据作为异常测试数据样本(例如,计算机需要测试识别茶杯,首先需要准备多个茶杯颜色的测试训练集,然后把测试训练集输入至计算机中,训练电脑从测试训练集的多个测试样本中识别出所需要的茶杯颜色,计算机识别到茶杯颜色后认为它不是所需颜色,但识别到期望结果是茶杯,计算机则会从同个测试训练集中搜寻其他测试样本,直至测试出茶杯颜色为所需颜色后,即可选取得出测试训练集中的异常测试数据样本,即除了所需茶杯颜色外的其他颜色),对异常测试数据样本进行数据清洗,剔除这些不一致的测试数据,得到清洗后的测试数据集后,应用测试数据集进行测试,即可生成所需的测试结果。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (6)
1.一种消费机的应用测试方法,其特征在于,包括以下步骤:
基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景,
具体包括:采用轻量虚拟化技术,创建至少一个或多个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
根据配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化;
针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,具体包括:
系统通过获取测试网络的配置文件和各个计算机端口的配置信息,基于这些配置文件和配置信息构建临时进行应用测试的测试数据库,系统解析配置文件,获取到各个计算机端口之间配置的链路与链路关系,以构建属于计算机端口连接关系的关系矩阵,构建端口连接关系矩阵时,基于配置文件的数量对应添加配置策略,包括数据包协议策略、网络传输策略和网络负载策略,同一应用部署到多个环境中进行运行测试,每个测试针对各个部署环境编辑不同的环境配置文件,通过根据配置文件添加对应的配置策略,确定应用软件的待配置环境,以针对待配置环境生成环境配置文件,同时调取关系矩阵中存在的数据流,在数据流配置文件之间查看数据的能力,使得确定异常数据值、查看转换更改列值的方式以及发现转换失败的原因;最后系统针对临时测试数据库、端口连接关系矩阵与数据流,以生成测试服务端测试完毕的预期结果;
应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法。
2.根据权利要求1所述的一种消费机的应用测试方法,其特征在于,所述获取到所述预设服务端回返的网络应用请求,应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告的步骤中,包括:
创建并提交所述测试场景对应的测试任务至所述预设服务端;
接收到所述预设服务端发布的测试指令后,分配所述模拟测试对象和所述模拟服务对象对应的测试服务ip及测试端口,基于所述测试服务ip及所述测试端口动态设置对应的配置脚本;
输入所述测试任务对应的脚本地址,通过导入所述配置脚本至所述脚本地址中,并通过预设脚本命令执行所述测试指令。
3.根据权利要求1所述的一种消费机的应用测试方法,其特征在于,所述将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求的步骤中,包括:
获取所述预期结果中的配置操作;
判断所述测试报告是否匹配所述配置操作;
若否,则判定所述测试报告中存在与所述预期结果差异的误差结果,所述比对结果无法达到所述预设要求。
4.根据权利要求1所述的一种消费机的应用测试方法,其特征在于,所述则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果的步骤中,包括:
检测所述测试结果的仿真完成信号,其中,所述仿真完成信号包括本地仿真或云端仿真;
判断所述仿真完成信号是否采集成功;
若是,则针对所述测试结果的仿真完成信号,将所述仿真完成信号对应的仿真结果保存到本地或云端,并获取测试过程的仿真环境。
5.根据权利要求1所述的一种消费机的应用测试方法,其特征在于,所述则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果的步骤中,包括:
获取初始测试样本集,其中,所述初始测试样本集包括测试数据和所述测试数据的对应标注;
确定所述初始测试样本集对应的聚类算法,将所述对应标注作为簇数,利用所述聚类算法,对所述测试数据进行聚类以生成聚类结果,其中,所述聚类结果中包括所述测试数据的对应标签,每个簇数中包括多个测试数据样本;
选取所述聚类结果中的每个对应标注与所述对应标签不一致的测试数据,确认为异常测试数据样本。
6.一种消费机的应用测试系统,其特征在于,包括:
生成模块,用于基于应用类型生成模拟测试对象与模拟服务对象,根据所述测试对象和所述模拟服务对象在预设模板中选中测试类型,生成与所述测试类型相应的测试场景;
测试模块,用于针对所述模拟测试对象、所述模拟服务对象与所述测试场景,构建至少一条或多条配置链路,通过所述配置链路向预设服务端上传所述模拟测试对象的信息和所述模拟服务对象的信息,获取到所述预设服务端回返的网络应用请求,具体包括:
系统通过获取测试网络的配置文件和各个计算机端口的配置信息,基于这些配置文件和配置信息构建临时进行应用测试的测试数据库,系统解析配置文件,获取到各个计算机端口之间配置的链路与链路关系,以构建属于计算机端口连接关系的关系矩阵,构建端口连接关系矩阵时,基于配置文件的数量对应添加配置策略,包括数据包协议策略、网络传输策略和网络负载策略,同一应用部署到多个环境中进行运行测试,每个测试针对各个部署环境编辑不同的环境配置文件,通过根据配置文件添加对应的配置策略,确定应用软件的待配置环境,以针对待配置环境生成环境配置文件,同时调取关系矩阵中存在的数据流,在数据流配置文件之间查看数据的能力,使得确定异常数据值、查看转换更改列值的方式以及发现转换失败的原因;最后系统针对临时测试数据库、端口连接关系矩阵与数据流,以生成测试服务端测试完毕的预期结果;
应用所述网络应用请求对所述模拟测试对象和所述模拟服务对象进行预测试,生成所述测试类型对应的测试报告;
判断模块,用于将所述测试报告与所述预设服务端的预期结果进行差异性比对,生成比对结果后,判断所述比对结果是否达到预设要求;
执行模块,用于若是,则基于所述测试报告根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成测试结果;
第二执行模块,用于若否,则识别所述测试报告中存在的异常数据集,应用预设的一种或多种聚类算法对所述测试报告进行数据清洗,去除所述异常数据集,生成测试数据集,应用所述测试数据集根据所述模拟测试对象、所述模拟服务对象与所述测试场景进行测试,生成清洗测试结果,其中,所述聚类算法包括K均值或谱聚类算法;
所述生成模块还包括:
创建单元,用于采用轻量虚拟化技术,创建至少一个不同规格的虚拟计算机,其中,所述虚拟计算机包括测试虚拟操作站、场景虚拟服务器和控制逻辑虚拟服务端;
建立单元,用于根据配置需求,使用各个所述虚拟计算机之间进行网络连接以建立虚拟网络,并将所述虚拟网络与物理网络的连通;
验证单元,用于在所述虚拟网络中,对测试框架进行功能验证及性能测试,并根据功能验证结果及性能测试结果,对所创建的所述虚拟网络交换机及所述虚拟计算机进行优化;
所述测试模块还包括:
获取单元,用于获取测试网络的配置文件,并获取各端口的配置信息,基于所述配置文件和所述配置信息构建测试数据库;
构建单元,用于解析所述配置文件,获取各端口之间配置的链路,构建端口连接关系矩阵;
调取单元,用于构建所述端口连接关系矩阵时,基于所述配置文件的数量对应添加配置策略,调取所述端口连接关系矩阵中的数据流,其中,所述配置策略包括数据包协议策略、网络传输策略和网络负载策略;
生成单元,用于针对所述测试数据库、所述端口连接关系矩阵和所述数据流,生成测试完毕的预期结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310032437.2A CN115964301B (zh) | 2023-01-10 | 2023-01-10 | 一种消费机的应用测试方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310032437.2A CN115964301B (zh) | 2023-01-10 | 2023-01-10 | 一种消费机的应用测试方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115964301A CN115964301A (zh) | 2023-04-14 |
CN115964301B true CN115964301B (zh) | 2023-10-20 |
Family
ID=87361483
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310032437.2A Active CN115964301B (zh) | 2023-01-10 | 2023-01-10 | 一种消费机的应用测试方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115964301B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110362472A (zh) * | 2019-05-31 | 2019-10-22 | 口碑(上海)信息技术有限公司 | Mock测试方法、装置及设备 |
CN114155054A (zh) * | 2020-09-08 | 2022-03-08 | 福建天泉教育科技有限公司 | 一种基于kafka的大数据报表统计的测试方法及其系统 |
CN114610440A (zh) * | 2022-01-25 | 2022-06-10 | 中广核(北京)仿真技术有限公司 | 模拟机系统的运行环境构建方法及系统 |
-
2023
- 2023-01-10 CN CN202310032437.2A patent/CN115964301B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110362472A (zh) * | 2019-05-31 | 2019-10-22 | 口碑(上海)信息技术有限公司 | Mock测试方法、装置及设备 |
CN114155054A (zh) * | 2020-09-08 | 2022-03-08 | 福建天泉教育科技有限公司 | 一种基于kafka的大数据报表统计的测试方法及其系统 |
CN114610440A (zh) * | 2022-01-25 | 2022-06-10 | 中广核(北京)仿真技术有限公司 | 模拟机系统的运行环境构建方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115964301A (zh) | 2023-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110309071B (zh) | 测试代码的生成方法及模块、测试方法及系统 | |
CN109361562B (zh) | 一种基于关联网络设备接入的自动化测试方法 | |
CN108092854B (zh) | 基于iec61375协议的列车级以太网设备的测试方法及装置 | |
CN107070752B (zh) | 一种长连接容量的测试方法及测试系统 | |
CN104518917A (zh) | 一种服务器自动巡检方法 | |
CN105868050A (zh) | 基于json数据的验证方法及装置 | |
US6721276B1 (en) | Automated microcode test packet generation engine | |
CN106059860A (zh) | 一种测试网卡的方法和装置 | |
CN107203464B (zh) | 业务问题的定位方法以及装置 | |
CN108959065A (zh) | 软件接口测试参数的验证方法及系统 | |
CN114419363A (zh) | 基于无标注样本数据的目标分类模型训练方法及装置 | |
CN115542875A (zh) | 一种基于soa服务的车辆检测方法及相关设备 | |
CN108009086B (zh) | 基于用例分解和功能学习的系统自动化测试方法 | |
CN114896108A (zh) | 测试验证系统 | |
CN114692169A (zh) | 应用大数据和ai分析的页面漏洞处理方法及页面服务系统 | |
CN115964301B (zh) | 一种消费机的应用测试方法及系统 | |
CN110515924A (zh) | 数据库操作逻辑校验方法、装置、设备及可读存储介质 | |
CN117290255A (zh) | 一种基于Python和Locust框架的批量接口性能测试方法 | |
CN117421217A (zh) | 一种软件功能自动测试方法、系统、终端及介质 | |
CN116431522A (zh) | 一种低代码对象存储网关自动化测试方法及系统 | |
CN105808612B (zh) | 用于迁移数据库的数据的方法及设备 | |
CN115842861A (zh) | 边缘连接设备适配方法、装置及计算机可读存储介质 | |
CN114721969A (zh) | 接口自动化测试数据和测试代码分离的方法及装置 | |
US20220058530A1 (en) | Method and device for optimizing deep learning model conversion, and storage medium | |
CN113032255A (zh) | 响应噪音的识别方法、模型、电子设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |