CN117762810A - 模型在环测试方法、装置、计算机设备和存储介质 - Google Patents
模型在环测试方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN117762810A CN117762810A CN202311828679.9A CN202311828679A CN117762810A CN 117762810 A CN117762810 A CN 117762810A CN 202311828679 A CN202311828679 A CN 202311828679A CN 117762810 A CN117762810 A CN 117762810A
- Authority
- CN
- China
- Prior art keywords
- test
- model
- determining
- excel
- test case
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010998 test method Methods 0.000 title abstract description 15
- 238000012360 testing method Methods 0.000 claims abstract description 473
- 238000000034 method Methods 0.000 claims abstract description 28
- 238000004590 computer program Methods 0.000 claims description 15
- 230000006870 function Effects 0.000 claims description 12
- 230000008676 import Effects 0.000 claims description 7
- 230000010354 integration Effects 0.000 abstract 1
- 238000012795 verification Methods 0.000 abstract 1
- 238000004422 calculation algorithm Methods 0.000 description 20
- 230000008859 change Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000007726 management method Methods 0.000 description 6
- 238000005457 optimization Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000011981 development test Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本申请涉及一种模型在环测试方法、装置、计算机设备和存储介质。所述方法包括：首先，获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围，之后，基于所述模型更新数据和预设模板确定EXCEL测试用例，之后，基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例，之后，基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。自动化的持续集成，快速及时的验证及反馈，不仅减少了从模型更新到模型发布的测试周期，还不需要大量人工的参与，节省了大量人力，提高了测试效率。
Description
技术领域
本申请涉及新能源汽车技术领域，特别是涉及一种模型在环测试方法、装置、计算机设备和存储介质。
背景技术
随着新能源汽车技术的发展，动力电池的性能和状态受到越来越多的人关注，采用电池的状态描述(State Of X，SOX)算法进行动力电池的监测逐渐成为一种主流的方式，其中，电池状态描述SOX具体包括电池健康状态(State Of Health，SOH)、电池荷电状态(State Of Charge，SOC)、电池功率状态(State Of Power，SOP)和电池能量状态(State OfEnergy，SOE)等。
通常情况下，SOX算法的应用分为离线开发和实车应用两个阶段。离线开发时，当将新的策略应用到算法中时，例如将卡尔曼滤波应用到SOC中进行SOC估算的优化，就需要结合变化不断调整算法模型，并进行充分的算法模型在环(Model-in-the-Loop，MIL)测试，保证算法模块的输出有效且可靠。实车应用时，往往需要经历一个漫长的使用周期，这个周期内会随着实车的使用出现一些需要优化的点，例如SOX算法的阈值的更新，使其更符合当前的实车使用工况，而更改也带来了变更点的输入，针对这些输入，算法模型也需要更新优化，更新之后同样也需要进行算法模型在环测试，以确认模型更改或优化是否达到预期。可以看出，无论是离线开发的变化还是实车应用的更改优化，都需要通过算法模型在环测试验证变化或更改优化对原有模型是否有影响且新功能能否满足符合设计预期。
相关技术中，对于更新的算法模型，模型在环测试的执行通常需要人工对应更新按照规定格式编写测试用例，之后手动导入到对应位置并手动执行，整个过程拉长了测试周期，降低了测试效率。因此，相关技术中亟需一种能减少测试周期以及提高测试效率的模型在环测试方式。
发明内容
基于此，有必要针对上述技术问题，提供一种能够减少测试周期以及提高测试效率的模型在环测试方法、装置、计算机设备和计算机可读存储介质。
第一方面，本申请提供了一种模型在环测试方法。所述方法包括：
获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围；
基于所述模型更新数据和预设模板确定EXCEL测试用例；
基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例；
基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
可选的，在本申请的一个实施例中，所述获取待测试模型更新需求之前包括：
创建测试环境，基于用户指令获取模型存储路径。
可选的，在本申请的一个实施例中，所述基于所述模型更新数据和预设模板确定EXCEL测试用例之后包括：
评估所述EXCEL测试用例是否符合预设标准，将所述符合预设标准的EXCEL测试用例上传至版本管理工具。
可选的，在本申请的一个实施例中，所述基于所述模型更新数据和预设模板确定EXCEL测试用例包括：
基于所述模型更新数据确定模型测试输入、模型测试输出以及模型测试参数；
基于所述模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例。
可选的，在本申请的一个实施例中，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例包括：
新建空白测试用例；
基于所述模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称；
基于所述EXCEL测试用例，采用参数导入函数，将所述模型测试参数导入所述空白测试用例；
基于所述导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将所述模型测试输入和模型测试输出的内容导入所述空白测试用例，得到自动化测试用例。
可选的，在本申请的一个实施例中，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例之前包括：
检测所述EXCEL测试用例，删除空白的EXCEL测试用例。
可选的，在本申请的一个实施例中，所述基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告之后包括：
将所述自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较所述处理器在环测试结果和模型在环测试结果是否一致。
第二方面，本申请还提供了一种模型在环测试装置。所述装置包括：
模型更新数据确定模块，用于获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围；
EXCEL测试用例确定模块，用于基于所述模型更新数据和预设模板确定EXCEL测试用例；
自动化测试用例确定模块，用于基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例；
测试结果确定模块，用于基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行上述各个实施例所述方法的步骤。
第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述各个实施例所述方法的步骤。
上述模型在环测试方法、装置、计算机设备和存储介质，首先，获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围，之后，基于所述模型更新数据和预设模板确定EXCEL测试用例，之后，基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例，之后，基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。也就是说，在进行模型在环测试时，依据待测试模型更新需求，对应编写EXCEL测试用例，并将其转换为可以自动执行的自动化测试用例，执行之后得到测试结果，在整个过程中，用户只需要输入待测试模型更新需求，就能够得到覆盖度分析报告，基于覆盖度分析报告筛选出满足模型在环测试覆盖度条件的SOX模型，自动化的持续集成，快速及时的验证及反馈，不仅减少了从模型更新到模型发布的测试周期，还不需要大量人工的参与，节省了大量人力，提高了测试效率。
附图说明
图1为一个实施例中模型在环测试方法的应用环境图；
图2为一个实施例中模型在环测试方法的流程示意图；
图3为一个实施例中确定自动化测试用例步骤的流程示意图；
图4为一个实施例中模型在环测试方法具体实施步骤的流程示意图；
图5为一个实施例中模型在环测试装置的结构框图；
图6为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请实施例提供的模型在环测试方法，可以应用于如图1所示的应用环境中。其中，终端102通过网络与服务器104进行通信。数据存储系统可以存储服务器104需要处理的数据。数据存储系统可以集成在服务器104上，也可以放在云上或其他网络服务器上。其中，终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备，物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中，如图2所示，提供了一种模型在环测试方法，以该方法应用于图1中的服务器为例进行说明，包括以下步骤：
S201：获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围。
本申请实施例中，首先，获取待测试模型更新需求，并基于待测试模型更新需求确定模型更新数据和模型更新范围，其中，待测试模型更新需求指用于估计动力电池状态的SOX算法模型的更新需求，具体的，SOX算法模型包括SOH算法模型、SOC算法模型、SOP算法模型、SOE算法模型等，由于实车的使用是动态变化的，为了满足实车使用工况，SOX算法模型也会根据变化不断调整更新，更新后的模型并不能直接投入使用，而是需要经过模型开发测试，模型更新数据指待测试模型更新所发生变更的数据，模型更新范围指待测试模型更新引起的变更的影响范围，基于模型更新范围能够确定测试时是需要全部执行或部分执行。
S203：基于所述模型更新数据和预设模板确定EXCEL测试用例。
本申请实施例中，确定模型更新数据之后，按照预设模板和EXCEL测试用例设计方法，基于模型更新数据，进行EXCEL测试用例的编写，具体的，EXCEL测试用例作为测试执行的依据，当对于模型更新需求进行测试时，采用测试用例一对一的对模型更新数据进行测试并记录是一个高效的方法，不容易遗漏需求，具体应用中，依据模型更新数据，确定测试目标、测试环境、输入数据、测试步骤、预期结果等，将其编写到一个EXCEL文档中。
S205：基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例。
本申请实施例中，确定EXCEL测试用例之后，还并不能直接用于执行自动化测试，需要将其转换为自动化测试用例，才能自动执行，具体的，依据EXCEL测试用例确定测试内容、测试参数等信息，将其按照测试输入、测试输出、测试参数等项目分别导入统一的空白自动化测试用例中，得到最终的自动化测试用例。
S207：基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
本申请实施例中，确定自动化测试用例之后，依据模型更新范围确定是全部执行或部分执行，具体的，通过编写Python筛选函数，依据变更点筛选需要执行的测试用例，之后，执行自动化测试用例，得到模型在环测试结果报告，通过邮件或消息发送给用户。其中，模型在环测试结果报告包括覆盖度说明文档，其中不仅体现未覆盖的地方的模块及在模型中的位置，还体现未覆盖原因。
上述模型在环测试方法中，首先，获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围，之后，基于所述模型更新数据和预设模板确定EXCEL测试用例，之后，基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例，之后，基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。也就是说，在进行模型在环测试时，依据待测试模型更新需求，对应编写EXCEL测试用例，并将其转换为可以自动执行的自动化测试用例，执行之后得到测试结果，在整个过程中，用户只需要输入待测试模型更新需求，就能够得到覆盖度分析报告，基于覆盖度分析报告筛选出满足模型在环测试覆盖度条件的SOX模型，自动化的持续集成，快速及时的验证及反馈，不仅减少了从模型更新到模型发布的测试周期，还不需要大量人工的参与，节省了大量人力，提高了测试效率。
在本申请的一个实施例中，所述获取待测试模型更新需求之前包括：
创建测试环境，基于用户指令获取模型存储路径。
在本申请的一个实施例中，首先，创建测试环境，通过Jenkins命令语句新建Jenkins流水线Pipeline，能将原本独立运行于单个或者多个节点的任务连接起来，实现单个任务难以完成的复杂流程编排与可视化，并在流水线工程下设置更新模型的路径，用于获取待更新模型，对其进行测试。当用户有更新模型的需求时，基于用户发起的指令，确定待更新模型和模型存储路径，即其真实的存储位置，该模型存储路径即为流水线工程更新模型的路径。
本实施例中，通过创建测试环境，基于用户指令获取模型存储路径，所有的模型开发测试都在流水线环境下完成，能够实现自动化测试。
在本申请的一个实施例中，所述基于所述模型更新数据和预设模板确定EXCEL测试用例之后包括：
评估所述EXCEL测试用例是否符合预设标准，将所述符合预设标准的EXCEL测试用例上传至版本管理工具。
在本申请的一个实施例中，在确定初始的EXCEL测试用例之后，需要对其进行评审，只有评审通过的EXCEL测试用例才能用于相关测试。评审的具体方法是，评估EXCEL测试用例是否符合预设标准，预设标准即测试需求，通常由系统工程师和算法开发工程师一同制定，之后，将符合预设标准的EXCEL测试用例上传到算法软件版本管理工具SVN。
本实施例中，通过评估EXCEL测试用例是否符合预设标准，将符合预设标准的EXCEL测试用例上传到版本管理工具，能够准确确定EXCEL测试用例满足模型测试需求。
在本申请的一个实施例中，所述基于所述模型更新数据和预设模板确定EXCEL测试用例包括：
S301：基于所述模型更新数据确定模型测试输入、模型测试输出以及模型测试参数。
S303：基于所述模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例。
在本申请的一个实施例中，首先，基于模型更新数据确定模型测试输入、模型测试输出和模型测试参数，其中，模型更新数据指SOX算法模型的更新数据，根据SOX算法模型的变化，确定对应不同的需求，依据需求确定测试时的输入、输出和测试参数，之后，基于模型测试输入、模型测试输出和模型测试参数，依据预设模板，依次写入到模板中，得到EXCEL测试用例。
本实施例中，通过基于模型更新数据确定模型测试输入、模型测试输出以及模型测试参数，基于模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例，实现EXCEL测试用例的编写。
在本申请的一个实施例中，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例包括：
S401：新建空白测试用例。
S403：基于所述模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称。
S405：基于所述EXCEL测试用例，采用参数导入函数，将所述模型测试参数导入所述空白测试用例。
S407：基于所述导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将所述模型测试输入和模型测试输出的内容导入所述空白测试用例，得到自动化测试用例。
在本申请的一个实施例中，如图3所示，首先，新建空白测试用例，具体的，通过TestManger的命令语句打开TestManger模块，在其中新建测试文件TestFile，在测试文件中新建测试套件TestSuite，在测试套件中新建空白测试用例TestCase，之后，依据模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称，之后，编写参数导入函数，遍历所有EXCEL测试用例中涉及参数的Sheet的参数列，将模型测试参数导入空白测试用例的PARM中，之后，将EXCEL测试用例的source的输出部分导入到TestManger的输出中，采用For函数循环遍历所有Sheet里含有Param和Value的列，将其中对应的内容导入到TestManger的参数设置中，并设置覆盖度要求和测试结果报告的输出格式，覆盖度要求例如MCDC覆盖、语句覆盖或条件覆盖等，输出格式例如pdf、网页等。
本实施例中，通过新建空白测试用例，基于模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称，基于EXCEL测试用例，采用参数导入函数，将模型测试参数导入空白测试用例，基于导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将模型测试输入和模型测试输出的内容导入空白测试用例，得到自动化测试用例，能够将多样的EXCEL测试用例转换成能统一执行的自动化测试用例。
在本申请的一个实施例中，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例之前包括：
检测所述EXCEL测试用例，删除空白的EXCEL测试用例。
在本申请的一个实施例中，在确定自动化测试用例之前，采用Excel名称关键词读取函数识别待测模块对应的EXCEL测试用例，用For循环函数遍历所有的EXCEL测试用例，通过用For循环语句将空白的EXCEL测试用例删除。
本实施例中，通过检测EXCEL测试用例，删除空白的EXCEL测试用例，能够精确自动化测试用例转换的对象，提高模型在环测试效率。
在本申请的一个实施例中，所述基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告之后包括：
将所述自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较所述处理器在环测试结果和模型在环测试结果是否一致。
在本申请的一个实施例中，在得到模型在环测试结果之后，复用自动化测试用例，执行处理器在环测试(Processor in loop，PIL)，通过电脑连接PIL实时仿真器，具体的，采用劳德巴赫仿真测试工具，连接待测汽车电子控制单元ECU，进行处理器在环测试，通过比较处理器在环测试结果和模型在环测试结果是否一致，验证模型输出的结果是否和在待测汽车电子控制单元ECU实际运行出的结果一致。
本实施例中，通过将自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较处理器在环测试结果和模型在环测试结果是否一致，能够验证模型模拟结果和待测汽车电子控制单元运行结果是否一致，提高了模型在环测试的准确率。
下面以一个具体实施例说明本申请模型在环测试方法的具体实施步骤。如图4所示，首先，S501，创建测试环境，基于用户指令获取模型存储路径。之后，S503，获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围。之后，S505，基于所述模型更新数据和预设模板确定EXCEL测试用例，具体的，S507-S509，基于所述模型更新数据确定模型测试输入、模型测试输出以及模型测试参数；基于所述模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例。
之后，S511，评估所述EXCEL测试用例是否符合预设标准，将所述符合预设标准的EXCEL测试用例上传至版本管理工具。之后，S513，检测所述EXCEL测试用例，删除空白的EXCEL测试用例。
之后，S515，基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例。具体的，S517-S523，新建空白测试用例；基于所述模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称；基于所述EXCEL测试用例，采用参数导入函数，将所述模型测试参数导入所述空白测试用例；基于所述导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将所述模型测试输入和模型测试输出的内容导入所述空白测试用例，得到自动化测试用例。
最后，S525，基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。S527，将所述自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较所述处理器在环测试结果和模型在环测试结果是否一致。
在本申请的一个实施例中，模型在环测试结果显示不通过时，依据报错修改，重新运行脚本，通过则输出模型在环测试结果报告。若模型有新的输入更新或优化时，结合Jenkins流水线Pipeline持续集成，继续从头测试。
在本申请的一个实施例中，所有的测试流程都是在Jenkins流水线Pipeline中完成的，Jenkins流水线Pipeline的触发方式可以设置为SVN上传更新触发，时间触发或手动触发等。
应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的模型在环测试方法的模型在环测试装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个模型在环测试装置实施例中的具体限定可以参见上文中对于模型在环测试方法的限定，在此不再赘述。
在一个实施例中，如图5所示，提供了一种模型在环测试装置500，包括：模型更新数据确定模块501、EXCEL测试用例确定模块503、自动化测试用例确定模块505和测试结果确定模块507，其中：
模型更新数据确定模块501，用于获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围。
EXCEL测试用例确定模块503，用于基于所述模型更新数据和预设模板确定EXCEL测试用例。
自动化测试用例确定模块505，用于基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例。
测试结果确定模块507，用于基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
所述模型在环测试装置还包括环境创建模块。在本申请的一个实施例中，所述环境创建模块用于：
创建测试环境，基于用户指令获取模型存储路径。
所述模型在环测试装置还包括评估模块。在本申请的一个实施例中，所述评估模块用于：
评估所述EXCEL测试用例是否符合预设标准，将所述符合预设标准的EXCEL测试用例上传至版本管理工具。
在本申请的一个实施例中，所述EXCEL测试用例确定模块还用于：
基于所述模型更新数据确定模型测试输入、模型测试输出以及模型测试参数；
基于所述模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例。
在本申请的一个实施例中，所述自动化测试用例确定模块还用于：
新建空白测试用例；
基于所述模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称；
基于所述EXCEL测试用例，采用参数导入函数，将所述模型测试参数导入所述空白测试用例；
基于所述导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将所述模型测试输入和模型测试输出的内容导入所述空白测试用例，得到自动化测试用例。
所述模型在环测试装置还包括检测模块。在本申请的一个实施例中，所述检测模块用于：
检测所述EXCEL测试用例，删除空白的EXCEL测试用例。
所述模型在环测试装置还包括一致性检测模块。在本申请的一个实施例中，所述一致性检测模块用于：
将所述自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较所述处理器在环测试结果和模型在环测试结果是否一致。
上述模型在环测试装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种模型在环测试方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图6中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要说明的是，本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。
Claims (10)
1.一种模型在环测试方法，其特征在于，所述方法包括：
获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围；
基于所述模型更新数据和预设模板确定EXCEL测试用例；
基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例；
基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
2.根据权利要求1所述的方法，其特征在于，所述获取待测试模型更新需求之前包括：
创建测试环境，基于用户指令获取模型存储路径。
3.根据权利要求1所述的方法，其特征在于，所述基于所述模型更新数据和预设模板确定EXCEL测试用例之后包括：
评估所述EXCEL测试用例是否符合预设标准，将所述符合预设标准的EXCEL测试用例上传至版本管理工具。
4.根据权利要求1所述的方法，其特征在于，所述基于所述模型更新数据和预设模板确定EXCEL测试用例包括：
基于所述模型更新数据确定模型测试输入、模型测试输出以及模型测试参数；
基于所述模型测试输入、模型测试输出以及模型测试参数按照预设模板创建EXCEL测试用例。
5.根据权利要求4所述的方法，其特征在于，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例包括：
新建空白测试用例；
基于所述模型测试输入和模型测试输出确定自动化测试输入名称和自动化测试输出名称；
基于所述EXCEL测试用例，采用参数导入函数，将所述模型测试参数导入所述空白测试用例；
基于所述导入的模型测试参数、自动化测试输入名称和自动化测试输出名称，将所述模型测试输入和模型测试输出的内容导入所述空白测试用例，得到自动化测试用例。
6.根据权利要求1所述的方法，其特征在于，所述基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例之前包括：
检测所述EXCEL测试用例，删除空白的EXCEL测试用例。
7.根据权利要求1所述的方法，其特征在于，所述基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告之后包括：
将所述自动化测试用例输入实际测试环境中，执行处理器在环测试，得到处理器在环测试结果，比较所述处理器在环测试结果和模型在环测试结果是否一致。
8.一种模型在环测试装置，其特征在于，所述装置包括：
模型更新数据确定模块，用于获取待测试模型更新需求，基于所述待测试模型更新需求确定模型更新数据和模型更新范围；
EXCEL测试用例确定模块，用于基于所述模型更新数据和预设模板确定EXCEL测试用例；
自动化测试用例确定模块，用于基于所述EXCEL测试用例确定测试内容和测试参数，基于所述测试内容和测试参数确定自动化测试用例；
测试结果确定模块，用于基于所述模型更新范围执行所述自动化测试用例，生成模型在环测试结果报告。
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311828679.9A CN117762810A (zh) | 2023-12-27 | 2023-12-27 | 模型在环测试方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311828679.9A CN117762810A (zh) | 2023-12-27 | 2023-12-27 | 模型在环测试方法、装置、计算机设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117762810A true CN117762810A (zh) | 2024-03-26 |
Family
ID=90312243
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311828679.9A Pending CN117762810A (zh) | 2023-12-27 | 2023-12-27 | 模型在环测试方法、装置、计算机设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117762810A (zh) |
-
2023
- 2023-12-27 CN CN202311828679.9A patent/CN117762810A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109074063A (zh) | 用数据驱动的工作流程进行安全分析评估的装置和方法 | |
| CN110019116B (zh) | 数据追溯方法、装置、数据处理设备及计算机存储介质 | |
| CN110134596A (zh) | 测试文档的生成方法及终端设备 | |
| CN111814376A (zh) | 一种车身接附点刚度结果提取方法及电子设备 | |
| CN117762810A (zh) | 模型在环测试方法、装置、计算机设备和存储介质 | |
| CN116561003A (zh) | 测试数据生成方法、装置、计算机设备和存储介质 | |
| CN114610645B (zh) | 任务可靠性和测试性联合确定方法、装置和计算机设备 | |
| CN116483645A (zh) | 设备虚拟调试方法、装置、设备、存储介质和程序产品 | |
| CN115169155A (zh) | 发动机故障预测方法、装置、计算机设备和存储介质 | |
| CN117034824B (zh) | 复用测试用例和验证环境的仿真验证系统、方法、终端及介质 | |
| CN117590149B (zh) | 基于大数据技术的故障解决方案生成方法、装置和设备 | |
| CN112783913B (zh) | 数据库更新方法、装置、设备及存储介质 | |
| CN116541454B (zh) | 事件配置方法、装置、计算机设备和存储介质 | |
| CN116882008A (zh) | 基于数据驱动的变电站建筑信息模型生成方法和装置 | |
| CN116401815A (zh) | 核反应堆的仿真方法、装置、计算机设备和存储介质 | |
| CN118093385A (zh) | 代码质量评估模型的训练、代码质量评估方法和装置 | |
| CN117331812A (zh) | 业务代码验证方法、装置、计算机设备、存储介质和产品 | |
| CN117522296A (zh) | 审核流程生成方法、装置、计算机设备和存储介质 | |
| CN118170669A (zh) | 差异覆盖率分析方法、装置、存储介质及计算机设备 | |
| CN117494105A (zh) | 软件安全测试方法、装置、计算机设备、存储介质和产品 | |
| CN118338337A (zh) | 可靠性检测方法、装置、计算机设备和存储介质 | |
| CN115437935A (zh) | 测试用例生成方法、装置、计算机设备和存储介质 | |
| CN117056228A (zh) | 页面加载的测试方法、装置、计算机设备和存储介质 | |
| CN116467208A (zh) | 界面自动测试方法、装置及计算机设备 | |
| CN117743443A (zh) | 数据采集方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |