CN111382031A - 测试方法及装置 - Google Patents
测试方法及装置 Download PDFInfo
- Publication number
- CN111382031A CN111382031A CN202010366939.5A CN202010366939A CN111382031A CN 111382031 A CN111382031 A CN 111382031A CN 202010366939 A CN202010366939 A CN 202010366939A CN 111382031 A CN111382031 A CN 111382031A
- Authority
- CN
- China
- Prior art keywords
- case
- data
- equipment
- cases
- initial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供了一种测试方法及装置,涉及测试技术领域,该方法包括:监控设备和设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;设备用于根据案例分配结果利用测试案例执行测试任务;根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果;根据案例调整结果将多个目标案例分配至多个目标设备,以使多个目标设备按照多个目标案例进行测试。本发明通过对测试案例执行情况进行监测,结合实时的案例执行时长数据和设备运转情况,实现对测试案例的分配情况进行自动优化和动态调整,可以提升自动化测试的效率。
Description
技术领域
本发明涉及测试技术领域,尤其是涉及一种测试方法及装置。
背景技术
随着Devops(Development Operations,过程、方法与系统的统称)实践和持续集成的不断发展,自动化测试成为软件开发过程中的关键环节。现有移动前端自动化UI(UserInterface,用户界面)测试方案有以下特点:1、自动化UI测试案例需手动分配到每台即将执行案例的移动终端上;2、增加案例执行终端,需对案例重新进行手动切分。在实际的软件开发工作中,自动化测试案例不断变更(新增、修改、删除);执行自动化测试的设备也会随着实际需求新增或减少;既有的技术方案无法自主地对这些情况进行调整;往往需要手工对案例进行重新切分,不利于自动化测试机制的运转。
发明内容
本发明提供了一种测试方法及装置,可以实现移动设备资源情况的动态监控,移动设备测试案例的动态分配以及测试任务的自适应调整。
第一方面,本发明实施例提供了一种测试方法,该方法包括:监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;所述设备根据案例分配结果利用所述测试案例执行测试任务;根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果;根据所述案例调整结果将多个目标案例分配至多个目标设备,以使所述多个目标设备按照所述多个目标案例进行测试。。
第二方面,本发明实施例还提供一种测试装置,该装置包括:监控模块,用于监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;所述设备根据案例分配结果利用所述测试案例执行测试任务;决策模块,用于根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果;分配模块,用于根据所述案例调整结果将多个目标案例分配至多个目标设备,以使所述多个目标设备按照所述多个目标案例进行测试。
第三方面,本发明实施例还提供一种计算机设备,包括存储器、处理器,所述存储器中存储有可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述测试方法。
第四方面,本发明实施例还提供一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述测试方法。
本发明实施例带来了以下有益效果:本发明实施例提供了一种测试方案,该方案通过监测执行测试任务的设备和设备所用的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据,之后,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对测试案例在设备的分配情况进行调整,得到案例调整结果,最后,根据案例调整结果重新对多个目标案例在多个目标设备进行分配,以便于多个目标设备按照多个目标案例自动进行测试。本发明实施例通过对测试案例执行情况进行监测,结合实时的案例执行时长数据和设备运转情况,实现对测试案例的分配情况进行自动优化和动态调整,可以提升自动化测试的效率。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的测试方法流程图;
图2为本发明实施例提供的测试方法实施例流程示意图;
图3为本发明实施例提供的一种测试装置结构框图;
图4为本发明实施例提供的另一种测试装置结构框图;
图5为本发明实施例提供的计算机设备结构框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
目前,移动前端自动化UI(User Interface,用户界面)测试通过在移动桌面设备上自动地执行案例来实现。这需要案例执行任务能够自动调起。案例执行任务自动调起后,将案例脚本推送到移动终端设备上,并自动执行案例脚本,生成测试报告。
现有的技术方案,需通过手工对案例进行切分,然后再分配给拥有足够资源支持执行案例的移动终端设备。现有的技术方案,没有对测试案例执行情况的动态评估机制;无法对单台设备上案例的执行情况进行实时监控,每个案例的执行情况进行动态监控,无法根据自动化任务和案例执行情况对测试进行动态调整;只能等整个任务完成后,根据每台设备上案例执行的总时间,手工调整每台设备下次执行自动化测试任务时的案例集。现有的技术方案,没有对移动终端使用情况的动态监控机制,在试任务执行过程中,无法将自动识别新增到测试任务中来的移动终端设备;当正在执行的自动化测试任务面临设备瓶颈时,无法通过新增设备解决。
以上三个问题,导致现有移动前端自动化测试,无法自主地对测试进行动态监控,无法对设备进行动态管理,无法对对自动化测试过程进行自适应调整。
基于此,本发明实施例提供的一种测试方法及装置,可以实现移动前端自动化测试任务的自动调起,移动设备资源情况的动态监控,移动设备测试案例的动态分配、自动执行,移动设备自动化测试任务执行情况的动态评估和自动化测试任务的自适应调整;使得移动前端自动化测试能够自动执行,动态监控,自适应优化;大大提高了移动端UI测试的自动化水平和自动化案例的执行效率。
为便于对本实施例进行理解,首先对本发明实施例所公开的一种测试方法进行详细介绍。
本发明实施例提供了一种测试方法,参见图1所示的一种测试方法流程图,该方法包括以下步骤:
步骤S102,监控设备和设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据。
在本发明实施例中,设备可以是移动设备,用于根据案例分配结果利用测试案例执行测试任务。当自动化测试任务开始执行,执行测试任务的每个设备,需要通过测试案例完成测试任务。监控每台移动设备的测试案例执行情况,包括检测每个案例的实际执行时间和每台设备剩余案例情况,另外,也需要对设备数量的增减情况以及案例数量的增减情况进行监控,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据。
其中,设备个数数据包括新增或减少的设备的个数信息和名称信息;设备资源数据包括每个设备的已占用资源信息以及空闲的资源信息;案例个数信息包括每个设备新增或减少的案例个数信息和名称信息;案例执行时长数据包括每个案例实时的执行时长信息。
步骤S104,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果。
通过监控,可以得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据的变动情况,根据变动情况对案例分配结果进行优化,实现移动设备测试案例的动态分配,得到案例调整结果。本发明实施例通过自动化测试案例重新分配,实现了自动化测试自适应优化。
步骤S106,根据案例调整结果将多个目标案例分配至多个目标设备,以使多个目标设备按照多个目标案例进行测试。
在本发明实施例中,目标案例为案例调整结果中包括的所有测试案例,目标设备为案例调整结果中包括的所有设备,根据案例调整结果可以确定目标案例和目标设备之间的对应关系,根据案例调整结果将多个目标案例分配至多个目标设备。
需要说明的是,案例调整结果中,可以包括案例分配结果中的部分设备和案例,以及新增的设备和案例,用于确定调整后的各个设备与各个案例之间的对应关系,从而实现结合实时的案例执行数据和移动设备运转情况,实现自动化测试案例切分方案动态调整,自主优化测试执行过程,提升自动化测试效率。
本发明实施例提供了一种测试方案,该方案通过监测执行测试任务的设备和设备所用的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据,之后,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对测试案例在设备的分配情况进行调整,得到案例调整结果,最后,根据案例调整结果重新对多个目标案例在多个目标设备进行分配,以便于多个目标设备按照多个目标案例自动进行测试。本发明实施例通过对测试案例执行情况进行监测,结合实时的案例执行时长数据和设备运转情况,实现对测试案例的分配情况进行自动优化和动态调整,可以提升自动化测试的效率。
考虑到为了实现测试任务的自动启动,监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据之前,还可执行如下步骤:
按照第一预设时长间隔获取初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据;根据初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据生成案例分配结果;根据案例分配结果将多个初始案例分配至多个初始设备,以使初始设备按照多个初始案例进行测试。
在本发明实施例中,首先,按照第一预设时长间隔定时调启自动化测试任务,其中,第一预设时长间隔用于确定启动自动化测试任务的频率,可以预先根据实际需求设置,本发明实施例对此不作具体限定。初始设备个数数据、初始设备资源数据和初始案例个数数据可以预先按照需求进行设置,初始案例执行时长数据是根据案例历史执行情况数据预先得到的。其中,初始设备个数数据和初始设备资源数据可以通过移动设备数据库得到,初始案例个数数据和初始案例执行时长数据可以通过测试案例库得到。根据收集到的案例信息及移动设备信息,将案例根据案例历史执行时间,均衡地切分给每台移动设备,得到案例分配结果,之后,根据案例分配结果,将初始案例分配至多个初始设备,以实现调启案例自动执行。
考虑到为了提高案例分配的精准程度,根据案例调整结果将多个目标案例分配至多个目标设备,以使多个目标设备按照多个目标案例进行测试之后,还可以执行如下步骤:
获取多个目标案例的执行时长;根据多个目标案例的执行时长和初始案例执行时长数据生成多个目标案例的预估执行时长;根据预估执行时长更新初始案例执行时长数据。
在本发明实施例中,在按照案例调整结果重新分配测试案例,并执行测试任务后,获取每个目标案例的实际执行时长,再根据每个目标案例的执行时长以及该目标案例的初始案例执行时长计算该目标案例的预估执行时长,在下一次启动测试任务时,将预估执行时长作为初始案例执行时长数据,以便进行更精准的测试案例分配。本发明实施例通过任务完成后的案例预估时间计算,不断优化案例预估时间的计算,使自动化测试案例切分有更有效的历史数据做为基础。
为了实现对案例分配情况调整过程的控制,优化测试过程,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果之前,还可以执行如下步骤:
按照第二预设时长间隔获取设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;判断是否存在设备个数数据的变动量超过第一预设阈值或案例个数数据的变动量超过第二预设阈值;如果是,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果。
在本发明实施例中,第二预设时长间隔用于确定在一次自动化测试任务中,启动对案例分配结果进行调整的频率,第二预设时长间隔可以根据实际需要进行设置,本发明实施例对比不做具体限定。设备个数数据的变动量,可以为设备个数的增加数据和设备个数的减少数据的任一种或两种的组合,案例个数数据的变动量可以为案例个数的增加数据、案例个数的减少数据和修改的案例个数中任一种或几种的组合。第一预设阈值和第二预设阈值可以根据实际需求进行设置,本发明实施例对此不作具体限定。如果存在设备个数数据的变动量超过第一预设阈值或案例个数数据的变动量超过第二预设阈值中至少一种情况,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整。
在实际的软件开发工作中,自动化测试案例不断变更(新增、修改、删除);执行自动化测试的设备也会随着实际需求新增或减少,本发明实施例可以对这些情况进行自主地调整,无需手工对案例进行重新分配,为自动化测试机制的运转提供了基础。
为了保证案例调整结果的准确度,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果,可以按照如下步骤执行:
根据设备个数数据和案例分配结果确定待分配案例的多个设备;根据设备资源数据确定待分配案例的多个设备的可用资源信息;根据案例个数数据和案例分配结果确定待分配的多个案例;根据案例执行时长数据和多个设备的可用资源信息确定多个设备的剩余执行时长;根据剩余执行时长将待分配的多个案例分配至待分配案例的多个设备,得到案例调整结果。
在本发明实施例中,根据新增或减少后的设备个数和案例分配结果中的设备个数确定待分配案例的多个设备。根据设备资源数据可以确定每个设备的可用资源信息,可用资源信息可以用于执行后续的测试任务。根据新增、减少或者变动的案例个数和案例分配结果中的案例个数可以确定接下来需要分配的案例以及每个待分配案例的历史执行时长数据。根据案例执行时长数据和当前可用设备信息可以重新计算每台设备的剩余案例预估时长,最后,基于待分配案例的执行时长数据、初始案例执行时长数据以及设备的剩余案例预估执行时长,将待分配的多个案例分配至待分配案例的多个设备,得到案例调整结果。
本发明实施例通过对自动化测试案例执行情况监测,使得测试方案的调整能够自动地动态地进行。
参见图2所示的测试方法实施例流程示意图,下面以一个具体实施例对该方案进行说明。
基于任务调度机制,可以设计如下几个模块:案例自动分配模块、测试任务及案例运行监控模块、移动设备自动管理模块、测试分析及方案决策模块。设置各个模块内部功能,还要使得各模块之间能够相互协作,模块之间要有相互反馈机制和自主调整机制,使整个系统能够自动运作,自适应优化。通过案例自动分配模块,实现每台移动设备上案例的自动化分配和动态调整;通过测试任务及案例运行监控模块,检测测试任务和案例的执行情况,执行时间,并反馈到测试分析及决策模块,以便测试分析及决策模块实时调整测试策略;通过移动设备自动管理模块,自动将识别新增的移动测试终端并将其加入到测试任务中;自动是被被移除或不可用的移动终端设备,将其推出测试任务,并反馈给案例自动分配模块,以便将案例重新分配给可用的终端设备;通过测试分析及决策模块,实时分析测试监控模块抓取的数据和设备空闲情况,调整测试策略,动态地调整每台机器上的测试案例集合,使每台设备能够均衡地分配测试案例,提升测试并发度,提高自动化测试效率。
此外,还可以设置如下模块:测试案例推送库、PC及移动设备资源池、测试任务调度模块。
测试任务调度模块:整个自动化测试过程由测试任务调度模块进行协调运作;首先自动化调度模块读取自动化测试任务执行计划,根据执行计划调起分析决策模块、案例分配模块,设备管理模块和测试任务运行监控模块;当四大模块启动后,根据调度指令,案例模块分配模块会读取案例库数据,设备管理模块会获取当前PC及移动设备情况,两个模块的数据会发送给分析决策模块;分析策略模块进行分析决策后,会将新的测试执行策略发送给调度;调度模块根据测试策略调度案例分配模块向移动设备推送案例,调度设备管理模块启动移动设备上的自动化案例测试,调度任务运行监控模块对正在执行案例的PC机及移动设备进行监控。移动设备资源池:是PC机及其移动设备的集合,每台PC上可添加多台移动终端设备。测试案例库:保存可执行的自动化测案例及案例执行时常历史数据(首次添加为预估数据)。案例自动分配模块:实时地从测试案例库中读取案例的情况,将案例情况发送给分析决策模块进行分析;同时,也接决策模块新的指令,将案例推送到移动终端测试中。
移动设备自动管理模块:实时检测PC机的资源使用情况,包括PC机上的可用移动终端数,PC机的资源使用情况,将这些数据发送给决策模块进行分析;同时,接收决策模块的指令,运行移动设备上的自动化测试脚本;该模块还会实时监控移动设备的变化(新增、删除),并将设备变动发送给决策模块分析。测试任务及案例运行监控模块:实时监控每台移动终端上案例的执行情况,从PC机获取每个案例的执行时间,获取移动终端上剩余案例的预估测试时间,并将这些数据发送给分析决策模块进行分析。测试策略分析及决策模块:负责给任务调度模块提供自动化测试策略;主要有两大功能,第一向调度模块发送指令,以便案例分配模块,设备管理模块,运行监控模块分别抓取相关数据;第二,根据抓取的实时数据,包括可运行案例的终端数量,每台终端上剩余案例的数量,每个剩余案例的耗时预估,新增到案例库的案例数量及案例耗时预估,对每台设备上的剩余案例进行调整;第三,当每次自动化任务完成后,根据实际每个案例的执行时间,重新计算每个案例的权重,以便下次执行自动化任务时,更均衡地分配每台设备上的案例。
可以基于上述各模块,执行如下步骤:
步骤1:任务调度模块根据配置好的调度策略,按照一定频率定时调启自动化测试任务。
步骤2:自动化测试任务首先向案例分配模块发出指令,从自动化测试案例库读取自动化案例脚本信息(案例数,案例名称)及案例历史执行情况记录(案例脚本历史执行时间),并将案例信息及历史执行情况发送给测试分析决策模块。
步骤3:自动化测试任务向移动设备管理模块发送指令,从移动设备池中读取可用设备信息和运行情况,并将移动设备信息发送给测试分析决策模块。
步骤4:测试分析决策模块根据收集到的案例信息及移动设备信息,将案例根据案例历史执行时间,均衡地切分给每台移动设备,并将测试案例切分方案发送给调度模块。
步骤5:测调度模块根据测试案例切分方案,调动案例分配模块将案例发送给相应设备,并调启案例自动执行。
步骤6:测试案例执行情况监测,当自动化测试任务开始执行,调度模块发送指令给运行监控模块,运行监控模块检测每台移动设备的案例执行情况(检测每个案例的实际执行时间和每台设备剩余案例情况),并将按照一定的时间间隔将执行情况信息发送给分析决策模块。
步骤7:测试案例切分方案动态调整,当分析决策模块收到监测模块发来的案例执行信息时,会结合设备管理模块反馈的当前可用设备信息,重新计算每台设备的剩余案例预估时间,并根据剩余案例运转时间和案例历史切分方案,重新为每台设备切分自动化测试案例,并将新的测试案例切分方案通过调度模块发送给案例分配模块。
步骤8:测试案例重新分配案例分配模块根据收到最新案例分配方案,根据新方案向每台设备发送新的执行案例集合。
步骤9:移动设备收到新的案例集合后,根据新的案例集合执行自动化测试。
步骤10:计算案例执行预估时间,当整个自动化测试任务执行完成后,测试分析决策模块结合测试案例最新的执行时间,和历史执行数据,计算每个案例的预估执行时间;并通过案例分配模块,将案例预估时间信息保存到测试案例库中。
本发明实施例提供了一种测试方法及装置,该方法可以对测试案例执行情况进行监测,对测试案例切分方案进行动态调整,实现测试案例重新分配和测试任务完成后的案例预估时间计算,实现了移动前端自动化测试任务的自动调起,移动设备资源情况的动态监控,移动设备测试案例的动态分配、自动执行,移动设备自动化测试任务执行情况的动态评估和自动化测试任务的自适应调整;使得移动前端自动化测试能够自动执行,动态监控,自适应优化。
本发明实施例还提供一种案例测试装置,参见图3所示的一种案例测试装置结构框图,该装置包括:
监控模块71,用于监控设备和设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;设备根据案例分配结果利用测试案例执行测试任务;决策模块72,用于根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果;分配模块73,用于根据案例调整结果将多个目标案例分配至多个目标设备,以使多个目标设备按照多个目标案例进行测试。
在一个实施例中,参见图4所示的一种案例测试装置结构框图,该装置还包括初始分配模块74,用于:按照第一预设时长间隔获取初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据;根据初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据生成案例分配结果;根据案例分配结果将多个初始案例分配至多个初始设备,以使初始设备按照多个初始案例进行测试。
在一个实施例中,参见图4所示的一种案例测试装置结构框图,该装置还包括更新模块75,用于:获取多个目标案例的执行时长;根据多个目标案例的执行时长和初始案例执行时长数据生成多个目标案例的预估执行时长;根据预估执行时长更新初始案例执行时长数据。
在一个实施例中,参见图4所示的一种案例测试装置结构框图,该装置还包括判断模块76,用于:按照第二预设时长间隔获取设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;判断是否存在设备个数数据的变动量超过第一预设阈值或案例个数数据的变动量超过第二预设阈值;如果是,根据设备个数数据、设备资源数据、案例个数数据和案例执行时长数据对案例分配结果进行调整,得到案例调整结果。
在一个实施例中,分配模块,具体用于:根据设备个数数据和案例分配结果确定待分配案例的多个设备;根据设备资源数据确定待分配案例的多个设备的可用资源信息;根据案例个数数据和案例分配结果确定待分配的多个案例;根据案例执行时长数据和多个设备的可用资源信息确定多个设备的剩余案例预估执行时长;根据剩余案例预估执行时长将待分配的多个案例分配至待分配案例的多个设备,得到案例调整结果。
本发明实施例还提供一种计算机设备,参见图5所示的计算机设备结构示意框图,该计算机设备包括存储器81、处理器82,存储器中存储有可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述任一种方法的步骤。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的计算机设备的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本发明实施例还提供一种具有处理器可执行的非易失的程序代码的计算机可读介质,程序代码使处理器执行上述任一种方法的步骤。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种测试方法,其特征在于,包括:
监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;所述设备用于根据案例分配结果利用所述测试案例执行测试任务;
根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果;
根据所述案例调整结果将多个目标案例分配至多个目标设备,以使所述多个目标设备按照所述多个目标案例进行测试。
2.根据权利要求1所述的方法,其特征在于,监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据之前,还包括:
按照第一预设时长间隔获取初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据;
根据所述初始设备个数数据、所述初始设备资源数据、所述初始案例个数数据和所述初始案例执行时长数据生成案例分配结果;
根据所述案例分配结果将多个初始案例分配至多个初始设备,以使所述初始设备按照所述多个初始案例进行测试。
3.根据权利要求2所述的方法,其特征在于,根据所述案例调整结果将多个目标案例分配至多个目标设备,以使所述多个目标设备按照所述多个目标案例进行测试之后,还包括:
获取所述多个目标案例的执行时长;
根据所述多个目标案例的执行时长和所述初始案例执行时长数据生成所述多个目标案例的预估执行时长;
根据所述预估执行时长更新所述初始案例执行时长数据。
4.根据权利要求1所述的方法,其特征在于,根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果之前,还包括:
按照第二预设时长间隔获取设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;
判断是否存在所述设备个数数据的变动量超过第一预设阈值或所述案例个数数据的变动量超过第二预设阈值;
如果是,根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果。
5.根据权利要求1所述的方法,其特征在于,根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果,包括:
根据所述设备个数数据和案例分配结果确定待分配案例的多个设备;
根据所述设备资源数据确定所述待分配案例的多个设备的可用资源信息;
根据所述案例个数数据和案例分配结果确定待分配的多个案例;
根据所述案例执行时长数据和所述多个设备的可用资源信息确定所述多个设备的剩余案例预估执行时长;
根据所述剩余案例预估执行时长将所述待分配的多个案例分配至所述待分配案例的多个设备,得到案例调整结果。
6.一种测试装置,其特征在于,包括:
监控模块,用于监控设备和所述设备的测试案例,得到设备个数数据、设备资源数据、案例个数数据和案例执行时长数据;所述设备用于根据案例分配结果利用所述测试案例执行测试任务;
决策模块,用于根据所述设备个数数据、所述设备资源数据、所述案例个数数据和所述案例执行时长数据对所述案例分配结果进行调整,得到案例调整结果;
分配模块,用于根据所述案例调整结果将多个目标案例分配至多个目标设备,以使所述多个目标设备按照所述多个目标案例进行测试。
7.根据权利要求6所述的装置,其特征在于,还包括初始分配模块,用于:
按照第一预设时长间隔获取初始设备个数数据、初始设备资源数据、初始案例个数数据和初始案例执行时长数据;
根据所述初始设备个数数据、所述初始设备资源数据、所述初始案例个数数据和所述初始案例执行时长数据生成案例分配结果;
根据所述案例分配结果将多个初始案例分配至多个初始设备,以使所述初始设备按照所述多个初始案例进行测试。
8.根据权利要求7所述的装置,其特征在于,还包括更新模块,用于:
获取所述多个目标案例的执行时长;
根据所述多个目标案例的执行时长和所述初始案例执行时长数据生成所述多个目标案例的预估执行时长;
根据所述预估执行时长更新所述初始案例执行时长数据。
9.一种计算机设备,包括存储器、处理器,所述存储器中存储有可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述权利要求1至5任一项所述的方法的步骤。
10.一种具有处理器可执行的非易失的程序代码的计算机可读介质,其特征在于,所述程序代码使所述处理器执行上述权利要求1至5任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010366939.5A CN111382031B (zh) | 2020-04-30 | 2020-04-30 | 测试方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010366939.5A CN111382031B (zh) | 2020-04-30 | 2020-04-30 | 测试方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111382031A true CN111382031A (zh) | 2020-07-07 |
CN111382031B CN111382031B (zh) | 2023-09-19 |
Family
ID=71222945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010366939.5A Active CN111382031B (zh) | 2020-04-30 | 2020-04-30 | 测试方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111382031B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112015655A (zh) * | 2020-09-01 | 2020-12-01 | 中国银行股份有限公司 | 测试案例的分配方法、装置、设备及可读存储介质 |
CN112199198A (zh) * | 2020-10-28 | 2021-01-08 | 上海特金无线技术有限公司 | 无人机探测的运算资源调配方法、装置、设备与介质 |
CN113641584A (zh) * | 2021-08-17 | 2021-11-12 | 中国银行股份有限公司 | 测试案例执行的监控分析方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060174162A1 (en) * | 2005-02-03 | 2006-08-03 | Satyam Computer Services Ltd. | System and method for self-testing of mobile wireless devices |
US20150121147A1 (en) * | 2013-10-25 | 2015-04-30 | United Parcel Service Of America, Inc. | Methods, apparatuses and computer program products for bulk assigning tests for execution of applications |
CN105955880A (zh) * | 2016-04-22 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种分发自动化测试用例的方法、系统及分发服务器 |
CN110737587A (zh) * | 2019-09-06 | 2020-01-31 | 平安科技(深圳)有限公司 | 一种基于测试案例的测试方法、装置、存储介质和服务器 |
-
2020
- 2020-04-30 CN CN202010366939.5A patent/CN111382031B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060174162A1 (en) * | 2005-02-03 | 2006-08-03 | Satyam Computer Services Ltd. | System and method for self-testing of mobile wireless devices |
US20150121147A1 (en) * | 2013-10-25 | 2015-04-30 | United Parcel Service Of America, Inc. | Methods, apparatuses and computer program products for bulk assigning tests for execution of applications |
CN105955880A (zh) * | 2016-04-22 | 2016-09-21 | 乐视控股(北京)有限公司 | 一种分发自动化测试用例的方法、系统及分发服务器 |
CN110737587A (zh) * | 2019-09-06 | 2020-01-31 | 平安科技(深圳)有限公司 | 一种基于测试案例的测试方法、装置、存储介质和服务器 |
Non-Patent Citations (1)
Title |
---|
庞彦知;卢楠;: "基于专家系统的测试案例自动分析研究" * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112015655A (zh) * | 2020-09-01 | 2020-12-01 | 中国银行股份有限公司 | 测试案例的分配方法、装置、设备及可读存储介质 |
CN112015655B (zh) * | 2020-09-01 | 2023-08-08 | 中国银行股份有限公司 | 测试案例的分配方法、装置、设备及可读存储介质 |
CN112199198A (zh) * | 2020-10-28 | 2021-01-08 | 上海特金无线技术有限公司 | 无人机探测的运算资源调配方法、装置、设备与介质 |
CN113641584A (zh) * | 2021-08-17 | 2021-11-12 | 中国银行股份有限公司 | 测试案例执行的监控分析方法及装置 |
CN113641584B (zh) * | 2021-08-17 | 2024-02-27 | 中国银行股份有限公司 | 测试案例执行的监控分析方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111382031B (zh) | 2023-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111382031A (zh) | 测试方法及装置 | |
CN109165093B (zh) | 一种计算节点集群弹性分配系统及方法 | |
CN105912399B (zh) | 一种任务处理方法、装置及系统 | |
EP2413242B1 (en) | System and method for test strategy optimization | |
US9606899B1 (en) | Software testing using shadow requests | |
CN111026553B (zh) | 离线混部作业的资源调度方法及服务器系统 | |
US20120324471A1 (en) | Control device, management device, data processing method of control device, and program | |
CN109871328B (zh) | 一种软件测试方法及装置 | |
CN102868573B (zh) | Web服务负载云测试方法和装置 | |
US8572621B2 (en) | Selection of server for relocation of application program based on largest number of algorithms with identical output using selected server resource criteria | |
US20210389894A1 (en) | Predicting expansion failures and defragmenting cluster resources | |
CN111399986A (zh) | Pod资源配额配置方法及装置 | |
CN107343164B (zh) | 视频监控任务的分配方法及装置 | |
CN108196959B (zh) | Etl系统的资源管理方法及装置 | |
CN111858200B (zh) | 系统测试中的吞吐量控制方法、装置及电子设备 | |
CN110737717B (zh) | 一种数据库迁移方法及装置 | |
CN114356577A (zh) | 一种系统容量预估方法以及装置 | |
CN111694653A (zh) | 计算系统中调整计算算子类型分布的方法、装置及系统 | |
CN114625507A (zh) | 基于有向无环图的任务调度方法、系统、设备及存储介质 | |
CN111125097B (zh) | 报表调度方法及装置 | |
WO2021082939A1 (zh) | 一种虚拟机调优的方法及装置 | |
CN110874430B (zh) | 网络爬虫调度方法、装置及设备 | |
CN117579626B (zh) | 基于分布式实现边缘计算下的优化方法及系统 | |
CN111258710B (zh) | 一种系统维护方法和装置 | |
CN117808602B (zh) | 基于子账户扩展的热点账户记账方法及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |