CN113157558A - 系统测试方法和装置 - Google Patents
系统测试方法和装置 Download PDFInfo
- Publication number
- CN113157558A CN113157558A CN202110262106.9A CN202110262106A CN113157558A CN 113157558 A CN113157558 A CN 113157558A CN 202110262106 A CN202110262106 A CN 202110262106A CN 113157558 A CN113157558 A CN 113157558A
- Authority
- CN
- China
- Prior art keywords
- tested
- service identifier
- test
- service
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种系统测试方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;根据所述测试范围,对所述待测试系统进行测试。该实施方式能够减少软件测试所需时间,从而节省软件测试所花费的人力和物力。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种系统测试方法和装置。
背景技术
为保障软件产品功能和性能可满足客户需求,软件产品在投入使用前都需要进行系统的软件测试。但由于软件产品所对应的系统往往较为复杂且需支持多种业务,需要花费较长时间来对软件产品进行系统的软件测试,从而消耗较多的人力和物力。
发明内容
有鉴于此,本发明实施例提供一种系统测试方法和装置,能够减少软件测试所需要的时间。
第一方面,本发明实施例提供了一种系统测试方法,包括:
将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
根据所述测试范围,对所述待测试系统进行测试。
可选地,所述将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,包括:
确定所述待测试系统支持的第一业务标识集合;
确定所述基准系统支持的第二业务标识集合;
针对所述第一业务标识集合中的每个第一业务标识:判断所述第二业务标识集合中是否存在与所述第一业务标识对应的第二业务标识;若否,则将所述第一业务标识添加到所述待测试的业务标识集合中。
可选地,所述判断所述第二业务标识集合中是否存在与所述第一业务标识对应的第二业务标识之后,还包括:
若是,则根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识;
若是,则将所述第一业务标识添加到所述待测试的业务标识集合中。
可选地,所述根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识,包括:
获取所述第一业务标识对应的第一程序代码;
获取所述第二业务标识对应的第二程序代码;
对所述第一程序代码及所述第二程序代码进行比对;
若所述第一程序代码与所述第二程序代码不同,则确定所述第一业务标识为差异业务标识。
可选地,所述根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识,包括:
获取所述第一业务标识对应的第一参数信息;
获取所述第二业务标识对应的第二参数信息;
对所述第一参数信息与所述第二参数信息进行比对;
若所述第一参数信息与所述第二参数信息不同,则确定所述第一业务标识为差异业务标识。
可选地,所述对所述第一参数信息及所述第二参数信息进行比对,包括:
对所述第一参数信息中的参数名称与所述第二参数信息中的参数名称进行比对;
和/或,
对所述第一参数信息中的参数类型与所述第二参数信息中的参数类型进行比对;
和/或,
对所述第一参数信息中的参数个数与所述第二参数信息中的参数个数进行比对。
可选地,所述根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,包括:
针对所述待测试的业务标识集合中的每个待测试业务标识:获取测试案例集合;将所述待测试业务标识与所述测试案例集合中的多个测试案例相关联,以生成所述待测试业务标识对应的测试案例集合;
组合每个所述待测试业务标识对应的测试案例集合,生成所述待测试系统的测试范围。
可选地,所述生成所述待测试业务标识对应的测试案例集合之后,还包括:
确定所述待测试业务标识对应的业务属性,所述业务属性包括以下至少之一:请求地址、参数名称、参数类型、返回值名称、返回值类型、业务功能;
根据所述业务属性,确定所述待测试业务标识对应的缺少案例;
将所述缺少案例添加到所述待测试业务标识对应的测试案例集合中。
可选地,所述确定所述待测试业务标识对应的缺少案例之后,还包括:
将所述缺少案例添加到所述测试案例集合中。
可选地,所述根据所述测试范围,对所述待测试系统进行测试,包括:
针对所述测试范围中的每个测试案例:确定所述测试案例的测试情况;根据所述测试案例的测试情况,控制所述测试案例的执行。
可选地,所述确定所述测试案例的测试情况,包括:
获取所述待测试系统的系统日志;
根据所述系统日志,确定所述测试案例的测试情况。
可选地,所述根据所述测试案例的测试情况,控制所述测试案例的执行,包括:
若所述测试情况表征所述测试案例的脚本执行成功,则将所述测试案例的案例状态更新为成功;
若所述测试情况表征所述测试案例的脚本执行失败,则重新执行所述测试案例的脚本。
第二方面,本发明实施例提供了一种系统测试装置,包括:
系统比对模块,用于将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
范围确定模块,用于根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
系统测试模块,用于根据所述测试范围,对所述待测试系统进行测试。
第三方面,本发明实施例提供了一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现上述任一实施例所述的方法。
第四方面,本发明实施例提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现上述任一实施例所述的方法。
上述发明中的一个实施例具有如下优点或有益效果:将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,并根据待测试的业务标识集合,确定待测试系统的测试范围。其中,基准系统为已经过系统测试或者可稳定运行的软件系统,待测试系统为基准系统的改进系统。通过将待测试系统与基准系统比对,确定出待测试的业务标识,并仅对待测试的业务标识进行测试,相比对待测试系统中所有的业务标识都进行测试的方式,能够减少软件测试的测试范围,减少软件测试所需时间,从而节省软件测试所花费的人力和物力。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是本发明一个实施例提供的一种系统测试方法的应用场景的示意图;
图2是本发明的一个实施例提供的一种系统测试方法的流程的示意图;
图3是本发明的一个实施例提供的一种确定待测试的业务标识集合方法的流程的示意图;
图4是本发明的一个实施例提供的另一种系统测试方法的流程的示意图;
图5是本发明的一个实施例提供的一种确定测试范围的框架示意图;
图6是本发明的一个实施例提供的一种系统测试过程控制方法的流程的示意图;
图7是本发明的一个实施例提供的一种系统测试装置的结构示意图;
图8是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
随着各领域的业务快速创新发展,IT系统研发也往敏捷化快速转型。为了保证IT系统的高质量交付,需进行快速有效的验证测试。如何对快速的测试过程的有效性进行跟踪,确保进行了有效的测试,成为了急需解决的问题。
现有的测试进度管理方式,主要依赖缺陷管理工具。测试哪些案例,案例的执行进度以及缺陷的提交,完全由测试人员自主进行登记。测试人员是否真正按照实际情况进行进度登记没有实际有效的判断方式。
通常情况下使用传统的缺陷管理工作,首先测试进度和缺陷的真实性难以保障,如果实施人员随意登记测试进度,或者发现缺陷并未登记,无法快速有效的追踪,只能通过人工走查复测的方式,而人工复查的方式成本高,耗时间,可谓费时费力。
基于此,本发明实施例提供了一种有效跟踪测试范围以及范围是否被有效执行的方式,来解决测试过程中有效性监督的问题。利用对后台各业务执行情况的监测,可有效的对执行情况进行跟踪,解决快速测试进度下的执行有效性的问题。
图1是本发明一个实施例提供的一种系统测试方法的应用场景的示意图。如图1所示,系统架构100可以包括测试设备101、102、103,网络104和服务器105。网络104用以在测试设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
测试设备101、102、103中部署有需要进行测试的软件系统。测试设备101、102、103可以是手机、笔记本、服务器、平板电脑、膝上型便携计算机等等。
服务器105确定测试设备101、102、103中部署的待测试系统对应的基准系统,将待测试系统与基准系统进行比对,以确定待测试的业务标识集合;根据所述待测试的业务标识集合,确定所述待测试系统的测试范围;根据所述测试范围,对测试设备101、102、103中部署的待测试系统进行测试。
需要说明的是,本发明实施例所提供的系统测试方法一般由服务器105执行,相应地,系统测试装置一般设置于服务器105中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图2是本发明的一个实施例提供的一种系统测试方法的流程的示意图,如图2所示,该方法包括:
步骤201:将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,待测试系统为基准系统的改进系统。
待测试系统为基准系统的改进系统。可通过不同的版本表示基准系统和改进系统之间的关系。由于基准系统为已经过系统测试或者可稳定运行的软件系统,因此只需要找出待测试系统中不同于基准系统的业务标识,就可实现对待测试系统的针对性测试,而无需对待测试系统进行全面测试。
待测试系统可支持多种业务,不同业务可通过业务标识进行标识。可根据不同的待测系统支持的不同业务及系统开发情况,灵活选择业务标识。例如,在银行系统中,以交易码标识不同的业务类型,因此,可选择交易码作为业务标识的具体实现形式。
待测试的业务标识集合中包括至少一个业务标识。待测试的业务标识集合中待测试业务标识,为基于基准系统的比对,需要对待测试系统进行针对性测试的功能模块所对应的业务标识。待测试业务标识可以是待测试系统中存在而基准系统中不存在的业务标识,也可以是待测试系统中进行升级或完善的业务功能所对应的业务标识。
步骤202:根据待测试的业务标识集合,确定待测试系统的测试范围,测试范围包括多个测试案例。
步骤203:根据测试范围,对待测试系统进行测试。
在本发明实施例中,将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,并根据待测试的业务标识集合,确定待测试系统的测试范围。其中,基准系统为已经过系统测试或者可稳定运行的软件系统,待测试系统为基准系统的改进系统。通过将待测试系统与基准系统比对,确定出待测试的业务标识,并仅对待测试的业务标识进行测试,相比对待测试系统中所有的业务标识都进行测试的方式,能够减少软件测试的测试范围,进而减少软件测试所需时间。因此,能够解决现有技术中软件测试所花费的人力和物力较多的问题。
在本发明的一个实施例中,确定待测试系统的测试范围,包括:
针对待测试的业务标识集合中的每个待测试业务标识:获取测试案例集合;将待测试业务标识与测试案例集合中的多个测试案例相关联,以生成待测试业务标识对应的测试案例集合;
组合每个待测试业务标识对应的测试案例集合,生成待测试系统的测试范围。
测试案例集合中包括多个预设测试案例。可根据实际需求和系统开发运行情况设计测试案例集合,以通过测试案例集合对软件系统的功能和效率进行检测。通过业务标识集合中的每个业务标识与测试案例集合中的多个测试案例相关联,即可获得待测试系统的测试范围。
在本发明的一个实施例中,生成待测试业务标识对应的测试案例集合之后,还包括:确定待测试业务标识对应的业务属性,业务属性包括以下至少之一:请求地址、参数名称、参数类型、返回值名称、返回值类型、业务功能;根据业务属性,确定待测试业务标识对应的缺少案例;将缺少案例添加到待测试业务标识对应的测试案例集合中。
测试案例集合中的测试案例可能不够全面,而每个业务标识都可由该业务所对应的特有功能或性能要求,因此,可根据每种业务不同的业务属性,确定该业务标识的缺少案例,并将缺少案例添加到待测试业务标识对应的测试案例集合中,以使待测试系统的测试范围更加完整。
进一步地,确定待测试业务标识对应的缺少案例之后,还可将缺少案例添加到测试案例集合中,以使测试案例集合中包括更加完整和丰富的测试案例,为后续的软件测试提供帮助。
图3是本发明的一个实施例提供的一种确定待测试的业务标识集合方法的流程的示意图,如图3所示,该方法包括:
步骤301:确定待测试系统支持的第一业务标识集合。
可通过多种方式,确定待测试系统支持的第一业务标识集合。如,可通过系统架构文档、详细设计文档、接口设计文档等,确定待测试系统支持的第一业务标识集合,也可直接基于待测试系统的代码,确定待测试系统支持的第一业务标识集合。
步骤302:确定基准系统支持的第二业务标识集合。
可通过多种方式,确定待测试系统支持的第二业务标识集合。如,可通过系统架构文档、详细设计文档、接口设计文档等,确定待测试系统支持的第二业务标识集合,也可直接基于待测试系统的代码,确定待测试系统支持的第二业务标识集合。
步骤303:针对第一业务标识集合中的每个第一业务标识:判断第二业务标识集合中是否存在与第一业务标识对应的第二业务标识。
如果第二业务标识集合中不存在与第一业务标识对应的第二业务标识,则执行步骤304;如果第二业务标识集合中存在与第一业务标识对应的第二业务标识,则执行步骤305。
步骤304:将第一业务标识添加到待测试的业务标识集合中。
步骤305:根据第一业务标识及第二业务标识,判断第一业务标识是否为差异业务标识。
待测试系统针对基准系统中的某些功能模块进行了升级和改进,该功能系统所对应的业务标识为差异业务标识。可通过对业务标识对应的代码、参数及返回值等进行比对来确定差异业务标识。
在本发明的一个实施例中,可通过代码比对的方式来确定差异业务标识,包括:获取第一业务标识对应的第一程序代码;获取第二业务标识对应的第二程序代码;对第一程序代码及第二程序代码进行比对;若第一程序代码与第二程序代码不同,则确定第一业务标识为差异业务标识。
如果在待测试系统和基准系统中业务标识对应的代码不同,则可确定待测试系统针对该业务标识对应的功能模块进行了升级改进,则该业务标识为差异业务标识。
在本发明的一个实施例中,可通过参数比对的方式确定差异业务标识,包括:获取第一业务标识对应的第一参数信息;获取第二业务标识对应的第二参数信息;对第一参数信息与第二参数信息进行比对;若第一参数信息与第二参数信息不同,则确定第一业务标识为差异业务标识。
具体地,可通过如下方式,对第一参数信息及第二参数信息进行比对,包括:对第一参数信息中的参数名称与第二参数信息中的参数名称进行比对,对第一参数信息中的参数类型与第二参数信息中的参数类型进行比对,对第一参数信息中的参数个数与第二参数信息中的参数个数进行比对等。
如果待测试系统中的参数信息中的参数名称、参数类型或参数个数发生了变化,则可确定待测试系统针对该业务标识对应的功能模块进行了升级改进,则该业务标识为差异业务标识。
如果第一业务标识为差异业务标识,则执行步骤306。如果第一业务标识不为差异业务标识,则结束对当前第一业务标识的处理,继续进行下一第一业务标识的处理,直至所有第一业务标识均处理完毕。
步骤306:将第一业务标识添加到待测试的业务标识集合中。
执行步骤306之后,结束对当前第一业务标识的处理,继续进行下一第一业务标识的处理,直至所有第一业务标识均处理完毕。
在本发明实施例中,通过将待测试系统的第一业务标识,与基准系统的第二业务标识逐一进行比对的方式,可系统准确地确定待测试系统中哪些业务标识对应的功能模块发生了升级改进,准确地确定出需要测试的业务标识集合,从而更系统完整地确定出待测试系统对应的测试范围。
图4是本发明的一个实施例提供的另一种系统测试方法的流程的示意图,如图4所示,该方法包括:
步骤401:将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,待测试系统为基准系统的改进系统。
步骤402:根据待测试的业务标识集合,确定待测试系统的测试范围,测试范围包括多个测试案例。
步骤403:针对测试范围中的每个测试案例:确定测试案例的测试情况。
可通过多种方式确定测试案例的测试情况。通常情况下系统日志中包括有系统完整的运行状况,可获取待测试系统的系统日志;并根据系统日志,确定测试案例的测试情况。此外,还可通过监控服务器运行情况、监控系统返回值等方式确定测试案例的测试情况。
步骤404:根据测试案例的测试情况,控制测试案例的执行。
在本发明的一个实施例中,控制测试案例的执行,包括:
若测试情况表征测试案例的脚本执行成功,则将测试案例的案例状态更新为成功;
若测试情况表征测试案例的脚本执行失败,则重新执行测试案例的脚本。
通过设置案例更新状态,可准确获悉测试案例的执行情况。并在测试案例执行失败时,重新执行测试案例的脚本。如果某一测试案例执行失败的次数超过预设的次数阈值,则不再重新执行该测试案例的脚本,发送警报给相关技术人员。
在本发明实施例中,根据测试案例的测试情况,控制测试案例的执行,以确保每个测试案例都真实有效地被执行,减少测试过程中人为因素的影响,使测试结果更加全面有效。
为使本发明实施例的方法更加便于理解,以下以对一个银行系统的测试过程进行讲解。银行系统以交易码标识不同的业务类型,因此选择交易码作为业务标识的具体实现形式。
基于交易码监测的测试充分性监控方法主要流程是通过版本比对的方式确定本次需要测试的交易码范围,通过交易码与测试案例进行关联,明确本次需要测试的案例,再通过对交易码执行日志的检核,来确定交易码是否已经被执行,进而确认案例是否本真实的执行过。该方法包括:
步骤一、确定待测试系统的测试范围。图5是本发明的一个实施例提供的一种确定测试范围的框架示意图。如图5所示,将本次需要投产的版本与上一次投产的版本进行版本比对。比对的方式主要是通过对版本的交易码进行比对,首先梳理出本次投产版本与上一次投产版本的交易码明细,然后分析本次投产版本是否存在新增交易码。对于存量交易码,包括分析。交易码内部的代码是否存在差异,交易码的参数是否存在差异。最后得出本次投产新增和变更的交易码明细。
将本次新增和变更的交易码与测试案例进行关联匹配,明确案例与交易码的对应关系,对于缺少的案例进行相应的补充,最终明确本次需要测试的案例范围,也即测试范围。
步骤二、对待测试系统的测试过程的充分性进行监测。图6是本发明的一个实施例提供的一种系统测试过程控制方法的流程的示意图。如图6所示,在执行开始前,首先确定本次测试用的测试环境,然后在测试环境部署相关的交易码监测工具,待监测工具部署完成后,即可开始测试案例的执行。监测工具每日定时通过抓取报文日志的方式,对后台执行日志的返回值进行分析,确定和执行案例相关的交易码是否被正确执行以及被执行的次数。
根据交易码监控的执行情况,更新测试案例的执行情况以及缺陷的登记情况。对于执行失败的案例,多次监控其关联的交易码执行情况,直到正确被执行。当所有案例关联的交易码都被正确执行通过后,才能证明本次投产版本的测试执行有效性。
在本发明实施例中,首先通过对前后两次投产版本的比对,得出本次需要测试的交易码,更加准确的反映了本次测试的范围。其次,通过对交易码执行情况的监测,能更加准确的反映测试进度的情况,整体确保测试的真实有效性。
图7是本发明的一个实施例提供的一种系统测试装置的结构示意图,包括:
系统比对模块701,用于将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
范围确定模块702,用于根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
系统测试模块703,用于根据所述测试范围,对所述待测试系统进行测试。
可选地,系统比对模块701具体用于:
确定所述待测试系统支持的第一业务标识集合;
确定所述基准系统支持的第二业务标识集合;
针对所述第一业务标识集合中的每个第一业务标识:判断所述第二业务标识集合中是否存在与所述第一业务标识对应的第二业务标识;若否,则将所述第一业务标识添加到所述待测试的业务标识集合中。
可选地,系统比对模块701具体用于:
若是,则根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识;
若是,则将所述第一业务标识添加到所述待测试的业务标识集合中。
可选地,系统比对模块701具体用于:
获取所述第一业务标识对应的第一程序代码;
获取所述第二业务标识对应的第二程序代码;
对所述第一程序代码及所述第二程序代码进行比对;
若所述第一程序代码与所述第二程序代码不同,则确定所述第一业务标识为差异业务标识。
可选地,系统比对模块701具体用于:
获取所述第一业务标识对应的第一参数信息;
获取所述第二业务标识对应的第二参数信息;
对所述第一参数信息与所述第二参数信息进行比对;
若所述第一参数信息与所述第二参数信息不同,则确定所述第一业务标识为差异业务标识。
可选地,系统比对模块701具体用于:
对所述第一参数信息中的参数名称与所述第二参数信息中的参数名称进行比对;
和/或,
对所述第一参数信息中的参数类型与所述第二参数信息中的参数类型进行比对;
和/或,
对所述第一参数信息中的参数个数与所述第二参数信息中的参数个数进行比对。
可选地,范围确定模块702具体用于:
针对所述待测试的业务标识集合中的每个待测试业务标识:获取测试案例集合;将所述待测试业务标识与所述测试案例集合中的多个测试案例相关联,以生成所述待测试业务标识对应的测试案例集合;
组合每个所述待测试业务标识对应的测试案例集合,生成所述待测试系统的测试范围。
可选地,范围确定模块702还用于:
确定所述待测试业务标识对应的业务属性,所述业务属性包括以下至少之一:请求地址、参数名称、参数类型、返回值名称、返回值类型、业务功能;
根据所述业务属性,确定所述待测试业务标识对应的缺少案例;
将所述缺少案例添加到所述待测试业务标识对应的测试案例集合中。
可选地,范围确定模块702还用于:
将所述缺少案例添加到所述测试案例集合中。
可选地,范围确定模块702还用于:
针对所述测试范围中的每个测试案例:确定所述测试案例的测试情况;根据所述测试案例的测试情况,控制所述测试案例的执行。
可选地,系统测试模块703具体用于:
获取所述待测试系统的系统日志;
根据所述系统日志,确定所述测试案例的测试情况。
可选地,系统测试模块703具体用于:
若所述测试情况表征所述测试案例的脚本执行成功,则将所述测试案例的案例状态更新为成功;
若所述测试情况表征所述测试案例的脚本执行失败,则重新执行所述测试案例的脚本。
本发明实施例提供了一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述任一实施例的方法。
下面参考图8,其示出了适于用来实现本发明实施例的终端设备的计算机系统800的结构示意图。图8示出的终端设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示,计算机系统800包括中央处理单元(CPU)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储部分808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有系统800操作所需的各种程序和数据。CPU 801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
以下部件连接至I/O接口805:包括键盘、鼠标等的输入部分806;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分807;包括硬盘等的存储部分808;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至I/O接口805。可拆卸介质811,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器810上,以便于从其上读出的计算机程序根据需要被安装入存储部分808。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分809从网络上被下载和安装,和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(CPU)801执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括系统比对模块、范围确定模块及系统测试模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,系统比对模块还可以被描述为“将待测试系统与基准系统进行比对,以确定待测试的业务标识集合的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:
将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
根据所述测试范围,对所述待测试系统进行测试。
根据本发明实施例的技术方案,将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,并根据待测试的业务标识集合,确定待测试系统的测试范围。其中,基准系统为已经过系统测试或者可稳定运行的软件系统,待测试系统为基准系统的改进系统。通过将待测试系统与基准系统比对,确定出待测试的业务标识,并仅对待测试的业务标识进行测试,相比对待测试系统中所有的业务标识都进行测试的方式,能够减少软件测试的测试范围,减少软件测试所需时间,从而节省软件测试所花费的人力和物力。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (15)
1.一种系统测试方法,其特征在于,包括:
将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
根据所述测试范围,对所述待测试系统进行测试。
2.根据权利要求1所述的方法,其特征在于,所述将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,包括:
确定所述待测试系统支持的第一业务标识集合;
确定所述基准系统支持的第二业务标识集合;
针对所述第一业务标识集合中的每个第一业务标识:判断所述第二业务标识集合中是否存在与所述第一业务标识对应的第二业务标识;若否,则将所述第一业务标识添加到所述待测试的业务标识集合中。
3.根据权利要求2所述的方法,其特征在于,所述判断所述第二业务标识集合中是否存在与所述第一业务标识对应的第二业务标识之后,还包括:
若是,则根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识;
若是,则将所述第一业务标识添加到所述待测试的业务标识集合中。
4.根据权利要求3所述的方法,其特征在于,所述根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识,包括:
获取所述第一业务标识对应的第一程序代码;
获取所述第二业务标识对应的第二程序代码;
对所述第一程序代码及所述第二程序代码进行比对;
若所述第一程序代码与所述第二程序代码不同,则确定所述第一业务标识为差异业务标识。
5.根据权利要求3所述的方法,其特征在于,所述根据所述第一业务标识及所述第二业务标识,判断所述第一业务标识是否为差异业务标识,包括:
获取所述第一业务标识对应的第一参数信息;
获取所述第二业务标识对应的第二参数信息;
对所述第一参数信息与所述第二参数信息进行比对;
若所述第一参数信息与所述第二参数信息不同,则确定所述第一业务标识为差异业务标识。
6.根据权利要求5所述的方法,其特征在于,所述对所述第一参数信息及所述第二参数信息进行比对,包括:
对所述第一参数信息中的参数名称与所述第二参数信息中的参数名称进行比对;
和/或,
对所述第一参数信息中的参数类型与所述第二参数信息中的参数类型进行比对;
和/或,
对所述第一参数信息中的参数个数与所述第二参数信息中的参数个数进行比对。
7.根据权利要求1所述的方法,其特征在于,所述根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,包括:
针对所述待测试的业务标识集合中的每个待测试业务标识:获取测试案例集合;将所述待测试业务标识与所述测试案例集合中的多个测试案例相关联,以生成所述待测试业务标识对应的测试案例集合;
组合每个所述待测试业务标识对应的测试案例集合,生成所述待测试系统的测试范围。
8.根据权利要求7所述的方法,其特征在于,所述生成所述待测试业务标识对应的测试案例集合之后,还包括:
确定所述待测试业务标识对应的业务属性,所述业务属性包括以下至少之一:请求地址、参数名称、参数类型、返回值名称、返回值类型、业务功能;
根据所述业务属性,确定所述待测试业务标识对应的缺少案例;
将所述缺少案例添加到所述待测试业务标识对应的测试案例集合中。
9.根据权利要求8所述的方法,其特征在于,所述确定所述待测试业务标识对应的缺少案例之后,还包括:
将所述缺少案例添加到所述测试案例集合中。
10.根据权利要求1所述的方法,其特征在于,所述根据所述测试范围,对所述待测试系统进行测试,包括:
针对所述测试范围中的每个测试案例:确定所述测试案例的测试情况;根据所述测试案例的测试情况,控制所述测试案例的执行。
11.根据权利要求10所述的方法,其特征在于,所述确定所述测试案例的测试情况,包括:
获取所述待测试系统的系统日志;
根据所述系统日志,确定所述测试案例的测试情况。
12.根据权利要求10所述的方法,其特征在于,所述根据所述测试案例的测试情况,控制所述测试案例的执行,包括:
若所述测试情况表征所述测试案例的脚本执行成功,则将所述测试案例的案例状态更新为成功;
若所述测试情况表征所述测试案例的脚本执行失败,则重新执行所述测试案例的脚本。
13.一种系统测试装置,其特征在于,包括:
系统比对模块,用于将待测试系统与基准系统进行比对,以确定待测试的业务标识集合,所述待测试系统为所述基准系统的改进系统,所述待测试系统用于支持至少一种业务,所述待测试的业务标识集合中包括至少一个业务标识;
范围确定模块,用于根据所述待测试的业务标识集合,确定所述待测试系统的测试范围,所述测试范围包括多个测试案例;
系统测试模块,用于根据所述测试范围,对所述待测试系统进行测试。
14.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-12中任一所述的方法。
15.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-12中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110262106.9A CN113157558B (zh) | 2021-03-10 | 2021-03-10 | 系统测试方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110262106.9A CN113157558B (zh) | 2021-03-10 | 2021-03-10 | 系统测试方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113157558A true CN113157558A (zh) | 2021-07-23 |
CN113157558B CN113157558B (zh) | 2023-05-26 |
Family
ID=76886724
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110262106.9A Active CN113157558B (zh) | 2021-03-10 | 2021-03-10 | 系统测试方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113157558B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105808437A (zh) * | 2016-03-09 | 2016-07-27 | 广州彩瞳网络技术有限公司 | 基于测试用例数据表的自动化测试方法及系统 |
CN110990274A (zh) * | 2019-11-29 | 2020-04-10 | 中国银行股份有限公司 | 一种生成测试案例的数据处理方法、装置及系统 |
CN111475401A (zh) * | 2020-03-19 | 2020-07-31 | 平安国际智慧城市科技股份有限公司 | 一种测试方法及相关设备 |
-
2021
- 2021-03-10 CN CN202110262106.9A patent/CN113157558B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105808437A (zh) * | 2016-03-09 | 2016-07-27 | 广州彩瞳网络技术有限公司 | 基于测试用例数据表的自动化测试方法及系统 |
CN110990274A (zh) * | 2019-11-29 | 2020-04-10 | 中国银行股份有限公司 | 一种生成测试案例的数据处理方法、装置及系统 |
CN111475401A (zh) * | 2020-03-19 | 2020-07-31 | 平安国际智慧城市科技股份有限公司 | 一种测试方法及相关设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113157558B (zh) | 2023-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10120783B2 (en) | Determining test case efficiency | |
CN112395616B (zh) | 漏洞处理的方法、装置及计算机设备 | |
CN110278201B (zh) | 安全策略评价方法及装置、计算机可读介质和电子设备 | |
CN103973858B (zh) | 移动终端的自动测试系统 | |
CN110990289B (zh) | 一种自动提交bug的方法、装置、电子设备及存储介质 | |
CN112100070A (zh) | 版本缺陷的检测方法、装置、服务器及存储介质 | |
CN110780904A (zh) | 一种应用更新方法及装置 | |
CN116431522A (zh) | 一种低代码对象存储网关自动化测试方法及系统 | |
CN113157558B (zh) | 系统测试方法和装置 | |
CN113360365A (zh) | 一种流程测试方法和流程测试系统 | |
CN112905466B (zh) | 动态可修复案例的软件测试方法及装置 | |
CN114840429A (zh) | 识别版本冲突的方法、装置、设备、介质和程序产品 | |
CN114942887A (zh) | 一种程序安全测试方法、装置、设备和介质 | |
CN114722401A (zh) | 一种设备安全测试方法、装置、设备及存储介质 | |
CN114064510A (zh) | 功能测试方法、装置、电子设备和存储介质 | |
CN113326196A (zh) | 一种测试用例的方法及装置 | |
CN112948195A (zh) | 接口测试的方法、装置、电子设备和存储介质 | |
CN116401113B (zh) | 一种异构众核架构加速卡的环境验证方法、装置及介质 | |
CN111949991A (zh) | 漏洞扫描方法、装置、设备和存储介质 | |
CN115190008B (zh) | 故障处理方法、故障处理装置、电子设备及存储介质 | |
CN112181701B (zh) | 一种定位异常业务请求的方法和装置 | |
CN116795700A (zh) | 一种接口程序的异常故障的前置定位方法和装置 | |
CN116467209A (zh) | 性能测试方法、装置、设备及存储介质 | |
CN116737565A (zh) | 一种测试方法和装置 | |
CN113344584A (zh) | 基于黑名单的数据反哺方法、装置、系统及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |