CN109344056A - 一种测试方法以及测试装置 - Google Patents
一种测试方法以及测试装置 Download PDFInfo
- Publication number
- CN109344056A CN109344056A CN201811045469.1A CN201811045469A CN109344056A CN 109344056 A CN109344056 A CN 109344056A CN 201811045469 A CN201811045469 A CN 201811045469A CN 109344056 A CN109344056 A CN 109344056A
- Authority
- CN
- China
- Prior art keywords
- case
- test
- target detection
- target
- data library
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种测试方法以及测试装置，该测试方法包括：获取多个生产数据库对应的基准测试数据以及日志文件；根据每个生产数据库的基准测试数据以及日志文件，创建目标应用服务对应的基准测试用例，以获取多个基准测试用例；依据目标应用服务在待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例；依据目标测试用例对待测数据库进行测试，得到目标应用服务在待测数据库上运行情况的测试结果。该测试方法将多个基准测试用例进行融合得到目标测试用例，依据目标测试用例对目标应用服务在待测数据库上的运行情况进行测试，提高了目标测试用例的覆盖率，提高了测试的准确性，减小了误判情况的发生。
Description
技术领域
本发明属于数据库技术领域，更具体地，涉及一种测试方法以及测试装置。
背景技术
数据库是数据有组织的集合，为各种计算机应用提供数据服务，例如查询、记录、更新等。随着信息化技术的发展，各种计算机应用层出不穷，为了保证数据库性能的稳定性，需要对数据库的性能、功能等进行测试。
为了提高数据库系统测试的精准性，保障数据库满足对特定应用场景的功能要求和性能要求，模拟特定计算机应用对待测数据库进行测试成为广泛使用的测试方法。目前，模拟计算机应用服务进行数据库系统测试的传统方法有两种：(1)搭建计算机应用服务，通过该应用服务对待测试数据库服务进行系统测试；(2)搭建计算机应用服务，该应用服务连接一个代理程序，代理程序连接生产数据库服务以及待测数据库服务，通过代理程序将应用服务的数据库请求同时发送至生产数据库服务和待测数据库服务进行对比测试。
前述方法在实施过程中都需要依托于计算机应用服务的程序集对待测数据库进行测试，但是待测数据库提供的功能愈来愈复杂，使得从数据规模到结构化查询语言SQL(Structured Query Language，简写为SQL)的类型可能都不尽相同，由此带来的数据库系统测试范围越来越大，计算机应用服务的程序集的需求也越来越多。此外，在实际使用过程中，同一个应用服务可能在多个生产数据库上运行，且在不同的生产数据库上的运行方式不同。为了节省成本或者基于其他因素的考虑，现需要设计一个数据库，使得应用服务可以在该数据库运行，且能满足多种运行方式。
那么，如何获取合适的应用服务的程序集，对数据库进行测试以保证应用服务在数据库上能正常运行，是当前数据库厂商亟待解决的技术问题。但是，作为数据库厂商，往往难以部署第三方所需要的应用服务的程序集，同时，如果应用服务的程序集无法覆盖全部的操作情况时，会引起测试结果不准确的问题，进而导致对待测数据库的性能、功能产生误判情况的发生，测试结果的真实性和全面性存在缺陷。
鉴于此，克服该现有技术所存在的缺陷是本技术领域亟待解决的问题。
发明内容
针对现有技术的以上缺陷或改进需求，本发明提供了一种测试方法以及测试装置，其目的在于基于生产数据库的日志文件创建目标测试用例，模拟目标应用服务的实际使用场景，提高了测试用例的覆盖率以及实用性。另一方面，将多个基准测试用例进行融合得到目标测试用例，依据目标测试用例对目标应用服务在待测数据库上的运行情况进行测试，提高了测试的准确性，减小了误判情况的发生，由此解决难以部署第三方所需要的应用服务的程序集，同时，如果应用服务的程序集与待测数据库不匹配时，会引起测试结果不准确的问题，进而导致对待测数据库的性能、功能产生误判情况的发生，测试结果的真实性和全面性存在缺陷的技术问题。
为实现上述目的，本发明实施例采用如下技术方案：
第一方面，本发明提供了一种测试方法，目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上的运行方式存在差异；
所述测试方法包括：
获取多个生产数据库对应的基准测试数据以及日志文件；
根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例，其中，每个基准测试用例与对应的生产数据库成一一映射关系；
依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例；
依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
优选地，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上运行的时间段互不重合；
所述依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例包括：
获取所述目标应用服务在所述待测数据库上运行时的访问时间；
依据所述访问时间将多个基准测试用例进行有序融合，得到基于时间段界定的目标测试用例。
优选地，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上的访问对象互不相同；
所述依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例包括：
获取所述目标应用服务在所述待测数据库上运行时的目标访问对象；
依据所述目标访问对象将多个基准测试用例进行融合，得到基于访问对象界定的目标测试用例。
优选地，所述测试方法还包括：
判断确定所述目标测试用例是否适用于所述待测数据库；
若所述目标测试用例适用于所述待测数据库，则依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
优选地，所述判断确定所述目标测试用例是否适用于所述待测数据库包括：
获取所述生产数据库的基准测试环境以及所述待测数据库的目标测试环境；
将所述基准测试环境与所述目标测试环境进行相似度匹配，获取所述基准测试环境和所述目标测试环境之间的相似度；
判断确定所述基准测试环境和所述目标测试环境之间的相似度是否大于预设的相似度阈值；
若所述基准测试环境和所述目标测试环境之间的相似度大于预设的相似度阈值，则所述目标测试用例适用于所述待测数据库。
优选地，所述基准测试环境和所述目标测试环境包括操作系统平台、操作系统版本、数据规模、客户端并发规模、硬件资源中的一项或者多项。
优选地，所述测试方法还包括：
按照预设的时间间隔重新获取多个生产数据库的基准测试数据以及日志文件；
依据重新获取到的基准测试数据以及日志文件，创建新的目标测试用例；
判断确定所述新的目标测试用例与历史目标测试用例之间的差异是否大于预设的差异阈值，其中，所述历史目标测试用例为当前对所述待测数据库进行测试的目标测试用例；
若所述新的目标测试用例与所述历史目标测试用例之间的差异大于预设的差异阈值，则依据所述新的目标测试用例与所述历史目标测试用例之间的差异获取差异测试用例，依据所述新的目标测试用例和/或所述差异测试用例对所述待测数据库进行测试。
优选地，所述根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例包括：
解析每个生产数据库对应的日志文件，获取每个生产数据库对应的操作命令集；
根据每个生产数据库对应的基准测试数据以及相应的操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例。
优选地，所述根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例还包括：
按照预设的处理条件对所述操作命令集进行过滤处理，得到第一操作命令集；
执行所述第一操作命令集，剔除执行失败的操作命令得到目标操作命令集；
所述根据每个生产数据库对应的基准测试数据以及相应的操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例包括：
根据每个生产数据库对应的基准测试数据以及相应的目标操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例。
第二方面，本发明提供一种测试装置，所述测试装置包括至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被程序设置为执行第一方面所述的测试方法。
第三方面，本发明还提供了一种非易失性计算机存储介质，所述计算机存储介质存储有计算机可执行指令，该计算机可执行指令被一个或多个处理器执行，用于完成第一方面所述的测试的方法。
总体而言，通过本发明所构思的以上技术方案与现有技术相比，具有如下有益效果：本发明的测试方法一方面基于多个生产数据库的日志文件创建目标测试用例，由于日志文件能够真实的反映目标应用服务的实际使用场景，因此，基于日志文件创建的目标测试用例能够很好的模拟目标应用服务的实际使用场景，提高了目标测试用例的覆盖率以及实用性。另一方面，由于目标应用服务在不同的生产数据库上的运行方式不同，为了提高目标测试用例的覆盖率，将多个基准测试用例进行融合得到目标测试用例，依据目标测试用例对目标应用服务在待测数据库上的运行情况进行测试，提高了测试的准确性，减小了误判情况的发生。
附图说明
图1是本发明实施例提供的一种测试方法的流程示意图；
图2是图1中步骤12一具体实施例的流程示意图；
图3是图1中步骤12另一具体实施例的流程示意图；
图4是本发明实施例提供的另一种测试方法的流程示意图；
图5是图4中步骤23一具体实施例的流程示意图；
图6是本发明实施例提供的又一种测试方法的流程示意图；
图7是本发明实施例提供的一种测试装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
实施例1：
在实际应用场景中，同一个目标应用服务可能在多个生产数据库上运行，且目标应用服务在每个生产数据库上的运行方式存在差异。为了节省成本或者基于其他因素的考虑，现需要设计一个新的数据库，使得目标应用服务可以在该数据库运行，且能满足多种运行方式。那么如何采用合适的测试用例对该数据库进行测试，以保证目标应用服务在数据库上能正常运行，是当前需要解决的问题。
本实施例提供了一种测试方法，基于目标应用服务在多个不同数据库上运行时产生的日志文件生成多个基准测试用例，并将多个基准测试用例进行融合，得到目标测试用例，依据目标测试用例对目标应用服务在待测数据库上的运行情况进行测试，以确定目标应用服务在待测数据库上的运行情况，可以有效提高了测试的准确性，减小了误判情况的发生。下面结合图1～图3，具体说明本实施例的测试方法的执行过程。
步骤10：获取多个生产数据库对应的基准测试数据以及日志文件。
在本实施例中，首先，依次获取每个生产数据库的基准测试数据以及日志文件，进而得到多个生产数据库对应的基准测试数据以及日志文件。其中，基准测试数据文件是直接从生产数据库中导出而得到的，以获取逻辑形式的基准数据文件。具体而言，可以将多个生产数据库的基准测试数据文件导入到待测数据库，即得到待测数据库所需要使用的基准测试数据。
在实际应用场景中，生产数据库在运行时，会产生相应的日志文件，并将日志文件存储在本地或远端存储设备上。其中，用户在对应用服务执行操作时，在底层上反映的是应用服务对应的应用程序对数据库的操作行为，而日志文件主要用于记录应用程序对数据库的操作行为。即，通过日志文件可以了解到应用程序对数据库进行了哪些操作以及具体的操作过程。举例说明，应用程序登陆数据库，并基于业务逻辑对数据库的数据进行了查询、修改操作等等，其中，该业务逻辑可能是一个交易行为，涉及货物查询、购物、支付、订单处理等行为。
步骤11：根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例，其中，每个基准测试用例与对应的生产数据库成一一映射关系。
在本实施例中，由于目标应用服务在每个生产数据库上的运行方式不同，相应的，依据生产数据库的基准测试数据以及日志文件得到的基准测试用例也会相应的存在差异，即每个基准测试用例与对应的生产数据库成一一映射关系。
下面以创建一个生产数据库对应的基准测试用例为例解释说明，创建基准测试用例的过程，其他生产数据库的对应的基准测试用例的创建过程类似，在此不再赘述。
具体而言，测试装置根据基准测试数据以及日志文件生成基准测试用例。日志文件主要是对操作逻辑、有关数据的记录，不具备控制逻辑，因此测试装置需要根据基准测试数据以及日志文件生成基准测试用例，该基准测试用例实际上是用于对待测数据库进行测试的基准操作脚本。具体而言，解析所述日志文件以获取操作命令集，根据日志文件的结构，分析得到可执行的结构化查询语言SQL(Structured Query Language，简写为SQL)语句，并将执行参数与对应的SQL语句相关联得到操作命令集。然后，根据所述基准测试数据以及所述操作命令集创建基准测试用例。
在实际应用场景中，由于日志文件中可能记录有重复的操作或者不符合测试条件的操作，为了提高测试的效率，可以按照预设的条件对基于日志文件获取到的操作命令集进行过滤处理后，再创建基准测试用例。
在优选的实施例中，按照预设的处理条件对所述操作命令集进行过滤处理得到第一操作命令集，执行所述第一操作命令集，剔除执行失败的操作命令得到目标操作命令集。其中，预设的处理条件包括去重处理和操作对象筛选处理。
在实际应用场景中，首先对操作命令集进行去重处理，可以按照如下函数对操作命令集执行去重处理。
/**
*@author Administrator
*描述：用于去除重复类似的sql，减少测试sql数目
*/
public class ItemFilter{
HashMap<Integer,ArrayList<String>>mapFilter＝new HashMap<Integer,ArrayList<String>>()；
SqlLog log＝null；
SqlLog log2＝null；
public void setDelLog(String filename){
if(log！＝null){
log.Close()；
log2.Close()；
}
log＝new SqlLog(filename)；
log2＝new SqlLog(filename+".2.log")；
}
public void finish(){
if(log！＝null){
log.Close()；
log2.Close()；
}
}
在对操作命令集进行去重处理之后，再采用过滤器对操作命令集进行过滤处理，例如，每个过滤器包含一个SQL特征(如特定的SQL语句类型、操作特定对象的SQL)以及处理操作(如删除操作、相同或相似的操作保留一个或多个)，使用过滤器反复处理操作命令集得到第一操作命令集。在实际应用场景中，可以按照如下函数执行过滤处理。
/**
*@Description:判断是否保留该sql
*@param:
*@return:boolean
*/
public boolean isKeep(String sql){
boolean flag＝true；
if(sql＝＝null
||sql.trim().length()＝＝0){
return false；
}
if(isDeleteSql(sql)){//如果确认删除sql，那么不需要保留
log.logMessageNotPrint(sql+"\r\n")；
return false；
}
int len＝sql.split("\\s+").length；//根据空格分隔sql字符串
if(！mapFilter.containsKey(new Integer(len))){//if hash-code notexists,keep sql
ArrayList<String>tmp＝new ArrayList<String>()；
tmp.add(sql)；
mapFilter.put(new Integer(len),tmp)；
return true；
}
ArrayList<String>values＝mapFilter.get(new Integer(len))；
Iterator<String>it＝values.iterator()；
while(it.hasNext()){
String sqltmp＝it.next()；
if(sql.trim().equalsIgnoreCase(sqltmp)){//找到相同的sql，那么该sql不保留
log.logMessageNotPrint(sql+"\r\n")；
flag＝false；
break；
}
//to-do
//找到相似的sql，那么不保留，将删除的sql输入至临时文件
if(isSimilarSql(sql,sqltmp)){
log2.logMessageNotPrint(sql+"\r\n")；
flag＝false；
break；
}
}
if(flag){//sql need keep
values.add(sql)；
mapFilter.put(new Integer(len),values)；
}
return flag；
}
在对操作命令集进行过滤处理后得到的第一操作命令集内的SQL语句可能会存在执行失败的情况，在本实施例中，在得到第一操作命令集之后，还模拟执行所述第一操作命令集，剔除执行失败的操作命令之后得到目标操作命令集。然后，再根据所述基准测试数据以及所述目标操作命令集创建基准测试用例。
按照上述方式依次获取每个生产数据库的基准测试用例，以获取多个基准测试用例。
在本实施例中，基于日志文件创建测试用例，以得到数据库的操作脚本。由于测试用例可以模拟应用程序对数据库的操作行为，相当于是应用程序对数据库操作行为的回放，由此可以在不依赖应用程序的前提下，对数据库进行真实而全面的测试。
步骤12：依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例。
在本实施例中，测试装置依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例。其中，运行方式包括访问时间和访问对象中的一项或多项。
在可选的实施例中，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上运行的时间段互不重合。参阅图2，步骤12：依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例具体包括如下步骤：
步骤1211：获取所述目标应用服务在所述待测数据库上运行时的访问时间。
步骤1212：依据所述访问时间将多个基准测试用例进行有序融合，得到基于时间段界定的目标测试用例。
举例而言，目标应用服务A在三个生产数据库上运行，且目标应用服务A在每个生产数据库上运行的时间段互不重合。例如，目标应用服务A在第一生产数据库上运行的时间段为00:00am～08:00am，目标应用服务A在第二生产数据库上运行的时间段为08:00am～20:00pm，目标应用服务A在第三生产数据库上运行的时间段为20:00pm～24:00pm。
如果待测数据库需满足目标应用服务A在00:00am～24:00pm的任一时间段内均能正常运行，则依据目标应用服务A在第一、第二以及第三生产数据库的访问时间的先后顺序，将多个基准测试用例进行融合，得到00:00am～24:00pm时间段对应的目标测试用例。
如果待测数据库需满足目标应用服务A在06:00am～22:00pm的任一时间段内均能正常运行，则获取目标应用服务A在第一生产数据库上运行的时间段为06:00am～08:00am对应的基准测试用例、目标应用服务A在第二生产数据库上运行时对应的基准测试用例以及目标应用服务A在第三生产数据库上运行的时间段为20:00pm～22:00pm对应的基准测试用例，并将前述的三个基准测试用例按照时间的先后顺序进行融合，得到06:00am～22:00pm时间段对应的目标测试用例。
在另一个可选的实施例中，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上的访问对象互不相同。参阅图3，步骤12：依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例具体包括如下步骤：
步骤1221：获取所述目标应用服务在所述待测数据库上运行时的目标访问对象。
步骤1222：依据所述目标访问对象将多个基准测试用例进行融合，得到基于访问对象界定的目标测试用例。
举例而言，目标应用服务A在两个生产数据库上运行，且目标应用服务A在每个生产数据库上的访问对象互不相同。例如，目标应用服务A在第一生产数据库上的访问对象为研发人员，目标应用服务A在第二生产数据库上的访问对象为工厂人员。而待测数据库需满足目标应用服务A能够被研发人员和/或工厂人员访问，则，依据目标应用服务A在第一、第二生产数据库的访问对象，将多个基准测试用例进行融合，得到基于访问对象界定的目标测试用例。
在实际应用场景中，可以设置工号为登录名，依据工号可以判定访问对象的类型。由于研发人员和工厂人员的工作性质不同，在操作目标应用服务A时，二者的操作行为也有所差异，则待测数据库的功能与性能也会相应的不同。通过基于访问对象界定的目标测试用例对待测数据库进行测试，从而确定当访问对象不同时，目标应用服务在待测数据库上是否能够正常运行，提高了测试的全面性。
步骤13：依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
在本实施例中，依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
实施例2：
在实际应用场景中，由于生产数据库与待测数据库之间可能存在差异，依据多个生产数据库的基准测试数据和日志文件创建的目标测试用例可能与待测数据库不匹配，进而导致测试结果与待测数据库的实际性能不符，为了提高测试的准确性。本实施例判断确定目标测试用例是否适用于待测数据库，在目标测试用例适用于待测数据库时，才基于目标测试用例对目标应用服务在待测数据库上运行情况，提高了测试的准确性，减小了误判情况的发生。测试方法的具体流程请参阅图4。
步骤20：获取多个生产数据库对应的基准测试数据以及日志文件。
步骤21：根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例，其中，每个基准测试用例与对应的生产数据库成一一映射关系。
步骤22：依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例。
其中，步骤20～步骤22与实施例1的步骤10～步骤12相同，具体的实施过程请参照步骤10～步骤12，在此不再赘述。
步骤23：判断确定所述目标测试用例是否适用于所述待测数据库。
在本实施例中，关于测试用例是否适用于待测数据库可从不同的维度对进行判断确定。在可选的实施例中，可以依据生产数据库的基准测试环境以及待测数据库的目标测试环境进行判断。若所述目标测试用例适用于所述待测数据库，则执行步骤24；若所述目标测试用例不适用于所述待测数据库，则执行步骤25。
参阅图5，步骤23：判断确定所述目标测试用例是否适用于所述待测数据库具体包括如下步骤：
步骤2311：获取所述生产数据库的基准测试环境以及所述待测数据库的目标测试环境。
在本实施例中，获取所述生产数据库的基准测试环境以及所述待测数据库的目标测试环境。其中，基准测试环境为获取基准测试数据以及相应的日志文件时，生产数据库的实际工作环境，基准测试环境包括操作系统平台、操作系统版本、数据规模、客户端并发规模、硬件资源中的一项或者多项。目标测试环境为对待测数据库进行测试的待测数据库的工作环境，基准测试环境包括操作系统平台、操作系统版本、数据规模、客户端并发规模、硬件资源中的一项或者多项。
步骤2312：将所述基准测试环境与所述目标测试环境进行相似度匹配，获取所述基准测试环境和所述目标测试环境之间的相似度。
在本实施例中，将所述基准测试环境与所述目标测试环境进行相似度匹配，获取所述基准测试环境和所述目标测试环境之间的相似度。为了得到更准确的相似度，可以依据测试环境的类型配置相应的权重，例如，操作系统平台和操作系统版本配置为第一相似度权重值，数据库的客户端并发规模和硬件资源配置为第二相似度权重值。
举例而言，首先比对生产数据库和待测数据库的操作系统平台以及操作系统版本，依据生产数据库和待测数据库的操作系统平台以及操作系统版本之间的相似程度确定第一相似度，然后再比对生产数据库和待测数据库的客户端并发规模以及硬件资源，依据生产数据库和待测数据库的客户端并发规模以及硬件资源之间的相似度确定第二相似度，最后第一相似度乘以第一相似度权重值得到第一相似度加权值，第二相似度乘以第二相似度权重值得到第二相似度加权值，将第一相似度加权值和第二相似度加权值相叠加得到生产数据库和待测数据库之间的相似度。
其中，第一相似度权重和第二相似度权重依据实际情况而定。例如，生产数据库和待测数据库的操作系统平台以及操作系统版本相同，则第一相似度为1；生产数据库和待测数据库的客户端并发规模以及硬件资源存在差异，并确定第二相似度为0.9。由于操作系统平台以及操作系统版本对测试结果的决定性更大，预设第一相似度权重值为60％，第二相似度权重值为40％，生产数据库和待测数据库之间的相似度为1*60％+0.9*40％＝0.96。
步骤2313：判断确定所述基准测试环境和所述目标测试环境之间的相似度是否大于预设的相似度阈值。
其中，预设的相似度阈值依据实际情况设计，可以为80％或90％，在此不做具体限定。
在本实施例中，判断确定所述基准测试环境和所述目标测试环境之间的相似度是否大于预设的相似度阈值。例如，预设的相似度阈值为90％，生产数据库和待测数据库之间的相似度为0.96，则生产数据库和待测数据库之间的相似度大于预设的相似度阈值。若生产数据库和待测数据库之间的相似度大于预设的相似度阈值，则执行步骤2314，若生产数据库和待测数据库之间的相似度小于预设的相似度阈值，则执行步骤2315。
步骤2314：若所述基准测试环境和所述目标测试环境之间的相似度大于预设的相似度阈值，则所述目标测试用例适用于所述待测数据库。
步骤2315：若所述基准测试环境和所述目标测试环境之间的相似度小于预设的相似度阈值，则所述目标测试用例不适用于所述待测数据库，重新创建目标测试用例。
在又一个可选的实施例中，首先，依据生产数据库的基准测试环境以及待测数据库的目标测试环境进行判断得到二者的相似度，在生产数据库的基准测试环境以及待测数据库的目标测试环境的相似度达到预设的相似度阈值时，然后再依据生产数据库与待测数据库之间的关联关系得到二者的测试权重，联合生产数据库的基准测试环境以及待测数据库的目标测试环境的相似度和生产数据库与待测数据库之间的测试权重得到目标测试权重，然后用目标测试权重按照步骤2313～步骤2315的方式判断确定目标测试用例是否适用于待测数据库(将测试权重对应的值调整为目标测试权重对应的值)。
步骤24：若所述目标测试用例适用于所述待测数据库，则依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
步骤25：若所述目标测试用例适用于所述待测数据库，重新创建目标测试用例。
在本实施例中，若所述测试用例适用于所述待测数据库，则依据所述测试用例对所述待测数据库进行测试，并输出测试结果；若所述目标测试用例适用于所述待测数据库，重新创建目标测试用例。
实施例3：
区别于上述实施例1和实施例2，为了进一步确保测试用例的准确性，在本实施例中，按照预设的时间间隔重新获取多个生产数据库的基准测试数据以及日志文件，并依据重新获取到的基准测试数据以及日志文件创建新的目标测试用例。基于新的目标测试用例与历史目标测试用例的差异，判断确定是否需要更换目标测试用例。具体方法流程请参阅图6。
步骤30：按照预设的时间间隔重新获取所述生产数据库的基准测试数据以及日志文件。
考虑到应用程序更新或者其他因素会引起作用于数据库操作命令集的改变(数据库日志文件也会改变)，所以导致测试用例的改变，此时需要重新分析日志，生成测试用例。在本实施例中，按照预设的时间间隔重新获取所述生产数据库的基准测试数据以及日志文件，以创建新的基准测试用例。其中，预设的时间间隔可依据实际情况而定。
步骤31：依据重新获取到的基准测试数据以及日志文件，创建新的目标测试用例。
其中，依据重新获取到的基准测试数据以及日志文件，创建新的目标测试用例的具体过程，可参阅实施例1的步骤10～步骤12，在此不再赘述。
步骤32：判断确定所述新的目标测试用例与历史目标测试用例之间的差异是否大于预设的差异阈值。
在本实施例中，判断确定所述新的测试用例与历史测试用例之间的差异是否大于预设的差异阈值，若大于则说明需要更换测试用例，执行步骤33，若小于则说明无需更换测试用例，执行步骤34。其中，预设的差异阈值依据实际情况而定。
步骤33：若所述新的目标测试用例与所述历史目标测试用例之间的差异大于预设的差异阈值，则依据所述新的目标测试用例与所述历史目标测试用例之间的差异获取差异测试用例，依据所述新的目标测试用例和/或所述差异测试用例对所述待测数据库进行测试。
在本实施例中，若所述新的目标测试用例与所述历史目标测试用例之间的差异大于预设的差异阈值，则说明历史目标测试用例无法真实全面的对待测数据库进行测试，则需要更换目标测试用例。
举例而言，当依据历史目标测试用例已经输出测试结果时，为了提高测试的效率，可以仅依据差异测试用例对待测数据库进行测试，重点分析差异测试用例对应的测试结果。可选地，为了保证测试的准确性，也可以直接用新的目标测试用例对待测数据库重新进行测试。或者，可以采用差异测试用例和新的目标测试用例对待测数据库进行测试，并输出新的测试用例对应的测试结果以及差异测试用例对应的差异测试结果。关于更换目标测试用例的方式可以依据实际情况而定，在此不做具体限定。
步骤34：若所述新的目标测试用例与所述历史目标测试用例之间的差异小于预设的差异阈值，则无需更换目标测试用例。
区别于现有技术，本发明的测试方法一方面基于多个生产数据库的日志文件创建目标测试用例，由于日志文件能够真实的反映目标应用服务的实际使用场景，因此，基于日志文件创建的目标测试用例能够很好的模拟目标应用服务的实际使用场景，提高了目标测试用例的覆盖率以及实用性。另一方面，由于目标应用服务在不同的生产数据库上的运行方式不同，为了提高目标测试用例的覆盖率，将多个基准测试用例进行融合得到目标测试用例，依据目标测试用例对目标应用服务在待测数据库上的运行情况进行测试，提高了测试的准确性，减小了误判情况的发生。
实施例4：
请参阅图7，图7是本发明实施例提供的一种测试装置的结构示意图。本实施例的测试装置括一个或多个处理器71以及存储器72。其中，图7中以一个处理器71为例。
处理器71和存储器72可以通过总线或者其他方式连接，图7中以通过总线连接为例。
存储器72作为一种基于测试方法的非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如实现如上述实施例任一所述的测试方法以及对应的程序指令。处理器71通过运行存储在存储器72中的非易失性软件程序、指令以及模块，从而执行测试方法的各种功能应用以及数据处理，实现如上述实施例任一所述的测试方法的功能。
其中，存储器72可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器72可选包括相对于处理器71远程设置的存储器，这些远程存储器可以通过网络连接至处理器71。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
关于测试方法请参照图1～图6及相关的文字描述，在此不再赘述。
值得说明的是，上述装置和系统内的模块、单元之间的信息交互、执行过程等内容，由于与本发明的处理方法实施例基于同一构思，具体内容可参见本发明方法实施例中的叙述，此处不再赘述。
本领域普通技术人员可以理解实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(Read Only Memory，简写为ROM)、随机存取存储器(Random AccessMemory，简写为RAM)、磁盘或光盘等。
本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种测试方法，其特征在于，目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上的运行方式存在差异；
所述测试方法包括：
获取多个生产数据库对应的基准测试数据以及日志文件；
根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例，其中，每个基准测试用例与对应的生产数据库成一一映射关系；
依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例；
依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
2.根据权利要求1所述的测试方法，其特征在于，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上运行的时间段互不重合；
所述依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例包括：
获取所述目标应用服务在所述待测数据库上运行时的访问时间；
依据所述访问时间将多个基准测试用例进行有序融合，得到基于时间段界定的目标测试用例。
3.根据权利要求1所述的测试方法，其特征在于，所述目标应用服务在多个生产数据库上运行，所述目标应用服务在每个生产数据库上的访问对象互不相同；
所述依据所述目标应用服务在所述待测数据库上的运行方式，将多个基准测试用例进行融合，得到目标测试用例包括：
获取所述目标应用服务在所述待测数据库上运行时的目标访问对象；
依据所述目标访问对象将多个基准测试用例进行融合，得到基于访问对象界定的目标测试用例。
4.根据权利要求1所述的测试方法，其特征在于，所述测试方法还包括：
判断确定所述目标测试用例是否适用于所述待测数据库；
若所述目标测试用例适用于所述待测数据库，则依据所述目标测试用例对所述待测数据库进行测试，得到所述目标应用服务在所述待测数据库上运行情况的测试结果。
5.根据权利要求4所述的测试方法，其特征在于，所述判断确定所述目标测试用例是否适用于所述待测数据库包括：
获取所述生产数据库的基准测试环境以及所述待测数据库的目标测试环境；
将所述基准测试环境与所述目标测试环境进行相似度匹配，获取所述基准测试环境和所述目标测试环境之间的相似度；
判断确定所述基准测试环境和所述目标测试环境之间的相似度是否大于预设的相似度阈值；
若所述基准测试环境和所述目标测试环境之间的相似度大于预设的相似度阈值，则所述目标测试用例适用于所述待测数据库。
6.根据权利要求5所述的测试方法，其特征在于，所述基准测试环境和所述目标测试环境包括操作系统平台、操作系统版本、数据规模、客户端并发规模、硬件资源中的一项或者多项。
7.根据权利要求4所述的测试方法，其特征在于，所述测试方法还包括：
按照预设的时间间隔重新获取多个生产数据库的基准测试数据以及日志文件；
依据重新获取到的基准测试数据以及日志文件，创建新的目标测试用例；
判断确定所述新的目标测试用例与历史目标测试用例之间的差异是否大于预设的差异阈值，其中，所述历史目标测试用例为当前对所述待测数据库进行测试的目标测试用例；
若所述新的目标测试用例与所述历史目标测试用例之间的差异大于预设的差异阈值，则依据所述新的目标测试用例与所述历史目标测试用例之间的差异获取差异测试用例，依据所述新的目标测试用例和/或所述差异测试用例对所述待测数据库进行测试。
8.根据权利要求1所述的测试方法，其特征在于，所述根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例包括：
解析每个生产数据库对应的日志文件，获取每个生产数据库对应的操作命令集；
根据每个生产数据库对应的基准测试数据以及相应的操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例。
9.根据权利要求8所述的测试方法，其特征在于，所述根据每个生产数据库的基准测试数据以及日志文件，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例还包括：
按照预设的处理条件对所述操作命令集进行过滤处理，得到第一操作命令集；
执行所述第一操作命令集，剔除执行失败的操作命令得到目标操作命令集；
所述根据每个生产数据库对应的基准测试数据以及相应的操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例包括：
根据每个生产数据库对应的基准测试数据以及相应的目标操作命令集，创建所述目标应用服务对应的基准测试用例，以获取多个基准测试用例。
10.一种测试装置，其特征在于，所述测试装置包括至少一个处理器；以及，与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被程序设置为执行如权利要求1～9任一项所述的测试方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811045469.1A CN109344056B (zh) | 2018-09-07 | 2018-09-07 | 一种测试方法以及测试装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811045469.1A CN109344056B (zh) | 2018-09-07 | 2018-09-07 | 一种测试方法以及测试装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109344056A true CN109344056A (zh) | 2019-02-15 |
| CN109344056B CN109344056B (zh) | 2021-02-26 |
Family
ID=65305028
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811045469.1A Active CN109344056B (zh) | 2018-09-07 | 2018-09-07 | 一种测试方法以及测试装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109344056B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109960653A (zh) * | 2019-02-18 | 2019-07-02 | 天津五八到家科技有限公司 | 回归测试方法、装置、设备和存储介质 |
| CN110413516A (zh) * | 2019-07-15 | 2019-11-05 | 杭州数梦工场科技有限公司 | 识别慢sql代码的方法及装置和电子设备 |
| CN111221743A (zh) * | 2020-03-18 | 2020-06-02 | 时时同云科技(成都)有限责任公司 | 自动化测试方法及系统 |
| CN111581094A (zh) * | 2020-05-08 | 2020-08-25 | 贝壳技术有限公司 | 头文件名检测方法、装置、存储介质及电子设备 |
| CN111858385A (zh) * | 2020-08-04 | 2020-10-30 | 深圳市汉云科技有限公司 | Sql数据库的测试方法、装置、设备及存储介质 |
| CN112433903A (zh) * | 2020-10-27 | 2021-03-02 | 联宝(合肥)电子科技有限公司 | 一种产品测试方法、设备及计算机可读存储介质 |
| CN113742198A (zh) * | 2020-05-28 | 2021-12-03 | 龙芯中科技术股份有限公司 | 测试方法、装置、电子设备及存储介质 |
| CN117112540A (zh) * | 2023-10-24 | 2023-11-24 | 荣耀终端有限公司 | 数据库性能测试方法和装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107908549A (zh) * | 2017-10-24 | 2018-04-13 | 北京小米移动软件有限公司 | 测试用例生成方法、装置及计算机可读存储介质 |
| CN108268348A (zh) * | 2017-12-08 | 2018-07-10 | 广州视源电子科技股份有限公司 | 接口测试方法、装置、移动终端及存储介质 |
| CN108415831A (zh) * | 2018-02-05 | 2018-08-17 | 五八有限公司 | 测试用例生成方法及装置、电子设备和可读存储介质 |
-
2018
- 2018-09-07 CN CN201811045469.1A patent/CN109344056B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107908549A (zh) * | 2017-10-24 | 2018-04-13 | 北京小米移动软件有限公司 | 测试用例生成方法、装置及计算机可读存储介质 |
| CN108268348A (zh) * | 2017-12-08 | 2018-07-10 | 广州视源电子科技股份有限公司 | 接口测试方法、装置、移动终端及存储介质 |
| CN108415831A (zh) * | 2018-02-05 | 2018-08-17 | 五八有限公司 | 测试用例生成方法及装置、电子设备和可读存储介质 |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109960653A (zh) * | 2019-02-18 | 2019-07-02 | 天津五八到家科技有限公司 | 回归测试方法、装置、设备和存储介质 |
| CN110413516B (zh) * | 2019-07-15 | 2023-08-25 | 杭州数梦工场科技有限公司 | 识别慢sql代码的方法及装置和电子设备 |
| CN110413516A (zh) * | 2019-07-15 | 2019-11-05 | 杭州数梦工场科技有限公司 | 识别慢sql代码的方法及装置和电子设备 |
| CN111221743A (zh) * | 2020-03-18 | 2020-06-02 | 时时同云科技(成都)有限责任公司 | 自动化测试方法及系统 |
| CN111581094A (zh) * | 2020-05-08 | 2020-08-25 | 贝壳技术有限公司 | 头文件名检测方法、装置、存储介质及电子设备 |
| CN111581094B (zh) * | 2020-05-08 | 2023-06-23 | 贝壳技术有限公司 | 头文件名检测方法、装置、存储介质及电子设备 |
| CN113742198A (zh) * | 2020-05-28 | 2021-12-03 | 龙芯中科技术股份有限公司 | 测试方法、装置、电子设备及存储介质 |
| CN113742198B (zh) * | 2020-05-28 | 2023-12-05 | 龙芯中科技术股份有限公司 | 测试方法、装置、电子设备及存储介质 |
| CN111858385A (zh) * | 2020-08-04 | 2020-10-30 | 深圳市汉云科技有限公司 | Sql数据库的测试方法、装置、设备及存储介质 |
| CN111858385B (zh) * | 2020-08-04 | 2024-02-20 | 深圳市汉云科技有限公司 | Sql数据库的测试方法、装置、设备及存储介质 |
| CN112433903A (zh) * | 2020-10-27 | 2021-03-02 | 联宝(合肥)电子科技有限公司 | 一种产品测试方法、设备及计算机可读存储介质 |
| CN112433903B (zh) * | 2020-10-27 | 2022-04-12 | 联宝(合肥)电子科技有限公司 | 一种产品测试方法、设备及计算机可读存储介质 |
| CN117112540A (zh) * | 2023-10-24 | 2023-11-24 | 荣耀终端有限公司 | 数据库性能测试方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109344056B (zh) | 2021-02-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109344056A (zh) | 一种测试方法以及测试装置 | |
| CN109344055A (zh) | 一种测试方法以及测试装置 | |
| Prowell et al. | Cleanroom software engineering: technology and process | |
| De Silva et al. | Controlling software architecture erosion: A survey | |
| Kruchten et al. | Building up and reasoning about architectural knowledge | |
| De Medeiros et al. | An outlook on semantic business process mining and monitoring | |
| US8151248B1 (en) | Method and system for software defect management | |
| JP2007535723A (ja) | 複合ソフトウエアシステムを実施して検証するための自動多次元追跡可能性行列を含む試験ツール | |
| CN108763091B (zh) | 用于回归测试的方法、装置及系统 | |
| CN112527774A (zh) | 数据中台搭建方法、系统及存储介质 | |
| Cámara et al. | Synthesizing tradeoff spaces with quantitative guarantees for families of software systems | |
| CN109936479A (zh) | 基于差分检测的控制平面故障诊断系统及其实现方法 | |
| Wang et al. | Automated test case generation for the Paxos single-decree protocol using a Coloured Petri Net model | |
| Mendling et al. | A quantitative analysis of faulty EPCs in the SAP reference model | |
| Jung et al. | A survey on mining software repositories | |
| Liu et al. | A repairing missing activities approach with succession relation for event logs | |
| Xiang et al. | Checking the inconsistent data in concurrent systems by petri nets with data operations | |
| CN108897633A (zh) | 一种基于机器数据的故障诊断方法与装置 | |
| AU2007300403B2 (en) | System and method for obfuscation of data across an enterprise | |
| Chakraborty et al. | Applying the grounded theory method to derive enterprise system requirements | |
| CN114911773A (zh) | 一种通用元模型设计方法 | |
| Anjos et al. | A framework for classifying and comparing software architecture tools for quality evaluation | |
| Tatale et al. | A Survey on Test Case Generation using UML Diagrams and Feasibility Study to Generate Combinatorial Logic Oriented Test Cases. | |
| Barnes | NASA's Advanced Multimission Operations System: a case study in software architecture evolution | |
| CN112364071A (zh) | 货值数据分析方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant after: Wuhan dream database Co.,Ltd. Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Applicant before: WUHAN DAMENG DATABASE Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220902 Address after: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee after: Wuhan dream database Co.,Ltd. Patentee after: HUAZHONG University OF SCIENCE AND TECHNOLOGY Address before: 430000 16-19 / F, building C3, future technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20230814 Address after: 16-19/F, Building C3, Future Science and Technology Building, No. 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province, 430206 Patentee after: Wuhan dream database Co.,Ltd. Address before: 430073 16-19 / F, building C3, future science and technology building, 999 Gaoxin Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province Patentee before: Wuhan dream database Co.,Ltd. Patentee before: HUAZHONG University OF SCIENCE AND TECHNOLOGY |