CN107357721B - 测试系统的方法及装置 - Google Patents

Abstract

本公开是关于一种测试系统的方法及装置，属于系统测试技术领域。该方法包括：获取线上系统的线上数据库在指定时间点的数据库快照，根据所述数据库快照生成被测系统的测试数据库，读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令，令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据。通过基于数据库快照生成的测试数据库，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

Description

测试系统的方法及装置

技术领域

本公开涉及系统测试技术领域，特别涉及一种测试系统的方法及装置。

背景技术

随着互联网中的线上系统的广泛使用，一部分关键领域中的线上系统要求在系统更新后仍能不出差错地处理用户操作指令。例如，金融、电力或医疗领域中的线上系统。因此，如何在更新线上系统前测试用来更新的被测系统的可靠性，成为测试技术领域中的热点研究问题。

相关技术中，线上系统的管理人员使用灰度更新的方法，测试被测系统的可靠性。在灰度更新中，管理人员从运行线上系统的若干台服务器中，选择少部分的服务器。将选定的服务器中的线上系统更新为被测系统，之后让运行该被测系统的服务器正常工作，并监测该服务器的运行状况。当服务器运行状况正常时，管理人员将被测系统发布到线上，以更新运行线上系统的服务器。

发明内容

本公开实施例提供了一种测试系统的方法及装置，技术方案如下：

根据本公开实施例的第一方面，提供了一种测试系统的方法，包括：

获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

根据所述数据库快照生成被测系统的测试数据库；

读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据。

可选的，所述方法还包括：

获取所述线上系统执行所述用户操作指令后对应的线上结果数据；

对比所述测试结果数据和所述线上结果数据，获得比对结果数据。

可选的，所述方法包括：

当所述测试结果数据和所述线上结果数据不同时，获取所述测试结果数据对应的测试执行参数，所述测试参数至少包括用户操作指令和所述测试系统执行所述用户操作指令时的各个步骤；

获取所述线上结果数据对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分。

可选的，所述方法还包括：

获取预设的测试清单，所述测试清单包括所述被测系统被测试的功能；

当所述测试清单中的功能分别被测试完成时，输出所述对比结果数据。

可选的，所述方法包括：

设置所述被测系统的测试参数，所述测试参数包括被测用户、测试时长或并发度中的至少一项；

其中，所述测试时长用于指示测试所述被测系统运行的时间长度，所述并发度用于指示所述被测系统同时执行的最大任务数量。

可选的，所述方法包括：

当对比结果数据表示所述测试结果数据和所述线上结果数据相同时，将封装有所述被测系统的功能代码的数据包发布到线上环境，以便所述线上环境中的相关服务器使用所述数据包更新所述线上系统。

根据本公开实施例的第二方面，提供了一种测试系统的装置，包括：

快照获取模块，用于获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

生成模块，用于根据所述数据库快照生成被测系统的测试数据库；

读取模块，用于读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

执行模块，用于令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据。

可选的，所述装置还包括：

结果获取模块，用于获取所述线上系统执行所述用户操作指令后对应的线上结果数据；

对比模块，用于对比所述测试结果数据和所述线上结果数据，获得比对结果数据。

可选的，所述装置包括：

第一获取模块，用于当所述测试结果数据和所述线上结果数据不同时，获取所述测试结果数据对应的测试执行参数，所述测试参数至少包括用户操作指令和所述被测系统执行所述用户操作指令时的各个步骤；

第二获取模块，用于获取所述线上结果数据对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

标注模块，用于比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分。

可选的，所述装置还包括：

清单获取模块，用于获取预设的测试清单，所述测试清单包括所述被测系统被测试的功能；

结果输出模块，用于当所述测试清单中的功能分别被测试完成时，输出所述对比结果数据。

可选的，所述装置包括：

设置模块，用于设置所述被测系统的测试参数，所述测试参数包括被测用户、测试时长或并发度中的至少一项；

其中，所述测试时长用于指示测试所述被测系统运行的时间长度，所述并发度用于指示所述被测系统同时执行的最大任务数量。

可选的，所述装置包括：

发布模块，用于当对比结果数据表示所述测试结果数据和所述线上结果数据相同时，将封装有所述被测系统的功能代码的数据包发布到线上环境，以便所述线上环境中的相关服务器使用所述数据包更新所述线上系统。

根据本公开实施例的第三方面，提供了一种测试系统的装置，所述装置包括处理器和用于存储所述处理器的可执行指令的存储器，所述处理器被配置为：

获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

根据所述数据库快照生成被测系统的测试数据库；

读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据。

根据本公开实施例的第四方面，提供了一种存储设备，其特征在于，所述存储设备中存储有至少一条指令，所述指令是由处理器加载并执行的本公开实施例的第一方面任一所述的测试系统的方法。

本公开实施例提供的技术方案可以包括以下有益效果：

通过获取线上系统的线上数据库在指定时间点的数据库快照，根据所述数据库快照生成被测系统的测试数据库，读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令和所述线上系统执行所述用户操作指令后对应的线上结果数据，令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据，对比所述测试结果数据和所述线上结果数据是否相同，获得对比结果数据。通过基于数据库快照生成的被测系统的数据库，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的一种测试系统的方法的流程图；

图2是根据一示例性实施例示出的另一种测试系统的方法的流程图；

图3是根据一示例性实施例示出的又一种测试系统的方法的流程图；

图4是基于图3所示的实施例提供的一种测试结果展示界面；

图5是基于图3所示的实施例提供的一种设置测试清单的界面；

图6是根据一示例性实施例示出的一种测试系统的装置的框图；

图7是根据一示例性实施例示出的另一种测试系统的装置的框图；

图8示出了本申请一个示例性实施例提供的服务器的结构示意图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的方法和装置的例子。

在本公开实施例的应用场景中，线上系统是已经运行在服务器中，处理实际生产中使用的数据或者用户的真实数据的系统。比如金融服务核心系统、电力调动数据系统、医疗数据系统和政务信息数据系统等。由于该线上系统在正常运行时，需要和大量的外围系统进行直接或者间接的数据交互。因此，为了保障多个外围系统中的数据正确，需要保证该线上系统中的数据拥有较高的正确性。

本公开实施例以线上系统是金融服务核心系统为例进行说明。在金融服务核心系统正常运行时，由于该金融服务核心系统记录有用户的账户信息和金额数据，并且该账户信息和金额数据可能在被多个外围系统调用时改变，例如金额数据会在该用户进行外汇买卖业务、基金买卖或者缴纳水电费时进行变动。因此，为了保障多个外围系统所处理的业务的正确性，该金融服务核心系统需要确保在运行时，其中保存的数据是准确无误的。

另外，本公开实施例可以应用于服务器中，该服务器可以是一台服务器，也可是若干台服务器组成的服务器集群，还可以是采用虚拟化技术构建的虚拟服务器。

图1是根据一示例性实施例示出的一种测试系统的方法的流程图，该测试系统的方法应用于服务器中，该测试系统的方法可以包括如下几个步骤：

在步骤101中，获取线上系统的线上数据库在指定时间点的数据库快照，线上系统为已实际运行的与被测系统具有相同功能的系统。

在步骤102中，根据数据库快照生成被测系统的测试数据库。

在步骤103中，读取线上系统的线上数据库在指定时间点之后执行的用户操作指令。

在步骤104中，令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。

综上所述，本公开实施例提供的测试系统的方法，通过获取线上系统的线上数据库在指定时间点的数据库快照，根据数据库快照生成被测系统的测试数据库，读取线上系统的线上数据库在指定时间点之后执行的用户操作指令，令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。通过基于数据库快照生成的被测系统的数据库，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

图2是根据一示例性实施例示出的另一种测试系统的方法的流程图，该测试系统的方法应用于服务器中，该测试系统的方法可以包括如下几个步骤：

在步骤201中，获取线上系统的线上数据库在指定时间点的数据库快照，线上系统为已实际运行的与被测系统具有相同功能的系统。

在本公开实施例中，用于对被测系统进行测试的服务器，将在一个指定的时间点获取线上系统的线上数据库的数据库快照。获取该数据库快照的工具可以是预设的数据库引擎。需要说明的是，数据库快照是一种能够被线上系统或者被测系统直接使用的数据库。

其中，该线上系统指处于实际生产或者面向用户提供服务的系统，该线上系统所处理的数据(包括线上数据库中存储的数据)，是实际生产中使用的数据或者用户的真实数据。例如，线上系统是金融服务核心系统，若该金融服务核心系统处理的业务是：用户A的账户存入500元人民币，则线上数据库中用户A对应的人民币余额数据增加500，且该用户A的账户增加500元人民币对应真实世界里向用户A的账户存入500元的行为，是实际使用环境中用户的实际操作对应的数据。

在步骤202中，根据数据库快照生成被测系统的测试数据库。

在本公开实施例中，服务器对获取到的数据库快照，在数据传送接口上完成相关配置后，生成一个可以直接被被测系统使用，且数据库中的数据与获取线上系统时的线上数据库完全相同的数据库。在本实施例中，将该数据库称为测试数据库。

在步骤203中，获取预设的测试清单，测试清单包括被测系统被测试的功能。

在本公开实施例中，预设的测试清单中含有被测系统中需要被测试的功能。该需要被测试的功能可以由技术人员进行配置，例如，被测系统中能够实现的功能有六个，在测试清单中可以选择其中任意数目的功能进行测试。比如，若为了全面测试被测系统的所有功能是否出错，测试清单中可以包括被测系统能够实现的全部功能；若为了重点测试被测系统中指定的重要功能是否出错，测试清单中可以只包含指定的被测试的功能。

在步骤204中，设置被测系统的测试参数，测试参数包括被测用户、测试时长或并发度中的至少一项。

在本公开实施例中，为了能够对被测系统进行各个维度上的测试，验证被测系统的可靠性是否达标。本公开实施例设置了用于测试被测系统的测试参数，该测试参数中的测试时长用于指示测试被测系统运行的时间长度。例如，测试时长是10个小时，则该被测系统将进行时长为10个小时的测试。可选的，设置该测试时长还可以通过同时设置开始时间和停止时间来实现，比如，设置开始时间是2017年6月24日9：59，停止时间是2017年6月25日10:00，则被测系统在上述开始时间和停止时间之间进行测试。

另外，测试参数中还可以包括并发度，该并发度用于指示被测系统同时执行的最大任务数量。例如，并发度的数目为5000，则被测系统在同一时间内能够同时执行的最大任务数量是5000。

在步骤205中，读取线上系统的线上数据库在指定时间点之后执行的用户操作指令和线上系统执行用户操作指令后对应的线上结果数据。

在本公开实施例中，取数据库快照产生时的指定时间点之后执行的用户操作指令，以及该操作指令对应的线上结果数据，以便与被测系统形成对比。

在步骤206中，令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。

在本公开实施例中，服务器令被测系统执行用户操作指令，该用户操作指令是根据用户的操作生成的，且能够被被测系统所直接执行的命令。例如，用户操作是向用户A的账户存入500元人民币，则接收该用户操作的用户的手机或者是ATM机(Automatic TellerMachine，自动取款机)能够将该用户操作转换成相对应的用户操作指令，并将该指令发送给服务器。服务器令其中的被测系统执行该用户操作指令，并获取执行后生成的测试结果数据。本例中，该测试结果数据可以是用户A的人民币账户余额增加500元后对应的数据。例如，原账户余额是1500元，则测试结果数据是2000元。

需要特别说明的是，此处服务器是指运行该被测系统的服务器，该服务器和运行线上系统的服务器相互隔离的，且该服务器不向实际的用户操作提供数据。因此，在运行该被测系统的服务器出现数据错误时，并不会造成实际用户数据出错。

在步骤207中，对比测试结果数据和线上结果数据是否相同，获得对比结果数据。

为了确定被测系统能否实现和线上系统相同的功能，需要在被测系统和线上系统处理相同的用户输入操作时，对比相应的测试结果数据和线上结果数据。

在步骤208中，当测试清单中的功能分别被测试完成时，输出对比结果数据。

在本公开实施例中，测试清单中包括的功能在被正确执行预定次数后，认为被测系统能够正确地实现该功能。例如，测试清单中包括功能M1、功能M2和功能M3，当功能M1至功能M3三个功能都至少被正确执行预定次数后，测试被测系统的服务器输出对比结果数据。该对比结果数据包括每一个用户操作指令分别被被测系统和线上系统执行后的数据对比，是一个统计数据。例如，对比结果数据显示进行测试的用户操作指令是5000条，并显示其中线上结果数据和对应的测试结果数据相同的数量4998条，以及不同的数量是2条。

在步骤209中，当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。

在本实施例中，当对比结果数据显示被测系统获得的测试结果数据和线上结果数据完全相同时，说明被测系统能够正确实现线上系统的功能。因此，该被测系统具备替代线上系统的功能，可以发布到线上环境，以便线上系统更新为被测系统。

其中，封装有被测系统的功能代码的数据包，可以是包括被测系统全部代码的整体数据包，也可以是只包括区别于线上系统的功能代码的更新数据包。其中，线上环境中运行线上系统的服务器在获取到上述整体数据包后或更新数据包，将线上系统更新为被测系统。

可见，本公开实施例中采用数据库快照的技术手段，能够创建一个在指定时间点和线上数据库完全相同的测试数据库。由于该测试数据库和线上系统相隔离，且本身就是一个数据库。因此，能够使用真实的用户操作指令进行任意维度上的测试，而可以避免数据出错造成的线上系统的数据错误。从而使得测试环境更加贴近实际的使用环境，令测试结果更可靠。

比如，以测试清单中要测试的功能是功能M1、功能M2和功能M3为例，线上系统测试功能M1、功能M2和功能M3所得的线上结果数据，分别为结果数据R1、结果数据R2和结果数据R3；而同时测试系统测试功能M1、功能M2和功能M3所得的测试结果数据，分别为结果数据R1、结果数据R2和结果数据R3。当被测系统中的功能M1、功能M2和功能M3都执行过预定次数次后，停止测试，比较线上结果数据和测试结果数据，此例中，对比结果数据显示线上结果数据和对应的测试结果数据相同。运行被测系统的服务器将封装有被测系统的功能代码的数据包发布到线上环境，使得运行线上系统的服务器使用该数据包将线上系统更新为被测系统。可选的，为了提高测试的全面性，还可以在测试参数中设置被测用户、测试时长或并发度至少一项测试参数。

综上所述，本公开实施例所提供的测试系统的方法，通过获取线上系统的线上数据库在指定时间点的数据库快照；根据数据库快照生成被测系统的测试数据库；获取预设的测试清单，测试清单包括被测系统被测试的功能；设置被测系统的测试参数；令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据；对比测试结果数据和线上结果数据是否相同，获得对比结果数据；当测试清单中的功能分别被测试完成时，获取测试结果数据和线上结果数据之间的对比结果数据；当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。由于被测系统和线上系统的运行环境完全隔离，且被测系统拥有基于线上数据库的数据库快照生成的测试数据库，因此，本公开实施例提供的方法，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

图3是根据一示例性实施例示出的又一种测试系统的方法的流程图，该测试系统的方法应用于服务器中，该测试系统的方法可以包括如下几个步骤：

在步骤301中，获取线上系统的线上数据库在指定时间点的数据库快照，线上系统为已实际运行的与被测系统具有相同功能的系统。

在步骤302中，根据数据库快照生成被测系统的测试数据库。

在步骤303中，获取预设的测试清单，测试清单包括被测系统被测试的功能。

在步骤304中，设置被测系统的测试参数，测试参数包括被测用户、测试时长或并发度中的至少一项。

其中，测试时长用于指示测试被测系统运行的时间长度，并发度用于指示被测系统同时执行的最大任务数量。

在步骤305中，读取线上系统的线上数据库在指定时间点之后执行的用户操作指令和线上系统执行用户操作指令后对应的线上结果数据。

在步骤306中，令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。

在步骤307中，对比测试结果数据和线上结果数据是否相同，获得对比结果数据。

在步骤308中，当测试清单中的功能分别被测试完成时，输出对比结果数据。

上述步骤301至步骤308的执行过程与步骤201至步骤208的执行过程相同，相关的详细执行过程可参见步骤201至步骤208的执行过程，本处不再展开说明。

在步骤309中，当测试结果数据和线上结果数据不同时，获取测试结果数据对应的测试执行参数，测试参数至少包括用户操作指令和测试系统执行用户操作指令时的各个步骤。

在本公开实施例中，对于同一个用户操作指令，被测系统得出的测试结果数据和线上系统得出的线上结果数据不同，说明被测系统执行一个指定功能出现了错误。因此，服务器将获取被测系统实现该功能时执行的测试执行参数。在实际实现中，该测试参数可以是功能代码段，该功能代码段中包括用户操作指令和相应的测试系统执行用户操作指令时的各个步骤。

在步骤310中，获取线上结果数据对应的线上执行参数，线上执行参数至少包括用户操作指令和线上系统执行用户操作指令时的各个步骤。

类似于步骤309的实现方式，服务器将同时获取线上结果数据对应的线上执行参数，线上执行参数可以是功能代码段，该代码段中包含用户操作指令和相应的线上系统执行用户操作指令时的各个步骤。

下面通过一个例子说明步骤309和步骤310的一种可能的实现方式，在该例中，测试执行参数包括用户操作指令C、子步骤S11、子步骤S12和子步骤S13，测试结果数据是R11；线上执行参数包括用户操作指令C、子步骤S21、子步骤S22和子步骤S23，线上结果数据是R21。服务器在检测到测试结果数据R11和线上结果数据R21不同时，分别获取包含用户操作指令C、子步骤S11、子步骤S12和子步骤S13的测试执行参数，以及包含用户操作指令C、子步骤S21、子步骤S22和子步骤S23的线上执行参数。

在步骤311中，比对测试执行参数和线上执行参数，标注出测试执行参数和线上执行参数之间的差异部分。

在本公开实施例中，服务器将比对测试执行参数和线上执行参数之间差异，并将出现差异的部分标注出来，以便设计人员查找被测系统中出现错误的代码段。标注的方法可以是使用不同的颜色分别标注测试执行参数和线上执行参数之间的差异部分，也可以是使用其他标注方法使得差异部分能够突出显示。其中，差异部分可以指实现相同功能且得到的数据不同的子步骤。

例如，请参见图4，图4是基于图3所示的实施例提供的一种测试结果展示界面，被测系统执行用户操作指令C是通过子步骤S11、子步骤S12和子步骤S13三个子步骤来实现；线上系统执行用户操作指令C是通过子步骤S21、子步骤S22和子步骤S23三个子步骤来实现。当子步骤S11得到的结果与子步骤S21得到的结果相同，子步骤S12得到的结果与子步骤S22得到的结果相同，子步骤S13得到的结果与子步骤S23得到的结果不同时，服务器将标注出子步骤S13和子步骤S23，为设计人员省去了人工对比子步骤S11和子步骤S21，以及子步骤S12和子步骤S22的时间，并提高了被测系统突出显示出错部分的准确度。

步骤312，获取修改后的被测系统，删除上一次测试的测试清单中已通过测试的功能，对被测系统进行测试。

在本实施例中，为了提高测试被测系统的效率，在测试修改后的被测系统时，服务器将删除上一次测试中已经通过测试的功能，以便本次测试着重测试出现过错误的功能。

例如，请参见图5，图5是基于图3所示的实施例提供的一种设置测试清单的界面，服务器首先获取上一次测试的测试清单L1，该测试清单L1中包括功能M1、功能M2、功能M3和功能M4。其中，功能M1、功能M3和功能M4已经通过了测试，则本次测试的测试清单L2中将在测试清单L1的基础上删除已通过测试的功能M1、功能M3和功能M4，得到测试清单L2。该测试清单L2中包括功能M2。

步骤313，当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。

步骤313的实现过程与步骤209的实现过程类似，详情请参见步骤209的实现过程，本处不再赘述。

比如，以测试清单中要测试的功能是功能M1、功能M2、功能M3和功能M4为例。被测系统在测试清单中的四个功能分别被测试了指定次数后，通过服务器对比测试结果数据和线上结果数据是否相同。此时，服务器得到的对比结果数据显示功能M1、功能M3和功能M4在实现时，测试结果数据和线上结果数据相同。于是，服务器分别获取被测系统和线上系统实现功能M2时的测试执行参数和线上执行参数。其中，测试执行参数包括用户操作指令C、子步骤S11、子步骤S12和子步骤S13，测试结果数据是R11；线上执行参数包括用户操作指令C、子步骤S21、子步骤S22和子步骤S23，线上结果数据是R21。服务器在检测后确定差异部分是子步骤S13和子步骤S23，于是服务器标注出该差异部分，并以邮件或者测试文档的形式，展示测试执行参数和线上执行参数之间的差异部分。在设计人员修改被测系统后，服务器将获取上一次测试的测试清单并删除其中已经通过测试的功能，使用该精简后的测试清单中的功能对修改后的被测系统进行测试，以提高测试被测系统的效率。

综上所述，本公开实施例提供的测试系统的方法，通过当测试结果数据和线上结果数据不同时，获取测试结果数据对应的测试执行参数，测试参数至少包括用户操作指令和测试系统执行用户操作指令时的各个步骤；获取线上结果数据对应的线上执行参数，线上执行参数至少包括用户操作指令和线上系统执行用户操作指令时的各个步骤；比对测试执行参数和线上执行参数，标注出测试执行参数和线上执行参数之间的差异部分；获取修改后的被测系统，删除上一次的测试清单中已通过测试的功能，对被测系统进行测试；当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。使得被测系统在执行一个指定功能出现错误之后，能够自动准确地显示被测系统出现错误的代码段，并在之后的测试中，自动忽略已经通过测试的功能，针对未通过测试的功能进行测试，提高了测试被测系统的效率。

下述为本公开装置实施例，可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节，请参照本公开方法实施例。

图6是根据一示例性实施例示出的一种测试系统的装置的框图，该测试系统的装置应用在服务器中，其测试系统的功能可以由纯硬件实现，也可以由硬件执行相应的软件实现，从而实现图1、图2或图3中所列出的步骤。该装置可以包括：快照获取模块601、生成模块602、读取模块603和执行模块604。

快照获取模块601，用于获取线上系统的线上数据库在指定时间点的数据库快照，线上系统为已实际运行的与被测系统具有相同功能的系统。

生成模块602，用于根据数据库快照生成被测系统的测试数据库。

读取模块603，用于读取线上系统的线上数据库在指定时间点之后执行的用户操作指令。

执行模块604，用于令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。

综上所述，本公开实施例提供的测试程序的装置，通过获取线上系统的线上数据库在指定时间点的数据库快照，根据数据库快照生成被测系统的测试数据库，读取线上系统的线上数据库在指定时间点之后执行的用户操作指令，令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据，通过基于数据库快照生成的被测系统的数据库，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

图7是根据一示例性实施例示出的另一种测试系统的装置的框图，该测试系统的装置应用在服务器中，其测试系统的功能可以由纯硬件实现，也可以由硬件执行相应的软件实现，从而实现图1、图2或图3中所列出的步骤。该装置可以包括：快照获取模块701、生成模块702、读取模块703和执行模块704。

快照获取模块701，用于获取线上系统的线上数据库在指定时间点的数据库快照，线上系统为已实际运行的与被测系统具有相同功能的系统。

生成模块702，用于根据数据库快照生成被测系统的测试数据库。

读取模块703，用于读取线上系统的线上数据库在指定时间点之后执行的用户操作指令。

执行模块704，用于令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据。

可选的，在本公开的一种可能的实现方式中，该测试系统的装置还包括：结果获取模块705和对比模块706。

结果获取模块705，用于获取线上系统执行用户操作指令后对应的线上结果数据。

对比模块706，用于对比测试结果数据和线上结果数据，获得比对结果数据。

可选的，在本公开的另一种可能的实现方式中，该测试系统的装置还包括：第一获取模块707、第二获取模块708和标注模块709。

第一获取模块707，用于当测试结果数据和线上结果数据不同时，获取测试结果数据对应的测试执行参数，测试参数至少包括用户操作指令和被测系统执行用户操作指令时的各个步骤。

第二获取模块708，用于获取线上结果数据对应的线上执行参数，线上执行参数至少包括用户操作指令和线上系统执行用户操作指令时的各个步骤。

标注模块709，用于比对测试执行参数和线上执行参数，标注出测试执行参数和线上执行参数之间的差异部分。

可选的，在本公开的又一种可能的实现方式中，该测试系统的装置还包括：清单获取模块710和结果获取模块711。

清单获取模块710，用于获取预设的测试清单，测试清单包括被测系统被测试的功能；

结果输出模块711，用于当测试清单中的功能分别被测试完成时，输出对比结果数据。

可选的，在本公开的另一种可能的实现方式中，该测试系统的装置还包括：设置模块712。

设置模块712，用于设置被测系统的测试参数，测试参数包括被测用户、测试时长或并发度中的至少一项；其中，测试时长用于指示测试被测系统运行的时间长度，并发度用于指示被测系统同时执行的最大任务数量。

可选的，在本公开的又一种可能的实现方式中，该测试系统的装置还包括：发布模块713。

发布模块713，用于当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境，以便线上环境中的相关服务器使用数据包更新线上系统。

综上所述，本公开实施例提供的一种测试系统的装置，通过获取线上系统的线上数据库在指定时间点的数据库快照；根据数据库快照生成被测系统的测试数据库；获取预设的测试清单，测试清单包括被测系统被测试的功能；设置被测系统的测试参数；令被测系统执行用户操作指令并获取被测系统执行用户操作指令后对应的测试结果数据；对比测试结果数据和线上结果数据是否相同，获得对比结果数据；当测试清单中的功能分别被测试完成时，获取测试结果数据和线上结果数据之间的对比结果数据；当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。由于被测系统和线上系统的运行环境完全隔离，且被测系统拥有基于向上数据库的数据库快照生成的测试数据库，因此，本公开实施例提供的方法，使得测试环境更加贴近实际的使用环境的同时，能够将被测系统和线上系统完全隔离，避免了测试系统出错造成的线上系统错误。

另外，本公开实施例提供的测试系统的装置，还通过当测试结果数据和线上结果数据不同时，获取测试结果数据对应的测试执行参数，测试参数至少包括用户操作指令和测试系统执行用户操作指令时的各个步骤；获取线上结果数据对应的线上执行参数，线上执行参数至少包括用户操作指令和线上系统执行用户操作指令时的各个步骤；比对测试执行参数和线上执行参数，标注出测试执行参数和线上执行参数之间的差异部分；获取修改后的被测系统，删除上一次的测试清单中已通过测试的功能，对被测系统进行测试；当对比结果数据表示测试结果数据和线上结果数据相同时，将封装有被测系统的功能代码的数据包发布到线上环境。使得被测系统在执行一个指定功能出现错误之后，能够自动准确地显示被测系统出现错误的代码段，并在之后的测试中，自动忽略已经通过测试的功能，针对未通过测试的功能进行测试，提高了测试被测系统的效率。

本公开一示例性实施例还提供里一种测试系统的装置，能够实现本公开提供的测试系统的方法。该装置包括：处理器，以及用于存储处理器的可执行指令的存储器。其中，处理器被配置为：

获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

根据所述数据库快照生成被测系统的测试数据库；

读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据。

可选的，所述方法还包括：

获取所述线上系统执行所述用户操作指令后对应的线上结果数据；

对比所述测试结果数据和所述线上结果数据，获得比对结果数据。

可选的，所述方法包括：

当所述测试结果数据和所述线上结果数据不同时，获取所述测试结果数据对应的测试执行参数，所述测试参数至少包括用户操作指令和所述测试系统执行所述用户操作指令时的各个步骤；

获取所述线上结果数据对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分。

可选的，所述方法还包括：

获取预设的测试清单，所述测试清单包括所述被测系统被测试的功能；

当所述测试清单中的功能分别被测试完成时，输出所述对比结果数据。

可选的，所述方法包括：

设置所述被测系统的测试参数，所述测试参数包括被测用户、测试时长或并发度中的至少一项；

其中，所述测试时长用于指示测试所述被测系统运行的时间长度，所述并发度用于指示所述被测系统同时执行的最大任务数量。

可选的，所述方法包括：

当对比结果数据表示所述测试结果数据和所述线上结果数据相同时，将封装有所述被测系统的功能代码的数据包发布到线上环境，以便所述线上环境中的相关服务器使用所述数据包更新所述线上系统。

需要说明的一点是，上述实施例提供的装置在实现其功能时，仅以上述各个功能模块的划分进行举例说明，实际应用中，可以根据实际需要而将上述功能分配由不同的功能模块完成，即将设备的内容结构划分成不同的功能模块，以完成以上描述的测试系统的方法的全部或者部分功能。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图8示出了本申请一个示例性实施例提供的服务器的结构示意图，该服务器包括：处理器810、存储器820和网络接口830。

处理器810包括一个或一个以上的处理核心。

存储器820用于存储程序指令和/或数据，处理器810被配置为执行存储器820中的程序指令，从而实现各种功能应用以及数据处理。可选地，存储器820中存储的程序指令被执行时用于实现本申请各个实施例提供的测试系统方法中由服务器执行的步骤。存储器820可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

网络接口830用于实现与终端之间、或与其它服务器之间的通信，网络接口830可以是有线通信组件，比如，光纤接口、RJ45网卡及接口等。网络接口830也可以是无线通信组件。

可选地，存储器820中存储的程序指令包括：应用层822和内核层824。应用层822包括至少一个可运行程序，示意性的，因此822包括：被测系统822a和测试数据库822b。

上述结构仅为对服务器的示意性说明，本领域技术人员可以知晓，服务器还可以包括比上述示意更多或更少的组件，比如，服务器还可以包括输入/输出(I/O)组件或电源等组件。

本领域普通技术人员可以理解的是，实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序指令配合相关的硬件完成，所述程序指令可以存储于存储设备中，该存储设备含有一种计算机可读存储介质，上述提到的存储介质可以是只读存储器，固态硬盘(Solid State Drives，SSD)，闪存(Flash),磁盘或光盘等。当该计算机可读存储介质中的指令由服务器的处理器810执行时，使得服务器能够执行上述测试系统的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (14)

1.一种测试系统的方法，其特征在于，所述方法包括：

获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

根据所述数据库快照生成被测系统的测试数据库；

读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据；

获取测试结果数据对应的测试执行参数，所述测试执行参数至少包括用户操作指令和所述被测系统执行所述用户操作指令时的各个步骤；

获取所述线上系统执行所述用户操作指令后对应的线上结果数据所对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分，所述差异部分为实现相同功能且得到数据不同的子步骤。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

对比所述测试结果数据和所述线上结果数据，获得对比结果数据。

3.根据权利要求2所述的方法，其特征在于，所述方法包括：

当所述测试结果数据和所述线上结果数据不同时，获取所述测试结果数据对应的测试执行参数。

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

获取预设的测试清单，所述测试清单包括所述被测系统被测试的功能；

当所述测试清单中的功能分别被测试完成时，输出所述对比结果数据。

5.根据权利要求1所述的方法，其特征在于，所述方法包括：

设置所述被测系统的测试参数，所述测试参数包括被测用户、测试时长或并发度中的至少一项；

其中，所述测试时长用于指示测试所述被测系统运行的时间长度，所述并发度用于指示所述被测系统同时执行的最大任务数量。

6.根据权利要求2所述的方法，其特征在于，所述方法包括：

当所述对比结果数据表示所述测试结果数据和所述线上结果数据相同时，将封装有所述被测系统的功能代码的数据包发布到线上环境，以便所述线上环境中的相关服务器使用所述数据包更新所述线上系统。

7.一种测试系统的装置，其特征在于，所述装置包括：

快照获取模块，用于获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

生成模块，用于根据所述数据库快照生成被测系统的测试数据库；

读取模块，用于读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

执行模块，用于令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据；

结果获取模块，用于获取所述线上系统执行所述用户操作指令后对应的线上结果数据；

第一获取模块，用于获取所述测试结果数据对应的测试执行参数，所述测试执行参数至少包括用户操作指令和所述被测系统执行所述用户操作指令时的各个步骤；

第二获取模块，用于获取所述线上结果数据对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

标注模块，用于比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分；所述差异部分为实现相同功能且得到数据不同的子步骤。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

对比模块，用于对比所述测试结果数据和所述线上结果数据，获得对比结果数据。

9.根据权利要求8所述的装置，其特征在于，所述装置包括：

第一获取模块，用于当所述测试结果数据和所述线上结果数据不同时，获取所述测试结果数据对应的测试执行参数。

10.根据权利要求8所述的装置，其特征在于，所述装置还包括：

清单获取模块，用于获取预设的测试清单，所述测试清单包括所述被测系统被测试的功能；

结果输出模块，用于当所述测试清单中的功能分别被测试完成时，输出所述对比结果数据。

11.根据权利要求7所述的装置，其特征在于，所述装置包括：

设置模块，用于设置所述被测系统的测试参数，所述测试参数包括被测用户、测试时长或并发度中的至少一项；

其中，所述测试时长用于指示测试所述被测系统运行的时间长度，所述并发度用于指示所述被测系统同时执行的最大任务数量。

12.根据权利要求8所述的装置，其特征在于，所述装置包括：

发布模块，用于当所述对比结果数据表示所述测试结果数据和所述线上结果数据相同时，将封装有所述被测系统的功能代码的数据包发布到线上环境，以便所述线上环境中的相关服务器使用所述数据包更新所述线上系统。

13.一种测试系统的装置，其特征在于，所述装置包括：

处理器；

用于存储所述处理器的可执行指令的存储器；

其中，所述处理器被配置为：

获取线上系统的线上数据库在指定时间点的数据库快照，所述线上系统为已实际运行的与被测系统具有相同功能的系统；

根据所述数据库快照生成被测系统的测试数据库；

读取所述线上系统的线上数据库在所述指定时间点之后执行的用户操作指令；

令所述被测系统执行所述用户操作指令并获取所述被测系统执行所述用户操作指令后对应的测试结果数据；

获取测试结果数据对应的测试执行参数，所述测试执行参数至少包括用户操作指令和所述被测系统执行所述用户操作指令时的各个步骤；

获取所述线上系统执行所述用户操作指令后对应的线上结果数据所对应的线上执行参数，所述线上执行参数至少包括用户操作指令和所述线上系统执行所述用户操作指令时的各个步骤；

比对所述测试执行参数和所述线上执行参数，标注出所述测试执行参数和所述线上执行参数之间的差异部分，所述差异部分为实现相同功能且得到数据不同的子步骤。

14.一种存储设备，其特征在于，所述存储设备中存储有至少一条指令，所述指令是由处理器加载并执行的权利要求1至6任一所述的测试系统的方法。

Images