CN112860569A - 一种自动化测试方法、装置、电子设备和存储介质 - Google Patents

Abstract

本申请公开了一种自动化测试方法、装置、电子设备和存储介质，所述方法包括：从目标运行数据中获取目标待测数据，目标运行数据表征线上版本软件的运行过程中的请求数据和响应数据，为预录制的线上版本软件的流量数据。根据目标待测数据，对测试版本软件进行自动化测试，并对自动化测试过程中的请求数据和响应数据进行获取，得到测试数据。将目标运行数据和测试数据进行比对，得到初始差异数据。对初始差异数据去噪得到目标差异数据，并根据目标差异数据，得到测试结果。在自动化测试时，该方法利用录制的线上版本软件的流量数据进行测试，可以将测试范围扩展到测试版本软件中各个功能模块的数据操作场景上，提高了测试有效性和准确性。

Description

一种自动化测试方法、装置、电子设备和存储介质

技术领域

本申请涉及软件测试技术领域，尤其涉及一种自动化测试方法、装置、电子设备和存储介质。

背景技术

回归测试作为软件生命周期的一个组成部分，在整个软件测试过程中占有很大的工作量比重，软件开发的各个阶段都会进行多次回归测试。在渐进和快速迭代开发中，新版本软件的连续发布使回归测试进行的更加频繁，因此需要选择适当的回归测试策略，对新版本软件进行测试。

现有技术中，通常需要准备线上版本软件，线上对照版本软件和测试版本软件，基于预设的测试用例，分别获取这三个版本软件的流量数据，根据这三个版本软件的流量数据计算差异流量数据，得到测试结果。由于测试过程中不便于对数据进行修改，导致测试场景局限于读取数据的场景上。且预设的测试用例对于软件内部各个功能模块的使用并不均衡，使得整个测试过程集中在少数功能模块上，影响了测试结果的准确性。

发明内容

本申请提供了一种自动化测试方法、装置、电子设备和存储介质，得到扩大测试范围，提高测试有效性和准确性的技术效果。

一方面，本申请提供了一种自动化测试方法，所述方法包括：

从目标运行数据中获取目标待测数据，所述目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

根据所述目标待测数据，对测试版本软件进行自动化测试；

对自动化测试过程中所述测试版本软件的请求数据和响应数据进行获取，得到测试数据；

将所述测试数据和所述目标运行数据进行比对，得到初始差异数据；

对所述初始差异数据进行去噪处理，得到目标差异数据；

根据所述目标差异数据，得到所述测试版本软件的测试结果。

另一方面提供了一种自动化测试装置，所述装置包括：待测数据获取模块、自动化测试模块、测试过程录制模块、数据比对模块、目标差异数据获取模块和测试结果获取模块；

所述待测数据获取模块用于从目标运行数据中获取目标待测数据，所述目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

所述自动化测试模块用于根据所述目标待测数据，对测试版本软件进行自动化测试；

所述测试过程录制模块用于对自动化测试过程中所述测试版本软件的请求数据和响应数据进行获取，得到测试数据；

所述数据比对模块用于将所述测试数据和所述目标运行数据进行比对，得到初始差异数据；

所述目标差异数据获取模块用于对所述初始差异数据进行去噪处理，得到目标差异数据；

所述测试结果获取模块用于根据所述目标差异数据，得到所述测试版本软件的测试结果。

另一方面提供了一种电子设备，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述所述的一种自动化测试方法。

另一方面提供了一种计算机可读存储介质，所述存储介质包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如上述所述的一种自动化测试方法。

另一方面提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述自动化测试方面的各种可选实现方式中提供的方法。

本申请提供的一种自动化测试方法、装置、电子设备和存储介质，所述方法包括：从目标运行数据中获取目标待测数据，目标运行数据表征线上版本软件的运行过程中的请求数据和响应数据，为预录制的线上版本软件的流量数据。根据目标待测数据，对测试版本软件进行自动化测试，并对自动化测试过程中的请求数据和响应数据进行获取，得到测试数据。将目标运行数据和测试数据进行比对，得到初始差异数据。对初始差异数据去噪得到目标差异数据，并根据目标差异数据，得到测试结果。在自动化测试时，该方法利用录制的线上版本软件的流量数据进行测试，可以将测试范围扩展到测试版本软件中各个功能模块的数据操作场景上，提高了测试有效性和准确性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种自动化测试方法的应用场景示意图；

图2为本申请实施例提供的一种分布式存储系统的结构示意图；

图3为本申请实施例提供的一种自动化测试方法的流程图；

图4为本申请实施例提供的一种自动化测试方法中获取目标运行数据的流程图；

图5为本申请实施例提供的一种自动化测试方法中获取目标待测数据的流程图；

图6为本申请实施例提供的一种自动化测试方法中自动化测试的流程图；

图7为本申请实施例提供的一种自动化测试方法中录制自动化测试过程的流程图；

图8为本申请实施例提供的一种自动化测试方法中对初始差异数据进行去噪处理的流程图；

图9为本申请实施例提供的一种自动化测试方法中在线上环境中获取目标运行数据并在测试环境中进行测试的示意图；

图10为本申请实施例提供的一种自动化测试方法中录制线上版本软件的流量数据并在测试版本软件中进行回放的示意图；

图11为本申请实施例提供的一种自动化测试装置的结构示意图；

图12为本申请实施例提供的一种用于实现本申请实施例所提供的方法的设备的硬件结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述。显然，所描述的实施例仅仅是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

在本申请的描述中，需要理解的是，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。而且，术语“第一”、“第二”等适用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。

在具体描述本实施例之前，为了便于理解，首先对常用的关键术语进行介绍和解释：

面向切面编程技术(Aspect Oriented Programming，AOP)：通过预编译方式和运行其动态代理实现在不修改源代码的情况下给程序动态统一添加功能的一种技术。

卡夫卡队列(kafka)：卡夫卡队列是一个分布式的、可分区的、可复制的消息队列，卡夫卡队列以集群的方式运行，可以由一个或多个服务组成。

分布式存储系统：分布式存储系统可以为Hadoop分布式文件系统(HadoopDistributed File System，HDFS)，HDFS是指被设计成适合运行在通用硬件上的分布式文件系统，采用了主从结构模型，是一个高容错率的系统。

Nginx：是一个高性能的基于超文本传输协议(Hypertext Transfer Protocol，HTTP)通信，并可以进行反向代理的网页服务器，同时也提供了电子邮件的服务。

请参见图1，其显示了本申请实施例提供的一种自动化测试方法的应用场景示意图，该应用场景包括线上服务器110、测试服务器120和分布式存储系统130，线上服务器110对线上版本软件在任意一次运行过程中的请求数据和响应数据进行获取，得到目标运行数据。线上服务器110将目标运行数据发送到分布式存储系统130中进行存储。测试服务器120在进行测试时，从分布式存储系统130中存储的目标运行数据中获取目标待测数据。测试服务器120根据目标待测数据，对测试版本软件进行自动化测试，并对自动化测试过程中的请求数据和响应数据进行获取，得到测试数据。测试服务器120将目标运行数据和测试数据进行比对，得到初始差异数据。测试服务器120对初始差异数据去噪得到目标差异数据，并根据目标差异数据，得到测试结果。

在本申请实施例中，线上服务器110和测试服务器120可以包括一个独立运行的服务器，或者分布式服务器，或者由多个服务器组成的服务器集群。线上服务器110和测试服务器120可以包括有网络通信单元、处理器和存储器等等。具体的，线上服务器110可以获取线上版本软件的目标运行数据，测试服务器120可以对测试版本软件进行自动化测试，并获取测试版本软件的测试数据。

在本申请实施例中，分布式存储系统130可以为区块链的结构，如图2所示，区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain)，本质上是一个去中心化的数据库，是一串使用密码学方法相关联产生的数据块，每一个数据块中包含了一批次网络交易的信息，用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层。

区块链底层平台可以包括用户管理、基础服务、智能合约以及运营监控等处理模块。其中，用户管理模块负责所有区块链参与者的身份信息管理，包括维护公私钥生成(账户管理)、密钥管理以及用户真实身份和区块链地址对应关系维护(权限管理)等，并且在授权的情况下，监管和审计某些真实身份的交易情况，提供风险控制的规则配置(风控审计)；基础服务模块部署在所有区块链节点设备上，用来验证业务请求的有效性，并对有效请求完成共识后记录到存储上，对于一个新的业务请求，基础服务先对接口适配解析和鉴权处理(接口适配)，然后通过共识算法将业务信息加密(共识管理)，在加密之后完整一致的传输至共享账本上(网络通信)，并进行记录存储；智能合约模块负责合约的注册发行以及合约触发和合约执行，开发人员可以通过某种编程语言定义合约逻辑，发布到区块链上(合约注册)，根据合约条款的逻辑，调用密钥或者其它的事件触发执行，完成合约逻辑，同时还提供对合约升级注销的功能；运营监控模块主要负责产品发布过程中的部署、配置的修改、合约设置、云适配以及产品运行中的实时状态的可视化输出，例如：告警、监控网络情况、监控节点设备健康状态等。

平台产品服务层提供典型应用的基本能力和实现框架，开发人员可以基于这些基本能力，叠加业务的特性，完成业务逻辑的区块链实现。应用服务层提供基于区块链方案的应用服务给业务参与方进行使用。

请参见图3，其显示了一种自动化测试方法，可应用于服务器侧，该方法包括：

S310.从目标运行数据中获取目标待测数据，目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

进一步地，请参见图4，在从目标运行数据中获取目标待测数据之前，还包括：

S410.基于面向切面编程技术，对线上版本软件发送到外部模块的请求数据进行调用，得到第一请求数据；

S420.基于面向切面编程技术，对外部模块发送到线上版本软件的响应数据进行调用，得到第一请求数据对应的第一响应数据；

S430.基于面向切面编程技术，对外部模块发送到线上版本软件的请求数据进行调用，得到第二请求数据；

S440.基于面向切面编程技术，对线上版本软件发送到外部模块的响应数据进行调用，得到第二请求数据对应的第二响应数据；

S450.将第一请求数据、第一响应数据、第二请求数据和第二响应数据作为目标运行数据。

具体地，面向切面编程技术(Aspect Oriented Programming，AOP)可以进行动态代理，在线上版本软件和外部模块交互时，线上服务器可以利用AOP技术确定线上版本软件中数据输出程序的切入点和数据输入程序的切入点，并获取数据输出程序的切入点对应的代码和数据输入程序的切入点对应的代码，从而确定数据输出程序的横切面和数据输入程序的横切面。线上服务器在数据输出程序的横切面处调用传输的数据，并在数据输入程序的横切面处调用传输的数据，可以对线上版本软件中的请求数据和响应数据进行截取。

线上版本软件生成请求数据并向外部模块发送请求数据，线上服务器可以利用AOP技术截取线上版本软件发送的请求数据，得到第一请求数据。外部模块接收并响应线上版本软件发送的请求数据，并将对应的响应数据发送到线上版本软件中，线上服务器利用AOP技术截取外部模块发送的响应数据，得到第一响应数据。第一响应数据与第一请求数据具有对应关系。

外部模块生成请求数据并向线上版本软件发送请求数据，线上服务器可以利用AOP技术截取外部模块发送的请求数据，得到第二请求数据。线上版本软件接收并响应外部模块发送的请求数据，并将对应的响应数据发送到外部模块中，线上服务器利用AOP技术截取线上版本软件发送的响应数据，得到第二响应数据。第二响应数据与第二请求数据具有对应关系。

第一请求数据和第二响应数据均为线上版本软件输出的数据，第二请求数据和第一响应数据均为线上版本软件输入的数据，线上服务器获取第一请求数据、第二响应数据、第二请求数据和第一响应数据时，即对线上版本软件输出的数据流和输入的数据流进行记录，也就是对线上版本软件中的流量数据进行录制。

利用AOP技术对线上版本软件的流量数据进行录制，避免录制过程中对线上版本软件的流量数据的破坏，并可以对不同的流量数据进行区分，提高测试结果的准确性。

进一步地，将第一请求数据、第一响应数据、第二请求数据和第二响应数据作为目标运行数据包括：

根据预设的数据结构，对第一请求数据、第一响应数据、第二请求数据和第二响应数据进行整合处理，得到目标运行数据；

将目标运行数据存储到分布式存储系统上。

具体地，线上服务器根据预设的数据结构，对第一请求数据、第一响应数据、第二请求数据和第二响应数据进行整合处理，得到指定格式的目标运行数据，并将目标运行数据保存在线上服务器的磁盘中。在一个具体的实施例中，数据结构可以为如下格式：

其中，message RecordData为记录的目标运行数据，enum Source可以表示数据的来源类型，SOURCE_UNKNOWN表示未知数据来源，HTTP表示互联网为数据源的数据，PB表示数据库为数据源的数据，SDK表示软件为数据源的数据。required string request_id表示数据请求的标识信息，是必须填入的数据。optional Source source表示数据的来源，optional string method表示数据执行的方法，optional string request表示请求数据，optional string response表示响应数据，optional int32 time_cost表示日志数据，optional string protocol_path表示数据通信的路径，这些数据是可选择填入的数据。

线上服务器上部署有代理程序，代理程序将保存在线上服务器的磁盘中的数据发送到消息队列中。在一个具体的实施例中，消息队列可以为卡夫卡队列。卡夫卡队列是分布式消息队列，可以作为一个或多个服务器上的队列运行。卡夫卡队列可以根据主题的类别存储记录流，即卡夫卡队列可以按照主题的类别，存储线上版本软件的输入的数据流和输出的数据流，即存储第一请求数据、第一响应数据、第二请求数据和第二响应数据。

测试服务器消费消息队列中的目标运行数据，将目标运行数据保存到分布式存储系统上。当测试服务器对测试版本软件进行测试时，从分布式存储系统上获取测试版本软件对应的目标运行数据，将目标运行数据解析为预设的数据结构，加载到测试服务器的内存上。在进行自动化测试时，测试服务器可以根据目标运行数据，对测试版本软件进行自动化测试。

基于分布式存储的方式，对目标运行数据进行存储，可以提高存储系统的可靠性和存储效率。

进一步地，请参见图5，第一响应数据有多个，第二请求数据有多个，从目标运行数据中获取目标待测数据包括：

S510.获取目标运行数据中的第一响应数据和第二请求数据；

S520.将第一响应数据的执行路径信息进行两两对比，确定执行路径重叠的第一响应数据；

S530.将第二请求数据的执行路径信息进行两两对比，确定执行路径重叠的第二请求数据；

S540.根据执行路径重叠的第一响应数据和执行路径重叠的第二请求数据，确定冗余数据；

S550.从第一响应数据和第二请求数据中将冗余数据删除，得到目标待测数据。

具体地，测试服务器可以在测试前对目标运行数据中的第一响应数据和第二请求数据进行筛选，得到目标待测数据。测试服务器获取多个第一响应数据的执行路径信息，并获取多个第二请求数据的执行路径信息，作为一个具体的实施例，执行路径信息可以为第一响应数据对应的代码行或者第二请求数据对应的代码行。测试服务器将第一响应数据的执行路径信息进行两两对比，确定执行路径重叠的两个第一响应数据，并将第二请求数据的执行路径信息进行两两对比，确定执行路径重叠的两个第二请求数据。测试服务器在执行路径重叠的两个第一响应数据中任选一个第一响应数据保留，另一个第一响应数据确定为冗余数据。测试服务器在执行路径重叠的第二请求数据中任选一个第二请求数据保留，另一个第二请求数据确定为冗余数据。测试服务器从第一响应数据和第二请求数据中删除冗余数据，可以得到目标待测数据。目标待测数据即为测试时能够覆盖测试版本软件中全部模块的最小数据集。

例如，第一响应数据A的执行路径信息为x，第一响应数据B的执行路径信息也为x，则第一响应数据A和第一响应数据B为一组执行路径重叠的第一响应数据。测试服务器可以保留第一响应数据A，将第一响应数据B确定为冗余数据。或者保留第一响应数据B将第一响应数据A确定为冗余数据。

对目标运行数据中的第一响应数据和第二请求数据进行筛选，得到目标待测数据，可以以更小的数据集覆盖测试版本软件中的模块，提高自动化测试效率。

S320.根据目标待测数据，对测试版本软件进行自动化测试；

进一步地，请参见图6，根据目标待测数据，对测试版本软件进行自动化测试包括：

S610.将目标待测数据中的第二请求数据作为外部模块发送到测试版本软件的模拟请求数据；

S620.将目标待测数据中的第一响应数据作为外部模块发送到测试版本软件的模拟响应数据；

S630.根据模拟请求数据和模拟响应数据，对测试版本软件进行自动化测试。

具体地，测试服务器在对测试版本软件进行自动化测试时，测试服务器可以回放目标待测数据中的第二请求数据和第一响应数据，对测试版本软件进行自动化测试。在回放过程中，测试服务器将目标待测数据中的第二请求数据作为外部模块发送到测试版本软件的模拟请求数据，并将目标待测数据中的第一响应数据作为外部模块发送到测试版本软件的模拟响应数据。

在测试版本软件对外部模块发送测试请求数据时，由测试服务器中的模拟服务器接收测试请求数据，并将目标待测数据中的第一响应数据作为模拟响应数据，模拟服务器将模拟响应数据发送到测试版本软件中。

在外部模块发送测试请求数据到测试版本软件中时，由测试服务器中的模拟客户端向测试版本软件发送模拟请求数据，模拟客户端将目标待测数据中的第二请求数据作为模拟请求数据，发送到测试版本软件中，使得测试版本软件响应于模拟请求数据，执行对应的操作。

在自动化测试时，模拟服务器和模拟客户端接管测试版本软件与外部模块的交互，使得自动化测试在隔离的环境中进行，不发生真实的数据操作，避免影响流量数据的准确性。且自动化测试时，利用录制的线上版本软件的流量数据进行测试，可以将测试范围扩展到测试版本软件中各个功能模块的数据操作场景上，提高了测试有效性和准确性。

S330.对自动化测试过程中测试版本软件的请求数据和响应数据进行获取，得到测试数据；

进一步地，请参见图7，对自动化测试过程中测试版本软件的请求数据和响应数据进行获取，得到测试数据包括：

S710.基于面向切面编程技术，对测试版本软件发送到外部模块的测试请求数据进行调用，得到第一测试请求数据；

S720.基于面向切面编程技术，对外部模块发送到测试版本软件的模拟响应数据进行调用，得到第一测试请求数据对应的第一测试响应数据；

S730.基于面向切面编程技术，对外部模块发送到测试版本软件的模拟请求数据进行调用，得到第二测试请求数据；

S740.基于面向切面编程技术，对测试版本软件发送到外部模块的测试响应数据进行调用，得到第二测试请求数据对应的第二测试响应数据；

S750.将第一测试请求数据、第一测试响应数据、第二测试请求数据和第二测试响应数据作为测试数据。

具体地，AOP可以进行动态代理，在测试版本软件和外部模块交互时，测试服务器可以利用AOP技术确定测试版本软件中数据输出程序的切入点和数据输入程序的切入点，并获取数据输出程序的切入点对应的代码和数据输入程序的切入点对应的代码，从而确定数据输出程序的横切面和数据输入程序的横切面。测试服务器在数据输出程序的横切面处调用传输的数据，并在数据输入程序的横切面处调用传输的数据，可以对测试版本软件中的请求数据和响应数据进行截取。

测试版本软件生成测试请求数据并向外部模块发送测试请求数据，测试服务器可以利用AOP技术截取测试版本软件发送的测试请求数据，得到第一测试请求数据。测试服务器中的模拟服务器接收第一测试请求数据，并将目标待测数据中的第一响应数据作为模拟响应数据，发送到测试版本软件中。测试服务器可以利用AOP技术截取模拟服务器发送的模拟响应数据，得到第一测试响应数据。第一测试响应数据与第一测试请求数据具有对应关系。

测试服务器中的模拟客户端将目标待测数据中的第二请求数据作为模拟请求数据，发送到测试版本软件中。测试服务器可以利用AOP技术截取模拟客户端发送的模拟请求数据，得到第二测试请求数据。测试版本软件接收并响应模拟客户端发送的第二测试请求数据，并将对应的响应数据发送到模拟客户端中，测试服务器利用AOP技术截取测试版本软件发送的响应数据，得到第二测试响应数据。第二测试响应数据与第二测试请求数据具有对应关系。

第一测试请求数据和第二测试响应数据均为测试版本软件输出的数据，第二测试请求数据和第一测试响应数据均为测试版本软件输入的数据，测试服务器获取第一测试请求数据、第二测试响应数据、第二测试请求数据和第一测试响应数据时，即对测试版本软件输出的数据流和输入的数据流进行记录，也就是对测试版本软件中的流量数据进行录制。

利用AOP技术对测试版本软件的流量数据进行录制，避免录制过程中对测试版本软件中的流量数据的破坏，并可以对不同的流量数据进行区分，提高测试结果的准确性。

S340.将测试数据和目标运行数据进行比对，得到初始差异数据；

S350.对初始差异数据进行去噪处理，得到目标差异数据；

进一步地，请参见图8，对初始差异数据进行去噪处理，得到目标差异数据包括：

S810.获取第一运行数据和第二运行数据，第一运行数据表征线上版本软件在连续两次运行过程中任一次运行过程的请求数据和响应数据，第二运行数据表征线上版本软件在连续两次运行过程中除第一运行数据外的另一次运行过程的请求数据和响应数据；

S820.将第一运行数据和第二运行数据进行比对，得到噪声差异数据；

S830.根据噪声差异数据，对初始差异数据进行去噪处理，得到目标差异数据。

具体地，测试服务器将测试数据和目标运行数据进行比对，若测试数据和目标运行数据间存在差异，则将该差异确定为初始差异数据。若测试数据和目标运行数据间不存在差异，则直接得到测试版本软件的测试结果。

将线上版本软件放置到测试服务器所在的测试环境中，测试服务器对线上版本软件中的流量数据进行两次录制，得到线上版本软件在连续两次运行过程的请求数据和响应数据，将其中一次运行过程的请求数据和响应数据作为第一运行数据，将另一次运行过程的请求数据和响应数据作为第二运行数据。

测试服务器对比第一运行数据和第二运行数据，若此时的第一运行数据和第二运行数据间存在差异，则将该差异确定为噪声差异数据。测试服务器从初始差异数据中删除噪声差异数据，得到目标差异数据。若初始差异数据和噪声差异数据相同，即测试结果中存在差异数据的原因为噪声导致的，则得到测试版本软件的测试结果。若初始差异数据和噪声差异数据不同，则根据目标差异数据得到测试版本软件的测试结果。

测试服务器根据第一运行数据和第二运行数据间的差异数据，确定噪声差异数据，在初始差异数据中去除噪声差异数据的影响，可以提高测试结果的准确性。

S360.根据目标差异数据，得到测试版本软件的测试结果。

具体地，测试服务器可以根据目标差异数据，生成测试报告，将测试报告作为测试版本软件的测试结果。测试报告中可以目标差异数据对应的测试版本软件中的模块进行标注，并提供目标差异数据的详细报告信息。根据测试版本软件的测试结果，可以获取测试版本软件对应的目标差异数据，并根据目标差异数据，定位测试版本软件中存在问题的模块，进而可以对测试版本软件中存在问题的模块进行修复。

在一个具体的实施例中，请参见图9，在线上环境中，线上服务器利用录制插件对线上版本软件进行流量数据录制并存储线上版本软件的流量数据。录制插件可以是AOP录制插件，线上服务器利用AOP录制插件，对线上版本软件中的模块A、模块B和模块C进行流量数据录制，获取线上版本软件发送到外部模块的第一请求数据和第二响应数据，以及外部模块发送到线上版本软件的第二请求数据和第一响应数据。线上环境中的外部模块可以为代理服务器、数据库或者其他中间服务模块等。代理服务器用于代理客户端的请求，发送客户端的请求到线上版本软件。在一个具体的实施例中，代理服务器可以为网页服务器软件Nginx。

线上服务器将第一请求数据、第二响应数据、第二请求数据和第一响应数据按照预设的数据结构进行整合处理，得到目标运行数据，保存到线上服务器的磁盘上。并通过线上服务器上的代理程序，将目标运行数据发送到卡夫卡队列中，测试服务器消费卡夫卡队列中的目标运行数据，将目标运行数据保存在分布式存储系统上。

当软件产生新版本的时候，将新版本的软件作为测试版本软件，在隔离的测试环境中，测试服务器读取并分析分布式存储系统中存储的目标运行数据中的第二请求数据和第一响应数据，将第二请求数据和第一响应数据加载到测试服务器的内存中。测试服务器确定目标运行数据中的第二请求数据和第一响应数据中的冗余数据，去除冗余数据后得到目标待测数据，将目标待测数据作为测试版本软件的输入数据，以进行线上版本软件的流量数据的回放，测试服务器启动测试程序，基于回放的目标待测数据中的第一响应数据和第二请求数据，对测试版本软件进行自动化测试。请参见图10，如图10所示为录制线上版本软件的流量数据并在测试版本软件中进行回放的示意图。在数据回放的过程中，测试服务器利用AOP录制软件，对测试版本软件中的模块A、模块B和模块C流量数据进行录制，获取线上版本软件发送到外部模块的第一测试请求数据和第二测试响应数据，以及外部模块发送到线上版本软件的第二测试请求数据和第一测试响应数据。测试环境中的外部模块可以为模拟服务器和模拟客户端。

测试服务器将第一测试请求数据、第二测试响应数据、第二测试请求数据和第一测试响应数据按照预设的数据结构进行整合处理，得到测试数据。测试服务器将目标运行数据和测试数据进行比对，得到初始差异数据。

测试服务器还可以在测试环境中对线上版本软件的流量数据进行录制，根据连续两次录制的结果间的差异数据，确定噪声差异数据。测试服务器从初始差异数据中排除噪声差异数据的影响，可以得到目标差异数据。测试服务器根据目标差异数据生成测试报告。

本申请实施例提供了一种自动化测试方法，该方法包括：从目标运行数据中获取目标待测数据，目标运行数据表征线上版本软件的运行过程中的请求数据和响应数据，为预录制的线上版本软件的流量数据。根据目标待测数据，对测试版本软件进行自动化测试，并对自动化测试过程中的请求数据和响应数据进行获取，得到测试数据。将目标运行数据和测试数据进行比对，得到初始差异数据。对初始差异数据去噪得到目标差异数据，并根据目标差异数据，得到测试结果。在自动化测试时，该方法利用录制的线上版本软件的流量数据进行测试，可以将测试范围扩展到测试版本软件中每个功能模块的数据操作场景上，提高了测试有效性和准确性。该方法还可以筛选得到目标待测数据，使得目标待测数据为能够覆盖测试版本软件中全部模块的最小数据集，可以提高测试的效率。

本申请实施例还提供了一种自动化测试装置，请参见图11，该装置包括：待测数据获取模块1110、自动化测试模块1120、测试过程录制模块1130、数据比对模块1140、目标差异数据获取模块1150和测试结果获取模块1160；

待测数据获取模块1110用于从目标运行数据中获取目标待测数据，目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

自动化测试模块1120用于根据目标待测数据，对测试版本软件进行自动化测试；

测试过程录制模块1130用于对自动化测试过程中测试版本软件的请求数据和响应数据进行获取，得到测试数据；

数据比对模块1140用于将测试数据和目标运行数据进行比对，得到初始差异数据；

目标差异数据获取模块1150用于对初始差异数据进行去噪处理，得到目标差异数据；

测试结果获取模块1160用于根据目标差异数据，得到测试版本软件的测试结果。

进一步地，该装置还包括：第一请求数据获取模块、第一响应数据获取模块、第二请求数据获取模块、第二响应数据获取模块和目标运行数据确定模块。

第一请求数据获取模块用于基于面向切面编程技术，对线上版本软件发送到外部模块的请求数据进行调用，得到第一请求数据；

第一响应数据获取模块用于基于面向切面编程技术，对外部模块发送到线上版本软件的响应数据进行调用，得到第一请求数据对应的第一响应数据；

第二请求数据获取模块用于基于面向切面编程技术，对外部模块发送到线上版本软件的请求数据进行调用，得到第二请求数据；

第二响应数据获取模块用于基于面向切面编程技术，对线上版本软件发送到外部模块的响应数据进行调用，得到第二请求数据对应的第二响应数据；

目标运行数据确定模块用于将第一请求数据、第一响应数据、第二请求数据和第二响应数据作为目标运行数据。

进一步地，第一响应数据有多个，第二请求数据有多个，待测数据获取模块1110包括：初始待测数据获取单元、第一重叠路径确定单元、第二重叠路径确定单元、冗余数据确定单元和目标待测数据确定单元；

初始待测数据获取单元用于获取目标运行数据中的第一响应数据和第二请求数据；

第一重叠路径确定单元用于将第一响应数据的执行路径信息进行两两对比，确定执行路径重叠的第一响应数据；

第二重叠路径确定单元用于将第二请求数据的执行路径信息进行两两对比，确定执行路径重叠的第二请求数据；

冗余数据确定单元用于根据执行路径重叠的第一响应数据和执行路径重叠的第二请求数据，确定冗余数据；

目标待测数据确定单元用于从第一响应数据和第二请求数据中将冗余数据删除，得到目标待测数据。

进一步地，自动化测试模块1120包括：模拟请求确定单元、模拟响应确定单元和自动化测试单元；

模拟请求确定单元用于将目标待测数据中的第二请求数据作为外部模块发送到测试版本软件的模拟请求数据；

模拟响应确定单元用于将目标待测数据中的第一响应数据作为外部模块发送到测试版本软件的模拟响应数据；

自动化测试单元用于根据模拟请求数据和模拟响应数据，对测试版本软件进行自动化测试。

进一步地，测试过程录制模块1130包括：第一测试请求数据获取单元、第一测试响应数据获取单元、第二测试请求数据获取单元、第二测试响应数据获取单元和测试数据确定单元；

第一测试请求数据获取单元用于基于面向切面编程技术，对测试版本软件发送到外部模块的测试请求数据进行调用，得到第一测试请求数据；

第一测试响应数据获取单元用于基于面向切面编程技术，对外部模块发送到测试版本软件的模拟响应数据进行调用，得到第一测试请求数据对应的第一测试响应数据；

第二测试请求数据获取单元用于基于面向切面编程技术，对外部模块发送到测试版本软件的模拟请求数据进行调用，得到第二测试请求数据；

第二测试响应数据获取单元用于基于面向切面编程技术，对测试版本软件发送到外部模块的测试响应数据进行调用，得到第二测试请求数据对应的第二测试响应数据；

测试数据确定单元用于将第一测试请求数据、第一测试响应数据、第二测试请求数据和第二测试响应数据作为测试数据。

进一步地，目标差异数据获取模块1150包括：对照数据获取模块、噪声数据获取模块和去噪处理模块；

对照数据获取模块用于获取第一运行数据和第二运行数据，第一运行数据表征线上版本软件在连续两次运行过程中任一次运行过程的请求数据和响应数据，第二运行数据表征线上版本软件在连续两次运行过程中除第一运行数据外的另一次运行过程的请求数据和响应数据；

噪声数据获取模块用于将第一运行数据和第二运行数据进行比对，得到噪声差异数据；

去噪处理模块用于根据噪声差异数据，对初始差异数据进行去噪处理，得到目标差异数据。

进一步地，目标运行数据确定模块包括：数据处理单元和数据存储单元；

数据处理单元用于根据预设的数据结构，对第一请求数据、第一响应数据、第二请求数据和第二响应数据进行整合处理，得到目标运行数据；

数据存储单元用于将目标运行数据存储到分布式存储系统上。

上述实施例中提供的装置可执行本申请任意实施例所提供方法，具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的一种自动化测试方法。

本实施例还提供了一种计算机可读存储介质，存储介质中存储有计算机可执行指令，计算机可执行指令由处理器加载并执行本实施例上述的一种自动化测试方法。

本实施例还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述自动化测试方面的各种可选实现方式中提供的方法。

本实施例还提供了一种电子设备，该电子设备包括处理器和存储器，其中，存储器存储有计算机程序，计算机程序适于由处理器加载并执行本实施例上述的一种自动化测试方法。

设备可以为计算机终端、移动终端或服务器，设备还可以参与构成本申请实施例所提供的装置或系统。如图12所示，服务器12可以包括一个或多个(图中采用1202a、1202b，……，1202n来示出)处理器1202(处理器1202可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器1204、以及用于通信功能的传输装置1206。除此以外，还可以包括：显示器、输入/输出接口(I/O接口)、网络接口、电源或相机。本领域普通技术人员可以理解，图12所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，服务器12还可包括比图12中所示更多或者更少的组件，或者具有与图12所示不同的配置。

应当注意到的是上述一个或多个处理器1202或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件或其他任意组合。此外，数据处理电路可为单个独立的处理模块，或全部或部分的结合到服务器12中的其他元件中的任意一个内。

存储器1204可用于存储应用软件的软件程序以及模块，如本申请实施例中的方法对应的程序指令/数据存储装置，处理器1202通过运行存储在存储器1204内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的一种基于自注意力网络的时序行为捕捉框生成方法。存储器1204可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器1204可进一步包括相对于处理器1202远程设置的存储器，这些远程存储器可以通过网络连接至服务器12。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

传输装置1206用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器12的通信供应商提供的无线网络。在一个实例中，传输装置1206包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置1206可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。

显示器可以例如触摸屏式的液晶显示器(LCD)，该液晶显示器可使得用户能够与服务器12的用户界面进行交互。

本说明书提供了如实施例或流程图的方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤和顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的系统或中断产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。

本实施例中所示出的结构，仅仅是与本申请方案相关的部分结构，并不构成对本申请方案所应用于其上的设备的限定，具体的设备可以包括比示出的更多或更少的部件，或者组合某些部件，或者具有不同的部件的布置。应当理解到，本实施例中所揭露的方法、装置等，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，模块的划分仅仅为一种逻辑功能的划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元模块的间接耦合或通信连接。

基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random AccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域技术人员还可以进一步意识到，结合本说明书所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但这种实现不应认为超出本申请的范围。

以上，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种自动化测试方法，其特征在于，所述方法包括：

从目标运行数据中获取目标待测数据，所述目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

根据所述目标待测数据，对测试版本软件进行自动化测试；

对自动化测试过程中所述测试版本软件的请求数据和响应数据进行获取，得到测试数据；

将所述测试数据和所述目标运行数据进行比对，得到初始差异数据；

对所述初始差异数据进行去噪处理，得到目标差异数据；

根据所述目标差异数据，得到所述测试版本软件的测试结果。

2.根据权利要求1所述的自动化测试方法，其特征在于，在从目标运行数据中获取目标待测数据之前，还包括：

基于面向切面编程技术，对所述线上版本软件发送到外部模块的请求数据进行调用，得到第一请求数据；

基于面向切面编程技术，对所述外部模块发送到所述线上版本软件的响应数据进行调用，得到所述第一请求数据对应的第一响应数据；

基于面向切面编程技术，对所述外部模块发送到所述线上版本软件的请求数据进行调用，得到第二请求数据；

基于面向切面编程技术，对所述线上版本软件发送到所述外部模块的响应数据进行调用，得到所述第二请求数据对应的第二响应数据；

将所述第一请求数据、所述第一响应数据、所述第二请求数据和所述第二响应数据作为所述目标运行数据。

3.根据权利要求2所述的自动化测试方法，其特征在于，所述第一响应数据有多个，所述第二请求数据有多个，所述从目标运行数据中获取目标待测数据包括：

获取所述目标运行数据中的第一响应数据和第二请求数据；

将所述第一响应数据的执行路径信息进行两两对比，确定执行路径重叠的第一响应数据；

将所述第二请求数据的执行路径信息进行两两对比，确定执行路径重叠的第二请求数据；

根据所述执行路径重叠的第一响应数据和所述执行路径重叠的第二请求数据，确定冗余数据；

从所述第一响应数据和所述第二请求数据中将所述冗余数据删除，得到所述目标待测数据。

4.根据权利要求3所述的自动化测试方法，其特征在于，所述根据所述目标待测数据，对测试版本软件进行自动化测试包括：

将所述目标待测数据中的第二请求数据作为所述外部模块发送到所述测试版本软件的模拟请求数据；

将所述目标待测数据中的第一响应数据作为所述外部模块发送到所述测试版本软件的模拟响应数据；

根据所述模拟请求数据和所述模拟响应数据，对所述测试版本软件进行自动化测试。

5.根据权利要求4所述的自动化测试方法，其特征在于，所述对自动化测试过程中所述测试版本软件的请求数据和响应数据进行获取，得到测试数据包括：

基于面向切面编程技术，对所述测试版本软件发送到外部模块的测试请求数据进行调用，得到第一测试请求数据；

基于面向切面编程技术，对所述外部模块发送到所述测试版本软件的模拟响应数据进行调用，得到所述第一测试请求数据对应的第一测试响应数据；

基于面向切面编程技术，对所述外部模块发送到所述测试版本软件的模拟请求数据进行调用，得到第二测试请求数据；

基于面向切面编程技术，对所述测试版本软件发送到所述外部模块的测试响应数据进行调用，得到所述第二测试请求数据对应的第二测试响应数据；

将所述第一测试请求数据、所述第一测试响应数据、所述第二测试请求数据和所述第二测试响应数据作为所述测试数据。

6.根据权利要求1所述的自动化测试方法，其特征在于，所述对所述初始差异数据进行去噪处理，得到目标差异数据包括：

获取第一运行数据和第二运行数据，所述第一运行数据表征所述线上版本软件在连续两次运行过程中任一次运行过程的请求数据和响应数据，所述第二运行数据表征所述线上版本软件在连续两次运行过程中除所述第一运行数据外的另一次运行过程的请求数据和响应数据；

将所述第一运行数据和所述第二运行数据进行比对，得到噪声差异数据；

根据所述噪声差异数据，对所述初始差异数据进行去噪处理，得到目标差异数据。

7.根据权利要求3所述的自动化测试方法，其特征在于，所述将所述第一请求数据、所述第一响应数据、所述第二请求数据和所述第二响应数据作为所述目标运行数据包括：

根据预设的数据结构，对所述第一请求数据、所述第一响应数据、所述第二请求数据和所述第二响应数据进行整合处理，得到所述目标运行数据；

将所述目标运行数据存储到分布式存储系统上。

8.一种自动化测试装置，其特征在于，所述装置包括：待测数据获取模块、自动化测试模块、测试过程录制模块、数据比对模块、目标差异数据获取模块和测试结果获取模块；

所述待测数据获取模块用于从目标运行数据中获取目标待测数据，所述目标运行数据表征线上版本软件在任意一次运行过程中的请求数据和响应数据；

所述自动化测试模块用于根据所述目标待测数据，对测试版本软件进行自动化测试；

所述测试过程录制模块用于对自动化测试过程中所述测试版本软件的请求数据和响应数据进行获取，得到测试数据；

所述数据比对模块用于将所述测试数据和所述目标运行数据进行比对，得到初始差异数据；

所述目标差异数据获取模块用于对所述初始差异数据进行去噪处理，得到目标差异数据；

所述测试结果获取模块用于根据所述目标差异数据，得到所述测试版本软件的测试结果。

9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如权利要求1-7任一项所述的一种自动化测试方法。

10.一种计算机可读存储介质，其特征在于，所述存储介质包括处理器和存储器，所述存储器中存储有至少一条指令或至少一段程序，所述至少一条指令或所述至少一段程序由所述处理器加载并执行以实现如权利要求1-7任一项所述的一种自动化测试方法。

Images