CN108829602A - 一种测试方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明的实施例公开一种测试方法、装置、电子设备及存储介质。该方法包括：接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息；根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件；将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件；接收所述用户设备发送的所述第二插件的用户使用信息。通过利用该方法可以简化A/B测试的流程，并且提高测试结果的准确性。

Description

一种测试方法、装置、电子设备及存储介质

技术领域

本发明涉及通信技术领域，尤其涉及一种测试方法、装置、电子设备及存储介质。

背景技术

A/B测试通常应用于应用程序测试，大致的测试流程为：应用程序的所有者提供应用程序的多个测试版本，将多个测试版本分别提供给不同的用户设备，用户设备运行分配给其的测试版本，并将该测试版本的使用情况作为测试结果反馈给所有者，所有者根据这些测试结果对多个测试版本进行分析，从而进行进一步修改或者选择最优版本。

目前，如果仅是要对应用程序的某个模块进行A/B测试，需要整个应用程序的代码，以得到多个测试版本对应的应用程序，然后，应用程序的所有者通过服务器将多个测试版本分别进行发布，由用户利用用户设备下载测试版本对应的应用程序安装包，更新用户设备本地的应用程序，再向服务器反馈用户使用信息。也就是说，对应用程序的某个功能或者界面进行A/B测试的过程也需要经过修改应用程序代码、发布测试版本对应的应用程序、用户下载更新测试版本对应的应用程序等过程，耗时长，且不能保证在同一时间段内多个测试版本对应的应用程序均有用户利用用户设备进行下载并进行测试，这样会造成测试结果不准确。

发明内容

有鉴于此，本发明实施例提供一种测试方法、装置、电子设备及存储介质，可以简化A/B测试的流程，并且提高测试结果的准确性。

在第一方面，本发明实施例提供一种测试方法，该方法应用于服务器，该方法包括：

接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息；

根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件；

将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件；

接收所述用户设备发送的所述第二插件的用户使用信息。

优选的，所述多个待测试插件的版本信息相同；所述根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件，包括：若所述第一插件的版本信息与所述多个待测试插件的版本信息不同，则根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

优选的，所述多个待测试插件属于多个测试分组；所述根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件，包括：根据所述属性信息和预设算法，计算所述用户设备对应的测试分组，从所述用户设备对应的测试分组中选择第二插件。

优选的，属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同；所述方法还包括：接收所述用户设备在运行所述第二插件后发送的所述第二插件的标识号。

优选的，所述方法还包括：根据各个用户设备发送的第二插件的用户使用信息，确定多个待测试插件的测试结果。

在第二方面，本发明实施例提供一种测试装置，该装置应用于服务器，该装置包括：

接收单元，用于接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息；

选择单元，用于根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件；

发送单元，用于将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件；

所述接收单元，还用于接收所述用户设备发送的所述第二插件的用户使用信息。

优选的，所述多个待测试插件的版本信息相同；所述选择单元，具体用于：若所述第一插件的版本信息与所述多个待测试插件的版本信息不同，则根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

优选的，所述多个待测试插件属于多个测试分组；所述选择单元，具体用于：根据所述属性信息和预设算法，计算所述用户设备对应的测试分组，从所述用户设备对应的测试分组中选择第二插件。

优选的，属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同；所述接收单元，还用于：接收所述用户设备在运行所述第二插件后发送的所述第二插件的标识号。

优选的，所述装置还包括：确定单元，用于根据各个用户设备发送的第二插件的用户使用信息，确定所述多个待测试插件的测试结果。

在第三方面，本发明实施例提供一种电子设备，包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述第一方面中所述的任一测试方法。

在第四方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现前述任一测试方法。

通过利用本发明实施例提供的一种测试方法、装置、电子设备及存储介质，在应用程序的某一插件需要进行测试时，仅需要针对该插件进行修改，不需要对整个应用程序进行修改。并且不需要服务器发布待测试插件，而是服务器根据用户通过用户设备发送的查询消息来获知想要参与测试的用户及用户设备，并根据插件的属性信息及预设算法为用户设备分配待测插件，省去了发布待测试插件的过程。除此之外，由服务器主动确定发送给用户设备的待测试插件，可以确保将多个测试待测试插件均发送给用户设备来进行测试。基于此，本发明实施例提供的一种测试方法、装置及电子设备针对A/B测试，可以简化A/B测试的流程，并且提高测试结果的准确性。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本发明的实施例提供的一种测试方法的流程示意图；

图2为本发明的实施例提供的一种测试装置的结构示意图；

图3为本发明的实施例提供的另一种测试装置的结构示意图；

图4为本发明电子设备一个实施例的结构示意图。

具体实施方式

下面结合附图对本发明实施例进行详细描述。

应当明确，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

图1为本发明的实施例提供的一种测试方法的流程示意图。该测试方法可以应用于服务器。

如图1所示，本实施例的测试方法可以包括：

步骤101，接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息。

该查询消息携带该插件的属性信息。

在一个例子中，该属性信息可以包括但不限于：用户设备获取该应用程序的统一资源定位符(Uniform Resource Loca tor，URL)，用户设备的型号，用户设备所在位置，应用程序的版本信息及第一插件的版本信息。

需要说明的是，应用程序的模块以插件的形式在用户设备上运行，这样，在应用程序的模块需要更新时，只需要编译、发布、更新该模块对应的插件即可，不需要编译、发布、更新整个应用程序，可有效简化测试流程。

步骤102，根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件。

在一个例子中，服务器可以先确定属性信息是否符合测试条件，当确定属性信息符合测试条件之后，再按照预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。这里的测试条件为预先设置在服务器中，该测试条件与属性信息相对应，即当属性信息与预设的测试条件相同时，则确定属性信息符合测试条件。

在一个例子中，多个待测试插件的版本信息相同。根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件可以包括：

若第一插件的版本信息与多个待测试插件的版本信息不同，则根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件。

服务器可以根据属性信息包括的第一插件的版本信息判断第一插件与待测试插件的版本是否相同，如果不同，则再根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件。如果相同，则可确定该用户设备已运行待测试插件，无需执行根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件，向用户设备反馈无更新的信息即可。

在一个例子中，待测试插件中包括测试时间段，同一插件对应的不同待测试插件，测试时间段相同，以保证同一插件对应的不同待测试插件在同一时间段内进行测试，减少不同的客观测试条件，以提高测试结果的可用性及准确性。

在一个例子中，多个待测试插件属于多个测试分组，其中，每个待测试插件有一标识号，且属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同。根据第一插件的属性信息和预设算法从与第一插件对应的多个待测试插件中选择第二插件，可以包括：

根据属性信息和预设算法，计算用户设备对应的测试分组，从用户设备对应的测试分组中选择第二插件。

在计算用户设备对应的测试分组时，根据预设的算法来确定测试分组，包括利用随机数计算每个测试分组的概率，确定概率最大的测试分组为用户设备对应的测试分组；或者根据本地的安卓AID确定测试分组。

这里，当涉及两个及以上的分组时，可以利用随机数计算每个测试分组的概率。当分组较少时，可以根据安卓AID确定测试分组时，即根据AID的尾数的奇偶来确定测试分组。例如为奇数时，则为A组，为偶数时，则为B组。这里，仅给出了两种实现的测试分组计算方法，当然还可以采用其他的测试分组计算方法，在本发明中对于测试分组计算方法不做特定的限定。

步骤103，将第二插件发送至用户设备，以使用户设备运行第二插件。

用户设备在接收到第二插件后，运行第二插件，进行测试，并将向服务器反馈用户使用第二插件的用户使用信息。

其中，用户使用信息可以包括：用户使用插件的行为数据，如使用该插件的频率，使用该插件的时间，用户针对该插件中功能按钮的点击率等。

步骤104，接收用户设备发送的第二插件的用户使用信息。

在一个例子中，基于每个待测试插件有一标识号，且属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同，服务器还可以接收用户设备发送的第二插件的标识号。这样，服务器在接收到各个用户设备发送的第二插件的标识和用户使用信息之后，可以将各个第二插件的标识和用户使用信息进行汇总分析，从而确定多个待测试插件的测试结果。

通过利用本发明实施例提供的一种测试方法，应用程序的某一插件需要进行测试时，仅需要针对该插件进行修改，不需要对整个应用程序进行修改。并且不需要服务器发布待测试插件，而是服务器根据用户通过用户设备发送的查询消息来获知想要参与测试的用户及用户设备，并根据插件的属性信息及预设算法为用户设备分配待测插件，省去了发布待测试插件的过程。除此之外，由服务器主动确定发送给用户设备的待测试插件，可以确保将多个测试待测试插件均发送给用户设备来进行测试。基于此，本发明实施例提供的一种测试方法，针对A/B测试，可以简化A/B测试的流程，并且提高测试结果的准确性。

图2为本发明实施例提供的一种测试装置的结构示意图。该装置可以应用于服务器。

如图2所示，本实施例的装置可以包括：

接收单元210，用于接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息。

选择单元220，用于根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

发送单元230，用于将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件。

接收单元210，还用于接收所述用户设备发送的所述第二插件的用户使用信息。

优选的，所述多个待测试插件的版本信息相同；所述选择单元220，具体用于：

若所述第一插件的版本信息与所述多个待测试插件的版本信息不同，则根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

优选的，所述多个待测试插件属于多个测试分组；所述选择单元220，具体用于：

根据所述属性信息和预设算法，计算所述用户设备对应的测试分组，从所述用户设备对应的测试分组中选择第二插件。

优选的，属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同；所述接收单元210，还用于：

接收所述用户设备在运行所述第二插件后发送的所述第二插件的标识号。

优选的，如图3所示，所述装置还包括：

确定单元240，用于根据各个用户设备发送的第二插件的用户使用信息，确定所述多个待测试插件的测试结果。

通过利用本发明实施例提供的测试装置，应用程序的某一插件需要进行测试时，仅需要针对该插件进行修改，不需要对整个应用程序进行修改。并且不需要服务器发布待测试插件，而是服务器根据用户通过用户设备发送的查询消息来获知想要参与测试的用户及用户设备，并根据插件的属性信息及预设算法为用户设备分配待测插件，省去了发布待测试插件的过程。除此之外，由服务器主动确定发送给用户设备的待测试插件，可以确保将多个测试待测试插件均发送给用户设备来进行测试。基于此，本发明实施例提供的一种测试装置，针对A/B测试，可以简化A/B测试的流程，并且提高测试结果的准确性。

本发明实施例还提供一种电子设备。图4为本发明电子设备一个实施例的结构示意图，可以实现本发明图1所示实施例的流程，如图4所示，上述电子设备可以包括：壳体41、处理器42、存储器43、电路板44和电源电路45，其中，电路板44安置在壳体41围成的空间内部，处理器42和存储器43设置在电路板44上；电源电路45，用于为上述电子设备的各个电路或器件供电；存储器43用于存储可执行程序代码；处理器42通过读取存储器43中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述任一实施例所述的测试方法。

该电子设备以多种形式存在，包括但不限于：

(1)移动通信设备：这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括：智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。

(2)超移动个人计算机设备：这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括：PDA、MID和UMPC设备等，例如iPad。

(3)便携式娱乐设备：这类设备可以显示和播放多媒体内容。该类设备包括：音频、视频播放模块(例如iPod)，掌上游戏机，电子书，以及智能玩具和便携式车载导航设备。

(4)服务器：提供计算服务的设备，服务器的构成包括处理器、硬盘、内存、系统总线等，服务器和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。

(5)其他具有数据交互功能的电子设备。

本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现前述任一测试方法，因此也能实现相应的技术效果，前文已经进行了详细说明，此处不再赘述。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

为了描述的方便，描述以上装置是以功能分为各种单元/模块分别描述。当然，在实施本发明时可以把各单元/模块的功能在同一个或多个软件和/或硬件中实现。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种测试方法，其特征在于，所述方法应用于服务器，所述方法包括：

接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息；

根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件；

将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件；

接收所述用户设备发送的所述第二插件的用户使用信息。

2.根据权利要求1所述的方法，其特征在于，所述多个待测试插件的版本信息相同；

所述根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件，包括：

若所述第一插件的版本信息与所述多个待测试插件的版本信息不同，则根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

3.根据权利要求1或2所述的方法，其特征在于，所述多个待测试插件属于多个测试分组；

所述根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件，包括：

根据所述属性信息和预设算法，计算所述用户设备对应的测试分组，从所述用户设备对应的测试分组中选择第二插件。

4.根据权利要求3所述的方法，其特征在于，属于同一测试分组的待测试插件的标识号相同，属于不同测试分组的待测试插件的标识号不同；

所述方法还包括：

接收所述用户设备在运行所述第二插件后发送的所述第二插件的标识号。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：根据各个用户设备发送的第二插件的用户使用信息，确定多个待测试插件的测试结果。

6.一种测试装置，其特征在于，所述装置应用于服务器，所述装置包括：

接收单元，用于接收用户设备发送的用于查询应用程序的第一插件更新情况的查询消息，所述查询消息携带所述第一插件的属性信息；

选择单元，用于根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件；

发送单元，用于将所述第二插件发送至所述用户设备，以使所述用户设备运行所述第二插件；

所述接收单元，还用于接收所述用户设备发送的所述第二插件的用户使用信息。

7.根据权利要求6所述的装置，其特征在于，所述多个待测试插件的版本信息相同；

所述选择单元，具体用于：

若所述第一插件的版本信息与所述多个待测试插件的版本信息不同，则根据所述属性信息和预设算法从与所述第一插件对应的多个待测试插件中选择第二插件。

8.根据权利要求6或7所述的装置，其特征在于，所述多个待测试插件属于多个测试分组；

所述选择单元，具体用于：

根据所述属性信息和预设算法，计算所述用户设备对应的测试分组，从所述用户设备对应的测试分组中选择第二插件。

9.一种电子设备，其特征在于，所述电子设备包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述任一权利要求1-5所述的测试方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现前述任一权利要求1-5所述的测试方法。