CN111522735B - 测试实验的分流方法及装置 - Google Patents

Abstract

本发明公开了一种测试实验的分流方法及装置，涉及一种通信技术领域，主要在于能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少了开发人员的工作量。其中方法包括：接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；根据所述身份标识信息，搜集所述用户对应的实验参与信息；将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。本发明适用于测试实验的分流处理。

Description

测试实验的分流方法及装置

技术领域

本发明涉及一种通信技术领域，特别是涉及一种测试实验的分流方法及装置。

背景技术

随着移动互联网流量红利的逐渐衰退，用户获取成本逐渐提高，越来越多的产品运营开始关注数据驱动的精细化运行方法，期望通过相对小的成本获得稳定的用户增长，A/B测试便是一种有效的精细化运行手段，成熟的公司每天需要进行大量测试实验，因此开发能够满足业务需求的A/B测试分流平台显得十分重要。

目前，在A/B测试实验分流过程中，需要开发人员在业务代码中手动上报用户标签进行实验分流。然而，这种方式会大大增加开发人员的工作量，测试实验成本较高，同时降低了测试实验的配置效率，且配置过程过于依赖开发人员，不够灵活智能。

发明内容

有鉴于此，本发明提供一种测试实验的分流方法及装置，主要目的在于能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少了开发人员的工作量，降低了测试实验的开发成本，能够实现实验分流过程的完全自动化。

依据本发明一个方面，提供了一种测试实验的分流方法，包括：

接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

根据所述身份标识信息，搜集所述用户对应的实验参与信息；

将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

可选地，所述匹配表达式由不同匹配维度下的匹配条件组成，所述将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配，包括：

分别判断所述实验参与信息是否符合目标版本测试实验对应的不同匹配维度下的匹配条件；

所述根据匹配结果确定所述用户能够参与的测试实验列表，包括：

若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表；

若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

可选地，在所述接收用户参与测试实验的参与请求之前，所述方法还包括：

接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息；

根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式；

根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验。

可选地，根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应匹配表达式，包括：

根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度；

根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件；

将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

可选地，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，所述根据所述身份标识信息，搜集所述用户对应的实验参与信息，包括：

根据所述身份标识信息，利用预设软件开发工具实时采集所述用户的非自身属性信息；

根据所述身份标识信息查询所述预设标签信息库，确定所述用户的自身属性信息，所述预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息。

可选地，在所述根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择之后，所述方法还包括：

每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常；

若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

可选地，所述根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常，包括：

获取所述不同版本测试实验对应的初始分流比例；

根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例；

根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。

可选地，所述根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常，包括：

根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间；

若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常；

若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

依据本发明第二个方面，提供了一种测试实验的分流装置，包括：

接收单元，用于接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

搜集单元，用于根据所述身份标识信息，搜集所述用户对应的实验参与信息；

匹配单元，用于将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

确定单元，用于根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

可选地，所述匹配表达式由不同匹配维度下的匹配条件组成，

所述匹配单元，具体用于分别判断所述实验参与信息是否符合目标版本测试实验对应的不同匹配维度下的匹配条件；

所述确定单元，具体用于若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表；

所述确定单元，还具体用于若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

可选地，所述装置还包括：配置单元，

所述接收单元，还用于接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息；

所述确定单元，还用于根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式；

所述配置单元，用于根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验。

可选地，所述确定单元，包括：确定模块、生成模块和组成模块，

所述确定模块，用于根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度；

所述生成模块，用于根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件；

所述组成模块，用于将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

可选地，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，所述搜集单元，包括：采集模块和确定模块。

可选地，所述装置还包括：判断单元和发送单元，

所述判断单元，用于每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常；

所述发送单元，用于若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

可选地，所述判断单元，包括：获取模块、计算模块和判断模块，

所述获取模块，用于获取所述不同版本测试实验对应的初始分流比例；

所述计算模块，用于根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例；

所述判断模块，用于根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。

可选地，所述判断模块，包括：计算子模块和确定子模块，

所述计算子模块，用于根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间；

所述确定子模块，用于若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常；

所述确定子模块，还用于若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

根据本发明的第三个方面，提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现以下步骤：

接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

根据所述身份标识信息，搜集所述用户对应的实验参与信息；

将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

根据本发明的第四个方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现以下步骤：

接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

根据所述身份标识信息，搜集所述用户对应的实验参与信息；

将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

本发明提供了一种测试实验的分流方法及装置，与目前需要开发人员在业务代码中手动上报用户标签进行实验分流的方式相比，本发明通过接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；并根据所述身份标识信息，搜集所述用户对应的实验参与信息；与此同时，将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；最终根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择，从而能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少开发人员的工作量，降低测试实验的开发成本，实现实验分流过程的完全自动化，对测试实验的分流处理更加智能灵活。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

构成说明书的一部分的附图描述了本发明的实施例，并且连同描述一起用于解释本发明的原理。

参照附图，根据下面的详细描述，可以更加清楚地理解本发明，其中：

图1示出了本发明实施例提供的一种测试实验的分流方法流程图；

图2示出了本发明实施例提供的另一种测试实验的分流方法流程图；

图3示出了本发明实施例提供的测试实验分流情况的示意图；

图4示出了本发明实施例提供的一种测试实验的分流装置的结构示意图；

图5示出了本发明实施例提供的另一种测试实验的分流装置的结构示意图；

图6示出了本发明实施例提供的一种计算机设备的实体结构示意图。

具体实施方式

现在将参照附图来详细描述本发明的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。

同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。

以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本发明及其应用或使用的任何限制。

对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。

本发明实施例可以应用于计算机系统/服务器，其可与众多其它通用或专用计算系统环境或配置一起操作。适于与计算机系统/服务器一起使用的众所周知的计算系统、环境和/或配置的例子包括但不限于：个人计算机系统、服务器计算机系统、瘦客户机、厚客户机、手持或膝上设备、基于微处理器的系统、机顶盒、可编程消费电子产品、网络个人电脑、小型计算机系统﹑大型计算机系统和包括上述任何系统的分布式云计算技术环境，等等。

计算机系统/服务器可以在由计算机系统执行的计算机系统可执行指令(诸如程序模块)的一般语境下描述。通常，程序模块可以包括例程、程序、目标程序、组件、逻辑、数据结构等等，它们执行特定的任务或者实现特定的抽象数据类型。计算机系统/服务器可以在分布式云计算环境中实施，分布式云计算环境中，任务是由通过通信网络链接的远程处理设备执行的。在分布式云计算环境中，程序模块可以位于包括存储设备的本地或远程计算系统存储介质上。

本发明实施例提供了一种活动信息的展示方法，如图1所示，该方法包括：

101、接收用户参与测试实验的参与请求。

其中，所述参与请求携带有所述用户的身份标识信息，所述用户为通过点击链接参与测试实验的用户，用户的身份标识信息具体为用户的登录账号或者身份ID，测试实验具体为网页优化的不同版本的测试实验或者为移动端的不同版本的测试实验，例如，移动端不同版本的测试实验为测试实验A，测试实验B，测试实验C，对于本发明实施例，当用户在客户端点击相应的测试实验链接时，客户端会向服务器发送用户参与测试实验的参与请求，该参与请求携带有用户的身份标识信息，服务器接收到测试实验的参与请求后，根据该参与请求携带的用户身份标识信息，获取用户的实验参与信息，以便根据用户的实验参与信息对该用户进行分流，即确定该用户能够参与的测试实验的版本，由此能够直接在服务器端对参与实验的用户进行分流处理，提高了测试实验的分流效率。

102、根据所述身份标识信息，搜集所述用户对应的实验参与信息。

其中，实验参与信息包括用户的自身属性信息和非自身属性信息，用户的自身属性信息包括用户的姓名、性别、年龄、家庭住址、所在城市，用户的非自身属性信息包括用户环境信息，例如，用户使用设备、IP地址、网络环境等。

对于本发明实施例，为了确定该用户能够参与的测试实验版本，搜集该用户的上述实验参与信息，具体地，在用户进入测试实验链接，客户端向服务器发送测试实验参与请求时，服务器会利用预设软件开发工具实时采集用户的非自身属性信息，同时根据测试实验参与请求携带的用户身份标识信息查询预设标签信息库，该预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息，由此服务器能够根据该用户的身份标识信息，搜集该用户的自身属性信息和非自身属性信息，进一步地，根据用户的自身属性信息和非自身属性信息，确定该用户的实验参与信息，以便根据该用户的实验参与信息，对该用户进行实验分流处理，即确定该用户能够参与的实验版本，由此能够直接在服务器端对用户进行实时分流处理，避免开发人员在业务代码中手动上报用户标签。

103、将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配。

其中，不同版本测试实验对应的匹配表达式由多个匹配条件串联组成，多个匹配条件具体为不同匹配维度下的匹配条件，不同版本的测试实验对应的匹配表达式不同，例如，测试实验A版本对应的匹配表达＝用户性别为女+城市包含北京+用户环境为安卓小屏手机；测试实验B版本对应的匹配表达式＝用户性别为男+城市包含上海+用户环境为安卓大屏手机，其中，用户的性别、所在城市和用户环境为不同匹配维度下的匹配条件。

对于本发明实施例，将采集的用户实验参与信息与待测试项目的不同版本测试实验的匹配表达式分别进行匹配，如果采集的用户实验参与信息符合目标版本测试实验的各个匹配条件，则确定该用户能够参与该目标版本测试实验；如果采集的用户实验参与信息不符合目标版本测试实验匹配表达式中的任一匹配条件，则确定该用户不能够参与目标版本测试实验，由此根据上述匹配结果确定用户能够参与的各个版本的测试实验，实现了对用户分流过程的完全自动化，提高了对测试实验的分流效率，更加智能灵活。

104、根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

其中，测试实验列表中记录了用户能够参与的各个版本测试实验，对于本发明实施例，根据用户的实验参与信息与待测试项目的不同版本测试实验的匹配结果，创建该用户的测试实验列表，该测试实验列表中记录了用户能够参与的各个版本的测试实验及其对应的链接。

例如，获取的用户的实验参与信息包括：性别男、所在城市为北京、用户环境为安卓小屏手机，测试实验A版本对应的匹配表达式为用户性别为男+城市包含上海+用户环境为安卓小屏手机，将该用户的参与实验信息与测试实验A版本对应的匹配表达式进行匹配，分别判断该用户的实验参与信息是否符合匹配表达中的各个匹配条件，具体地，用户性别符合匹配表达式中的性别条件，用户环境也符合匹配表达式中的环境条件安卓小屏手机，但是该用户所在城市为上海，而匹配表达是中的城市条件为用户所在城市为北京，因此该用户的实验参与信息中的所在城市不符合测试实验A版本匹配表达式中的城市条件，由此可知，该用户的实验参与信息不符合测试实验A版本对应的匹配表达式，即该用户不能参与测试实验A版本，进一步地，将用户能够参与的各个版本的测试实验进行汇总，分别添加至测试实验列表，并将其反馈给该用户，该用户根据接收的测试实验列表选择自己想要参与版本的测试实验，并根据测试实验对应的链接进入该版本测试实验进行测试。

本发明实施例提供的一种测试实验的分流方法，与目前需要开发人员在业务代码中手动上报用户标签进行实验分流的方式相比，本发明通过接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；并根据所述身份标识信息，搜集所述用户对应的实验参与信息；与此同时，将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；最终根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择，从而能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少开发人员的工作量，降低测试实验的开发成本，实现实验分流过程的完全自动化，对测试实验的分流处理更加智能灵活。

进一步地，为了更好的说明上述测试实验的分流过程，作为对上述实施例的细化和扩展，本发明实施例提供了另一种测试实验的分流方法，如图2所示，所述方法包括：

201、接收用户参与测试实验的参与请求。

其中，所述参与请求携带有所述用户的身份标识信息，用户的身份标识信息具体为用户的登录账号或者身份ID，当用户在客户端点击测试实验的参与链接，客户端会向服务器发送测试实验的参与请求，该测试请求携带有该用户的身份标识信息，以便服务器根据用户的身份标识信息搜集该用户的实验参与信息。

对于本发明实施例，在用户参与目标项目的测试实验之前，需要针对该项目配置不同版本的测试实验，在所述接收用户参与测试实验的参与请求之前，所述方法还包括：接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息；根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式；根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验。

具体地，当开发人员想要配置目标项目的不同版本的测试实验，会点击测试服务器界面的测试实验配置按钮，服务器界面会弹出项目列表，该列表中包括不同的待测试项目及其对应的测试实验版本，不同版本的测试实验对应的测试变量不同，测试变量具体可以为页面的字体大小、字体颜色、广告插入位置，导航按钮的位置等等，例如，测试实验A版本和测试实验B版本对应的测试变量为手机页面的广告插入位置，测试实验A版本对应的广告插入位置处于手机页面的上方，测试实验B版本对应的广告插入位置处于手机页面的下方，由此根据服务器界面弹出的项目列表，开发人员选择待测试的目标项目及其对应的测试实验版本，开发人员选择完毕后，服务器会接收到目标项目对应的不同版本测试实验的配置指令，该配置指令包括目标项目的标识信息和目标项目对应的不同版本测试实验的标识信息，服务器根据该目标项目的标识信息和不同版本测试实验的标识信息，确定目标项目对应的不同版本测试实验的测试变量，例如，目标项目对应的不同版本测试的测试变量为不同种类的卖点，测试实验A版本对应的测试变量为强调卖点A，测试实验B版本对应的测试变量为强调卖点B版本，由此能够确定目标项目对应的不同版本测试实验的实验变量。

进一步地，配置不同版本的测试实验，不仅需要确定其对应的测试变量，还需要确定测试指标，根据测试指标才能够筛选出符合需求的测试实验版本，测试指标具体可以指用户的购买率、订单转化率等，可以根据测试实验的测试变量确定不同版本测试实验的测试指标，例如，目标项目的测试实验A版本为页面中存在预订购广告，测试实验B版本为页面中不存在预订购广告，测试实验A版本相对于测试实验B版本页面更加清爽，结果数据显示，测试实验A版本的订单转化率为5.8％，测试实验B版本的订单转化率为10.2％，相对于测试实验A版本提高了43.4％。

进一步地，在确定不同版本测试实验的测试变量和测试指标之后，还需要确定不同版本测试实验对应的匹配表达式，以便该不同版本测试实验对应的匹配表达式对用户进行实时分流处理，根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应匹配表达式，包括：根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度；根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件；将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

具体地，测试实验的标识信息可以为测试实验的版本号，不同版本的测试实验对应的匹配表达式也不相同，首先根据开发人员选中的目标版本测试实验的标识信息，确定确定目标版本测试实验对应的匹配维度，例如，测试实验A版本和测试实验B版本对应的匹配维度为用户性别、用户所在城市和用户环境；测试实验C版本和测试实验D版本对应的匹配维度为用户年龄、用户学历、用户环境，由此能够根据目标版本测试实验的标识信息，确定目标版本测试实验的匹配表达式对应的匹配维度，进一步地，根据确定的各个匹配维度查询预设标签信息库，生成不同匹配维度下的匹配条件，其中，预设标签信息库中存储有不同匹配维度对应的标签信息，例如，根据确定的匹配维度为城市，将其连接到预设标签信息库，确定标签信息为“城市”，其对应的判断条件为“包含”，“北京”为开发人员对其所赋的值，最终生成的匹配条件为“城市包含北京”，由此能够根据确定的匹配维度，确定各个匹配条件，进一步地，将确定的各个匹配条件进行串联，组成目标版本测试实验对应的匹配表达式。由此能够自动生成不同版本测试实验的匹配表达式，实现对测试实验参与人员的自动分流处理，提高了测试实验的分流效率。

202、根据所述身份标识信息，搜集所述用户对应的实验参与信息。

其中，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，对于本发明实施例，为了搜集用户的实验参与信息，对用户进行实时分流，所述根据所述身份标识信息，搜集所述用户对应的实验参与信息，包括：根据所述身份标识信息，利用预设软件开发工具实时采集所述用户的非自身属性信息；根据所述身份标识信息查询所述预设标签信息库，确定所述用户的自身属性信息，所述预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息。

具体地，利用预设软件开发工具SDK(Software Development Kit)实时采用该用户的非自身属性信息，非自身属性信息具体可以为用户环境，包括：用户设备、IP地址、浏览器标识、网络环境等，例如，采集到的用户环境为安卓小屏手机，进一步地，根据该用户的身份标识信息查询预设标签信息库，确定用户的自身属性信息，用户的自身属性信息包括：用户的姓名、性别、年龄、所在城市、学历信息、职业信息等，在用户之前浏览该网站或者网页时，用户会注册相关的自身属性信息，并将该用户的身份标识信息及其对应的自身属性信息存储至预设标签信息库，当用户再次访问时，可以该用户的身份标识信息从预设标签信息库中调取该用户的自身属性信息，最终将确定的用户自身属性信息和非自身属性信息作为用户的实验参与信息。

203、将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配。

其中，所述匹配表达式由不同匹配维度下的匹配条件组成，为了判断用户的实验参与信息是否与不同版本测试实验的匹配表达式相匹配，步骤203具体包括：分别判断所述实验参与信息是否符合目标版本测试实验对应的不同匹配维度下的匹配条件。

例如，待测试项目的不同版本测试实验，包括测试实验A版本、测试实验B版本和测试实验C版本，测试实验A版本对应的匹配表达式＝用户性别为男+城市包含上海+用户环境为安卓大屏手机；测试实验B版本对应的匹配表达式＝用户性别为女+城市包含上海+用户环境为安卓大屏手机；测试实验C版本对应的匹配表达式＝用户年龄25-35岁+学历为本科以上+用户环境为安卓大屏手机。若服务器搜集的用户的参与实验信息为性别男、所在城市为上海、年龄30岁、学历本科、用户环境为安卓大屏手机，将该用户的实验参与信息与上述的测试实验A版本、B版本、C版本对应的匹配表达式分别进行匹配，最终确定该用户能够参与测试实验A版本和测试实验C版本，而不能参与测试实验B版本。通过将该用户的实验参与信息与不同版本测试实验的对应的匹配表达式进行匹配，能够确定该用户可以参与的实验版本。

204、根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。

其中，测试实验列表中记录有该用户能够参与的测试实验版本，用户可以从测试实验列表中选择自己想要参与的测试实验进行测试，对于本发明实施例，为了输出该用户的测试实验列表，所述根据匹配结果确定所述用户能够参与的测试实验列表，包括：若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表；若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

例如，服务器搜集的用户的参与实验信息为性别女、所在城市为上海、年龄30岁、学历本科、用户环境为安卓大屏手机，目标版本测试实验对应的匹配表达式＝性别为女+城市包含北京+用户环境为安卓小屏手机，通过匹配可知，用户不符合匹配表达式中的城市条件和用户环境条件，因此该用户不能够参与该目标版本测试实验，由此能够对参与测试实验的用户进行实时分流处理，同时对分流过程的配置更加灵活智能。

205、每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常。

其中，分流人数为不同版本测试实验的实验参与人数，对于本发明实施例，为了判断不同版本测试实验的当前分流情况是否异常，所述根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常，包括：获取所述不同版本测试实验对应的初始分流比例；根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例；根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。进一步地，所述根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常，包括：根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间；若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常；若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

具体地，不同版本测试实验完成配置之后，会有其初始分流比例，即预期的的不同版本测试实验之间的分流比例，例如，测试实验A版本的初始分流比例为40％，测试实验B版本的初始分流比列为60％，进一步地，根据不同版本测试实验的初始分流比例，计算不同版本测试实验的置信区间，该置信区间的计算公式，如下：

其中，P为不同版本测试实验的初始分流比例，n为不同版本测试实验的分流人数，由此能够确定不同版本测试实验对应的置信区间，以便根据该置信区间判断不同版本测试实验的当前分流比例是否异常，进一步地，每隔预设时间间隔统计参加不同版本测试实验的分流人数，并根据该分流人数计算不同版本测试实验的当前的分流比例，如图3所示，最上方的曲线为版本三的访问量，依次往下的曲线分别是版本一的访问量、原始版本的访问量、版本三的独立访客、原始版本的独立访客和版本一的独立访客，根据不同版本测试实验的访问量和独立访客，确定不同版本测试实验的分流人数以及当前的分流比例，例如，在不同版本测试实验发布后每隔3小时，统计不同版本测试实验的当前分流比例，并判断不同版本测试实验的当前分流比例是否在其对应的置信区间内，如果目标版本测试实验的当前分流比例不在其对应的置信区间内，则确定该目标版本测试实验的当前分流情况异常；如果目标版本测试实验的当前分流比例在其对应的置信区间内，则确定该目标版本测试实验的当前分流情况正常，由此能够对上线后的不同版本测试实验的分流比例进行有效监控，及时发现分流异常的测试实验版本，并针对异常情况进行及时处理，以确定测试实验结果的准确性。

206、若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

例如，根据目标版本测试实验的初始分流比例和置信区间计算公式，计算得到的目标版本测试实验的置信区间为[29.12％,30.88％]，根据当前的目标版本测试实验的分流人数，计算得到的目标版本测试实验的当前分流比例为29.42％，则确定目标版本测试实验的当前分流情况正常；如果计算得到的目标版本测试实验的当前分流比例为30.91％，则确定目标版本测试实验的当前分流比例异常，并发出当前分流情况异常的报警信息，该报警信息具体可以通过文字或者图片显示，或者还可以通过语音提示，该报警信息中包括当前分流情况异常的测试实验的版本信息，以及当前的分流比例，由此当监控人员接收到报警信息后，能够对该异常情况进行分析，并作出及时处理，以确保上线后的测试实验分流情况正常。

本发明实施例提供的另一种测试实验的分流方法，与目前需要开发人员在业务代码中手动上报用户标签进行实验分流的方式相比，本发明通过接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；并根据所述身份标识信息，搜集所述用户对应的实验参与信息；与此同时，将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；最终根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择，从而能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少开发人员的工作量，降低测试实验的开发成本，实现实验分流过程的完全自动化，对测试实验的分流处理更加智能灵活，此外，还能够对上线后的测试实验的分流情况进行监测，以便及时对异常情况进行处理，保证了测试实验结果的准确性。

进一步的，作为对上述图1所示方法的实现，本发明实施例提供了一种测试实验的分流装置，如图4所示，该装置包括：接收单元31、搜集单元32、匹配单元33和确定单元34。

所述接收单元31，可以用于接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息。所述接收单元31是本装置中接收用户参与测试实验的参与请求的主要功能模块。

所述搜集单元32，可以用于根据所述身份标识信息，搜集所述用户对应的实验参与信息。所述搜集单元32是本装置中根据所述身份标识信息，搜集所述用户对应的实验参与信息的主要功能模块，也是核心模块。

所述匹配单元33，可以用于将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配。所述匹配单元33是本装置中将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配的主要功能模块，也是核心模块。

所述确定单元34，可以用于根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择。所述确定单元34是本装置中根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择的主要功能模块。

对于本发明实施例，所述匹配表达式由不同匹配维度下的匹配条件组成，所述匹配单元33，具体用于分别判断所述实验参与信息是否符合所述目标版本测试实验对应的不同匹配维度下的匹配条件。

所述确定单元34，具体用于若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表。

所述确定单元34，还具体用于若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

进一步地，如图5所示，为了配置目标项目的不同版本的测试实验，所述装置还包括：配置单元35。

所述接收单元31，还可以用于接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息。

所述确定单元34，还可以用于根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式。

所述配置单元35，可以用于根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验，并向所述用户终端发送测试实验参与请求。

进一步地，为了生成不同版本测试实验的匹配表达式，所述确定单元34，包括：确定模块341、生成模块342和组成模块343。

所述确定模块341，可以用于根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度。

所述生成模块342，可以用于根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件。

所述组成模块343，可以用于将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

进一步地，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，所述搜集单元32，包括：采集模块321和确定模块322。

所述采集模块321，可以用于根据所述身份标识信息，利用预设软件开发工具实时采集所述用户的非自身属性信息。

所述确定模块322，可以用于根据所述身份标识信息查询所述预设标签信息库，确定所述用户的自身属性信息，所述预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息。

在具体应用场景中，所述装置还包括：判断单元36和发送单元37。

所述判断单元36，可以用于每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常。

所述发送单元37，可以用于若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

进一步地，所述判断单元36，包括：获取模块361、计算模块362和判断模块363。

所述获取模块361，可以用于获取所述不同版本测试实验对应的初始分流比例。

所述计算模块362，可以用于根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例。

所述判断模块363，可以用于根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。

进一步地，所述判断模块363，包括：计算子模块和确定子模块。

所述计算子模块，可以用于根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间。

所述确定子模块，可以用于若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常。

所述确定子模块，还可以用于若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

基于上述如图1和图2所示方法，相应的，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如图1至图2所示的方法。

基于上述如图1所示方法和如图4所示装置的实施例，本发明实施例还提供了一种计算机设备的实体结构图，如图6所示，该计算机设备包括：处理器41、存储器42、及存储在存储器42上并可在处理器上运行的计算机程序，其中存储器42和处理器41均设置在总线43上所述处理器41执行所述程序时实现如图1至图2所示的方法。

通过本发明的技术方案，本发明能够接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；并根据所述身份标识信息，搜集所述用户对应的实验参与信息；与此同时，将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；最终根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择，从而能够实时对参与测试实验的用户进行分流处理，提高测试实验的配置效率，减少开发人员的工作量，降低测试实验的开发成本，实现实验分流过程的完全自动化，对测试实验的分流处理更加智能灵活。

本说明书中各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言，由于其与方法实施例基本对应，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

可能以许多方式来实现本发明的方法和系统。例如，可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本发明的方法和系统。用于所述方法的步骤的上述顺序仅是为了进行说明，本发明的方法的步骤不限于以上具体描述的顺序，除非以其它方式特别说明。此外，在一些实施例中，还可将本发明实施为记录在记录介质中的程序，这些程序包括用于实现根据本发明的方法的机器可读指令。因而，本发明还覆盖存储用于执行根据本发明的方法的程序的记录介质。

本发明的描述是为了示例和描述起见而给出的，而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用，并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。

Claims (16)

1.一种测试实验的分流方法，其特征在于，包括：

接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

根据所述身份标识信息，搜集所述用户对应的实验参与信息；

将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择；

在所述接收用户参与测试实验的参与请求之前，所述方法还包括：

接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息；

根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式；

根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验。

2.根据权利要求1所述的方法，其特征在于，所述匹配表达式由不同匹配维度下的匹配条件组成，所述将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配，包括：

分别判断所述实验参与信息是否符合目标版本测试实验对应的不同匹配维度下的匹配条件；

所述根据匹配结果确定所述用户能够参与的测试实验列表，包括：

若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表；

若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

3.根据权利要求1所述的方法，其特征在于，根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应匹配表达式，包括：

根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度；

根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件；

将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

4.根据权利要求1所述的方法，其特征在于，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，所述根据所述身份标识信息，搜集所述用户对应的实验参与信息，包括：

根据所述身份标识信息，利用预设软件开发工具实时采集所述用户的非自身属性信息；

根据所述身份标识信息查询所述预设标签信息库，确定所述用户的自身属性信息，所述预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息。

5.根据权利要求1-4任一项所述的方法，其特征在于，在所述根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择之后，所述方法还包括：

每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常；

若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

6.根据权利要求5所述的方法，其特征在于，所述根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常，包括：

获取所述不同版本测试实验对应的初始分流比例；

根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例；

根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。

7.根据权利要求6所述的方法，其特征在于，所述根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常，包括：

根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间；

若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常；

若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

8.一种测试实验的分流装置，其特征在于，包括：

接收单元，用于接收用户参与测试实验的参与请求，所述参与请求携带有所述用户的身份标识信息；

搜集单元，用于根据所述身份标识信息，搜集所述用户对应的实验参与信息；

匹配单元，用于将所述实验参与信息分别与不同版本测试实验对应的匹配表达式进行匹配；

确定单元，用于根据匹配结果确定所述用户能够参与的测试实验列表，并将所述测试实验列表发送至用户终端供所述用户选择；

所述装置还包括：配置单元，

所述接收单元，还用于接收目标项目对应的不同版本测试实验的配置指令，所述配置指令携带有所述不同版本测试实验的标识信息；

所述确定单元，还用于根据所述不同版本测试实验的标识信息，确定所述不同版本测试实验对应的测试变量、测试指标和匹配表达式；

所述配置单元，用于根据所述测试变量、所述测试指标和所述匹配表达式，配置所述不同版本测试实验。

9.根据权利要求8所述的装置，其特征在于，所述匹配表达式由不同匹配维度下的匹配条件组成，

所述匹配单元，具体用于分别判断所述实验参与信息是否符合目标版本测试实验对应的不同匹配维度下的匹配条件；

所述确定单元，具体用于若符合所述不同匹配维度下的匹配条件，则确定所述用户能够参与所述目标版本测试实验，并将所述目标版本测试实验添加至所述测试实验列表；

所述确定单元，还具体用于若不符合所述不同匹配维度下的匹配条件中的任一匹配条件，则确定所述用户不能参与所述目标版本测试实验。

10.根据权利要求8所述的装置，其特征在于，所述确定单元，包括：确定模块、生成模块和组成模块，

所述确定模块，用于根据所述目标版本测试实验的标识信息，确定所述目标版本测试实验对应的各个匹配维度；

所述生成模块，用于根据确定的各个匹配维度查询预设标签信息库，生成所述目标版本测试实验对应的不同匹配维度下的匹配条件；

所述组成模块，用于将所述不同匹配维度下的匹配条件，组成所述目标版本测试实验对应的匹配表达式。

11.根据权利要求8所述的装置，其特征在于，所述实验参与信息包括所述用户的自身属性信息和非自身属性信息，所述搜集单元，包括：采集模块和确定模块，

所述采集模块，用于根据所述身份标识信息，利用预设软件开发工具实时采集所述用户的非自身属性信息；

所述确定模块，用于根据所述身份标识信息查询所述预设标签信息库，确定所述用户的自身属性信息，所述预设标签信息库中存储有不同用户的身份标识信息及其对应的自身属性信息。

12.根据权利要求8-11任一项所述的装置，其特征在于，所述装置还包括：判断单元和发送单元，

所述判断单元，用于每隔预设时间间隔统计不同版本测试实验的分流人数，并根据所述分流人数分别判断所述不同版本测试实验的当前分流情况是否异常；

所述发送单元，用于若所述当前分流情况异常，则发送所述当前分流情况异常的报警信息，所述报警信息中包括当前分流情况异常的测试实验对应的版本信息。

13.根据权利要求12所述的装置，其特征在于，所述判断单元，包括：获取模块、计算模块和判断模块，

所述获取模块，用于获取所述不同版本测试实验对应的初始分流比例；

所述计算模块，用于根据所述分流人数计算，计算所述不同版本测试实验的当前分流比例；

所述判断模块，用于根据所述初始分流比例和所述当前分流比例，分别判断所述不同版本测试实验的当前分流情况是否异常。

14.根据权利要求13所述的装置，其特征在于，所述判断模块，包括：计算子模块和确定子模块，

所述计算子模块，用于根据所述初始分流比例，计算所述不同版本测试实验对应的置信区间；

所述确定子模块，用于若所述当前分流比例在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况正常；

所述确定子模块，还用于若所述当前分流比例不在其对应的置信区间内，则确定所述当前分流比例对应版本的测试实验分流情况异常。

15.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。

16.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。