CN110413512A - Ab测试方法、装置、计算机设备和存储介质 - Google Patents
Ab测试方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN110413512A CN110413512A CN201910588953.7A CN201910588953A CN110413512A CN 110413512 A CN110413512 A CN 110413512A CN 201910588953 A CN201910588953 A CN 201910588953A CN 110413512 A CN110413512 A CN 110413512A
- Authority
- CN
- China
- Prior art keywords
- test
- testing scheme
- address
- terminal
- testing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3664—Environments for testing or debugging software
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
- Computer And Data Communications (AREA)
Abstract
本申请涉及一种AB测试方法、系统、计算机设备和存储介质。方法包括:获取预先配置的测试计划;根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;获取终端触发所述测试网址发送的网络请求;根据所述网络请求获取所述测试网址中包含的渠道号;获取与所述渠道号对应测试计划;根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。通过可视化的配置方式,可以对测试计划进行便捷的配置,同时还可以根据需求对每个测试方案的测试配比进行分配,确保在对测试方案进行测试时,能实现精准的分流,提高了测试的准确率。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种AB测试方法、装置、计算机设备和存储介质。
背景技术
AB测试是为Web或App界面或流程制作两个(A/B)或多个(A/B/n)版本,在同一时间维度,分别让组成成分相同(相似)的访客群组(目标人群)随机的访问这些版本,收集各群组的用户体验数据和业务数据,最后分析、评估出最好版本,正式采用。
在AB测试中,需要考虑到AB两个方案的分流问题,若是分流出现问题,将会导致测试准确率较低的问题。传统技术中的AB测试管理系统的分流实现,一般是传统的开发人员网页开发,前端负责通过访问的链接,进行随机数分流的业务逻辑处理,每次的测试上线流程长,以及后期维护的成本比较高,均需要手动去管理测试计划的上线以及下线。然而这种AB测试的实现方式周期较长,而且复杂的分流逻辑在前端控制,会存在分流不精确的问题,导致统计到的测试数据准确性较低,存在很大的随机误差。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高分流准确性的AB测试方法、装置、计算机设备和存储介质。
一种AB测试方法,所述方法包括:
获取预先配置的测试计划;
根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
获取终端触发所述测试网址发送的网络请求;
根据所述网络请求获取所述测试网址中包含的渠道号;
获取与所述渠道号对应测试计划;
根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
一种AB测试装置,所述装置包括:
测试网址生成模块,用于获取预先配置的测试计划;根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
测试计划确定模块,用于获取终端触发所述测试网址发送的网络请求;根据所述网络请求获取所述测试网址中包含的渠道号;获取与所述渠道号对应测试计划;
测试方案确定模块,用于根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
一种计算机设备,包括存储器、处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取预先配置的测试计划;
根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
获取终端触发所述测试网址发送的网络请求;
根据所述网络请求获取所述测试网址中包含的渠道号;
获取与所述渠道号对应测试计划;
根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取预先配置的测试计划;
根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
获取终端触发所述测试网址发送的网络请求;
根据所述网络请求获取所述测试网址中包含的渠道号;
获取与所述渠道号对应测试计划;
根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
上述AB测试方法、装置、计算机设备和存储介质,通过预先对测试计划进行配置,根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址,获取到用户通过终端触发对测试网址的网络请求,根据网络请求可以获取到测试网络中包含的渠道号,从而可以获取到渠道号对应的测试计划,可以根据终端的触发顺序从测试方案中确定一个测试方案,并将确定的测试方案对应的内容在测试网址上进行展示,从而可以对测试方案的用户行为进行有效的测试,通过可视化的配置方式,可以对测试计划进行便捷的配置,同时还可以根据需求对每个测试方案的测试配比进行分配,确保在对测试方案进行测试时,能实现精准的分流,提高了测试的准确率。
附图说明
图1为一个实施例中AB测试方法的应用环境图;
图2为一个实施例中AB测试方法的流程示意图;
图3为一个实施例中测试计划配置页面的示意图;
图4为一个实施例中AB测试装置的结构框图;
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的AB测试方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104通过网络进行通信。用户可使用终端102访问测试网址,服务器104可通过网络获取到终端102触发测试网址发送的网络请求,并获取到测试网址中携带的渠道号,从而获取到对应的测试计划,并根据测试计划中的配置信息返回对应的测试方案,使得终端102上打开的测试网址中展示的测试方案是由服务器104返回控制的。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种AB测试方法,以该方法应用于图1中的服务器为例进行说明,包括以下步骤:
步骤201,获取预先配置的测试计划。
测试计划是指本次测试的整体方案,是技术人员预先根据测试需求配置好的。在测试计划中包含有测试计划的名称、渠道号、多个测试方案,以及每个测试方案对应的测试配比和资源网址。测试计划的名称用于区分测试计划,渠道号是用于标识测试网页中曝光测试方案的位置,进一步的,还可以增加子渠道号,以更精确的标识测试方案在测试网页中的展示位置。测试网页可以是百度网站,头条APP中的网页等。比如,当测试方案在测试网页A的第2个位置展示时,可用渠道号1表示测试网页为A,用子渠道号2表示在测试网页A中的位置。
在一个实施例中,在获取预先配置的测试计划之前,还包括测试计划的配置步骤,包括:通过配置页面创建测试计划;通过配置页面对测试计划的渠道号、多个测试方案以及每个测试方案对应的测试配比和资源网址;将配置好的测试计划上传至数据库进行存储。
测试计划是预先配置好的,技术人员可以通过配置页面对测试计划进行可视化配置,比如,技术人员可通过配置页面对测试计划的渠道号、多个测试方案以及与每个测试方案对应的测试配比和资源网址进行配置。具体的,技术人员可以通过配置页面对测试计划进行创建、编辑、启动、暂停、恢复、停止等管理。进行AB测试时,可以先新建测试计划,输入计划名称,便于标识和识别计划,输入该计划使用的渠道和子渠道号(渠道和子渠道号,是该计划使用的位置编号),可以选择填写业务、平台页面等业务信息,再配置任意多个需要进行对比测试的测试方案,以及每个测试方案的占比和测试方案对应的具体要展示的页面内容对应的资源网址,资源网址可以是任意可以访问的页面网址,资源网址对应的内容可以是链接、网页或是图片。
如图3所示的测试计划配置页面,配置页面中包含有多个可配置的选项,包括测试计划的名称,渠道号的ID、子渠道号的ID、业务类型、业务平台、页面类型、方案数量、页面操作以及多个测试方案、测试方案对应的测试配比和资源网址等。通过配置页面,可以对任意的测试计划或测试方案进行配置,也可以随时对各个测试方案的配置和资源网址进行配置。
步骤202,根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址。
测试服务地址是指将对测试方案的用户行为数据进行测试的网页地址。比如,将测试广告方案1在网页Awww.xxx.com上的投放效果,那么网页A即为测试服务地址。在对测试计划配置完毕后,即可启动测试计划,可以根据测试计划中包含的渠道号和测试服务地址自动生成对应的测试网址。比如,生成的测试网址为https://abt.xx.com/?channelId=1&subChannelId=1&pageKey=register。其中channelId和subChannelId为渠道ID和子渠道号ID,pageKey为页面类型标识,上述测试网址的页面类型是指注册页面。由于在创建测试计划时,已经将渠道号、子渠道号、测试计划及测试方案进行了关联存储,因此后续可以通过测试网址中包含的渠道号和子渠道号即可以查询配置数据,即可以获取到对应的测试计划和方案信息。同时,配置完毕的测试计划对应的配置数据会存储到服务器中的数据库,后续技术人员仍可以通过配置页面对测试计划进行编辑,及改变测试计划的状态,比如将测试计划的状态改为暂停或启动等等。
步骤203,获取终端触发测试网址发送的网络请求。
步骤204,根据网络请求获取测试网址中包含的渠道号。
步骤205,获取与渠道号对应测试计划。
步骤206,根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
生成了测试网址后,可将测试网址进行投放以对进行测试。用户可通过终端触发对测试网址的网络请求,服务器在获取到终端触发的网络请求后,服务器可获取到网络请求中携带的测试网址,并获取到测试网址中包含的渠道号,从而可以根据渠道号查找到与该渠道号对应的测试计划,并获取到测试计划中配置的每个测试方案对应的测试配比,因此服务器可以根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试。用户行为数据是指用户对测试网址上展示的测试方案对应的页面内容进行的操作行为,比如曝光呀、浏览、点击,甚至更为具体的业务操作行为,均可以认为是用户行为数据。AB测试的目的即为了对各个测试方案的用户行为数据进行分析。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试,包括:获取与渠道号对应测试计划包含的测试方案、每个测试方案的测试配比及资源网址;根据终端的触发顺序和测试配比从测试方案中确定一个测试方案在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
服务器在根据网络请求获取到测试网址中包含的渠道号后,可以获取到与该渠道号对应测试计划,并获取到测试计划中包含的多个测试方案和每个测试方案的测试配比、资源网址。每个测试方案的测试配比确定了该测试方案在测试网址中的展示次数,因此服务器可以根据终端触发测试网址的顺序和测试方案的配比,从多个测试方案中选择确定一个测试方案在测试网址上进行展示,从而可以实现对各个测试方案的用户行为数据进行测试。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示,包括:每当获取到一次网络请求时,计数器增一;根据计数器的值与测试配比从测试方案中确定一个测试方案在测试网址上进行展示。
在用户通过终端访问测试网址时,服务器会根据该测试网址对应的测试计划中包含的各个测试方案的测试配比进行分流。每当服务器获取到一次网络请求时,计数器会增一,服务器会根据计数器的值与测试配比从测试方案中确定一个测试方案在测试网址上进行展示。
假设测试网址对应的测试计划中一共包含有4个测试方案,分别是P1、P2、P3、P4,且P1、P2、P3、P4对应的测试配比分别为P1(10%)、P2(20%)、P3(30%)、P4(40%)。此测试配比代表的是对应测试方案出现次数的占比,比如P1的测试配比为10%,代表测试网址每被访问100次,测试方案P1的出现次数为10次。因此,当服务器获取到终端触发的网络请求后,会依次按照以下顺序返回方案对应的内容:P=[P1、P2、P2、P3、P3、P3、P4、P4、P4、P4]。也就是说,计数器i从零开始,每当测试网址被访问一次,计数器i的数值会增一,按照这种分流算法,可以使得各个测试方案可以按照配置的比例出现相应的次数,以实现精准的分流。
具体的,假设在测试计划中共配置了N个测试方案,分别用P0,P1,P2,…,P(N-1)表示,每个测试方案对应的测试配比分别用R0,R1,R2,...,R(N-1)表示,R0,R1,...,R(N-1)的最大公倍数用C表示。则可以获得数组A=[R0/C,R1/C,...,R(N-1)/C],该数组下标用n表示,初始值为0,该数组长度用L表示,该数组所有项之和用Sum表示,数组累计值用S表示,初始值为S=A[0],客户端访问次数计数器用i表示,初始值为0,每次访问输出方案用P表示。那么对于一次访问执行的步骤如下:
1、i=i%Sum;
2、如果i>=S,则n=n+1;
3、如果n<L,则S=S+A[n],否则数组A遍历完则从头重新开始,故n=0,S=A[0];
4、输出方案为P=P[n];
5、i=i+1。
假设,N=4,测试方案分别为P0,P1,P2,P3,每个测试方案在访问次数为100时的占比分别为R0=10,R1=20,R2=30,R1=40,其最大公约数C=10。
则A=[1,2,3,4],则Sum=10,L=4,初始值S=1,对于多次访问结果如下:
i=0时,i<S,则n=0,P=P0;
i=1时,i>=S,则n=n+1=1,S=S+A[n]=3,则P=P[n]=P1;
i=2时,i<S,则n=0,P=P1;
i=3时,i>=S,则n=n+1=2,S=S+A[n]=6,则P=P[n]=P3;
i=4时,i>=S,则n=n+1=1,则P=P[n]=P1;
…
以此类推,最终输出的一个完整顺序周期为:P0,P1,P1,P2,P2,P2,P3,P3,P3,P3,然后继续从头开始循环。也就是说,按照用户通过终端访问测试网址的顺序来说,测试方案的展示顺序为P0,P1,P1,P2,P2,P2,P3,P3,P3,P3,再按照此顺序周期轮流按照终端的访问顺序在测试网址上展示各个测试方案,通过这种方式,可以通过服务器的控制来实现对测试方案的精确分流。若是需要改变各个测试方案的占比,则通过配置页面对各个测试方案的测试配比进行修改更新即可,服务器即可根据更新后的测试计划确定终端每一次访问测试网址时,在测试网址上要显示的测试方案。
在一个实施例中,在根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示之后,还包括:获取在测试网址上展示的测试方案对应的页面内容;将页面内容进行缓存存储。
在一个实施例中,在将页面内容进行缓存存储之后,还包括:当根据终端的触发顺序从测试方案中确定的测试方案有进行缓存存储时,从缓存中获取确定的测试方案在测试网址上进行展示。
在服务器根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示之后,服务器可以访问到测试网址上展示的测试方案,并获取到该测试方案对应的页面内容,并将页面内容进行缓存存储至终端。也就是说,当终端第一次访问过测试方案对应的页面内容后,会将页面内容存储到Redis高速缓存中,当终端再次访问到该网址时,则可以直接从缓存中获取,而无需每一次的访问都需要从服务器中获取,从而可以提升访问的效率。因此,当检测到根据终端的触发顺序从测试方案中确定的测试方案有进行缓存存储时,终端可以从缓存中获取确定的测试方案在测试网址上进行展示。
在一个实施例中,上述AB测试方法还包括:当获取到终端触发测试网址上展示的测试方案对应的页面内容的页面网络请求时,获取测试方案的测试标识;将测试标识以cookie的方式返回至终端;当终端继续访问与页面内容属于同一域名的页面时,通过cookie的传递,对终端的访问链路进行记录与存储;获取终端上传的访问链路数据,对访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。
当服务器获取到终端触发了对测试网址上展示的测试方案所对应的页面内容的页面网络请求时,即服务器检测到终端对测试方案的页面内容进行了点击或其他操作时,服务器可以获取到测试方案的测试标识,测试标识是该当测试方案唯一的标识符,服务器可以将测试标识以cookie的方式返回至终端,当终端继续访问与测试方案的页面内容属于同一域名的页面时,通过cookie的传递,可以对终端的访问链路进行记录与存储,终端的访问链路等数据将上传至服务器进行存储,服务器即可获取到终端上传的访问链路数据,并对访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。服务器上配置的统计服务可以根据测试计划的ID和测试方案的ID统计每一个测试方案对应的用户行为数据,从而可以确定出每一个测试方案的效果,比如哪一个测试方案的曝光率更好,用户的点击率更高等等。
上述AB测试方法,通过预先对测试计划进行配置,根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址,获取到用户通过终端触发对测试网址的网络请求,根据网络请求可以获取到测试网络中包含的渠道号,从而可以获取到渠道号对应的测试计划,可以根据终端的触发顺序从测试方案中确定一个测试方案,并将确定的测试方案对应的内容在测试网址上进行展示,从而可以对测试方案的用户行为进行有效的测试,通过可视化的配置方式,可以对测试计划进行便捷的配置,同时还可以根据需求对每个测试方案的测试配比进行分配,确保在对测试方案进行测试时,能实现精准的分流,提高了测试的准确率。
应该理解的是,虽然图2的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图4所示,提供了一种AB测试装置,包括:测试网址生成模块、测试计划确定模块和测试方案确定模块,其中:
测试网址生成模块401,用于获取预先配置的测试计划;根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址。
测试计划确定模块402,用于获取终端触发测试网址发送的网络请求;根据网络请求获取测试网址中包含的渠道号;获取与渠道号对应测试计划。
测试方案确定模块403,用于根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
在一个实施例中,测试方案确定模块403还用于获取与渠道号对应测试计划包含的测试方案、每个测试方案的测试配比及资源网址;根据终端的触发顺序和测试配比从测试方案中确定一个测试方案在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
在一个实施例中,测试方案确定模块403还用于每当获取到一次网络请求时,计数器增一;根据计数器的值与测试配比从测试方案中确定一个测试方案在测试网址上进行展示。
在一个实施例中,上述AB测试装置还包括缓存模块(图中未示出),用于获取在测试网址上展示的测试方案对应的页面内容;将页面内容进行缓存存储。
在一个实施例中,上述缓存模块还用于当根据终端的触发顺序从测试方案中确定的测试方案有进行缓存存储时,从缓存中获取确定的测试方案在测试网址上进行展示。
在一个实施例中,上述AB测试装置还包括用户行为记录模块(图中未示出),用于当获取到终端触发测试网址上展示的测试方案对应的页面内容的页面网络请求时,获取测试方案的测试标识;将测试标识以cookie的方式返回至终端;当终端继续访问与页面内容属于同一域名的页面时,通过cookie的传递,对终端的访问链路进行记录与存储;获取终端上传的访问链路数据,对访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。
在一个实施例中,上述AB测试装置还包括测试计划配置模块(图中未示出),用于通过配置页面创建测试计划;通过配置页面对测试计划的渠道号、多个测试方案以及每个测试方案对应的测试配比和资源网址;将配置好的测试计划上传至数据库进行存储。
关于AB测试装置的具体限定可以参见上文中对于AB测试方法的限定,在此不再赘述。上述AB测试装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储测试计划等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种AB测试方法。
本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:获取预先配置的测试计划;根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址;获取终端触发测试网址发送的网络请求;根据网络请求获取测试网址中包含的渠道号;获取与渠道号对应测试计划;根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展,以对测试方案的用户行为数据进行测试。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试,包括:获取与渠道号对应测试计划包含的测试方案、每个测试方案的测试配比及资源网址;根据终端的触发顺序和测试配比从测试方案中确定一个测试方案在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示,包括:每当获取到一次网络请求时,计数器增一;根据计数器的值与测试配比从测试方案中确定一个测试方案在测试网址上进行展示。
在一个实施例中,在根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示之后,处理器执行计算机程序时还实现以下步骤:获取在测试网址上展示的测试方案对应的页面内容;将页面内容进行缓存存储。
在一个实施例中,在将页面内容进行缓存存储之后,处理器执行计算机程序时还实现以下步骤:当根据终端的触发顺序从测试方案中确定的测试方案有进行缓存存储时,从缓存中获取确定的测试方案在测试网址上进行展示。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当获取到终端触发测试网址上展示的测试方案对应的页面内容的页面网络请求时,获取测试方案的测试标识;将测试标识以cookie的方式返回至终端;当终端继续访问与页面内容属于同一域名的页面时,通过cookie的传递,对终端的访问链路进行记录与存储;获取终端上传的访问链路数据,对访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:通过配置页面创建测试计划;通过配置页面对测试计划的渠道号、多个测试方案以及每个测试方案对应的测试配比和资源网址;将配置好的测试计划上传至数据库进行存储。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:获取预先配置的测试计划;根据测试计划中包含的渠道号及测试服务地址生成对应的测试网址;获取终端触发测试网址发送的网络请求;根据网络请求获取测试网址中包含的渠道号;获取与渠道号对应测试计划;根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案对应的内容在测试网址上进行展示,以对测试方案的用户行为数据进行测试,包括:获取与渠道号对应测试计划包含的测试方案、每个测试方案的测试配比及资源网址;根据终端的触发顺序和测试配比从测试方案中确定一个测试方案在测试网址上进行展示,以对测试方案的用户行为数据进行测试。
在一个实施例中,根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示,包括:每当获取到一次网络请求时,计数器增一;根据计数器的值与测试配比从测试方案中确定一个测试方案在测试网址上进行展示。
在一个实施例中,在根据终端的触发顺序从测试方案中确定一个测试方案在测试网址上进行展示之后,计算机程序被处理器执行时还实现以下步骤:获取在测试网址上展示的测试方案对应的页面内容;将页面内容进行缓存存储。
在一个实施例中,在将页面内容进行缓存存储之后,计算机程序被处理器执行时还实现以下步骤:当根据终端的触发顺序从测试方案中确定的测试方案有进行缓存存储时,从缓存中获取确定的测试方案在测试网址上进行展示。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当获取到终端触发测试网址上展示的测试方案对应的页面内容的页面网络请求时,获取测试方案的测试标识;将测试标识以cookie的方式返回至终端;当终端继续访问与页面内容属于同一域名的页面时,通过cookie的传递,对终端的访问链路进行记录与存储;获取终端上传的访问链路数据,对访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:通过配置页面创建测试计划;通过配置页面对测试计划的渠道号、多个测试方案以及每个测试方案对应的测试配比和资源网址;将配置好的测试计划上传至数据库进行存储。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种AB测试方法,所述方法包括:
获取预先配置的测试计划;
根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
获取终端触发所述测试网址发送的网络请求;
根据所述网络请求获取所述测试网址中包含的渠道号;
获取与所述渠道号对应测试计划;
根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
2.根据权利要求1所述的方法,其特征在于,所述根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试,包括:
获取与所述渠道号对应测试计划包含的测试方案、每个测试方案的测试配比及资源网址;
根据所述终端的触发顺序和所述测试配比从所述测试方案中确定一个测试方案在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
3.根据权利要求2所述的方法,其特征在于,所述根据所述终端的触发顺序从所述测试方案中确定一个测试方案在所述测试网址上进行展示,包括:
每当获取到一次所述网络请求时,计数器增一;
根据所述计数器的值与所述测试配比从所述测试方案中确定一个测试方案在所述测试网址上进行展示。
4.根据权利要求1所述的方法,其特征在于,在所述根据所述终端的触发顺序从所述测试方案中确定一个测试方案在所述测试网址上进行展示之后,还包括:
获取在所述测试网址上展示的测试方案对应的页面内容;
将所述页面内容进行缓存存储。
5.根据权利要求4所述的方法,其特征在于,在所述将所述页面内容进行缓存存储之后,还包括:
当根据所述终端的触发顺序从所述测试方案中确定的测试方案有进行缓存存储时,从缓存中获取所述确定的测试方案在所述测试网址上进行展示。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当获取到所述终端触发所述测试网址上展示的测试方案对应的页面内容的页面网络请求时,获取所述测试方案的测试标识;
将所述测试标识以cookie的方式返回至所述终端;
当所述终端继续访问与所述页面内容属于同一域名的页面时,通过cookie的传递,对所述终端的访问链路进行记录与存储;
获取所述终端上传的访问链路数据,对所述访问链路的用户行为进行分析以确定每个测试方案的用户行为数据。
7.根据权利要求1所述的方法,其特征在于,在所述获取预先配置的测试计划之前,还包括测试计划的配置步骤,包括:
通过配置页面创建测试计划;
通过所述配置页面对所述测试计划的渠道号、多个测试方案以及每个测试方案对应的测试配比和资源网址;
将配置好的测试计划上传至数据库进行存储。
8.一种AB测试装置,其特征在于,所述装置包括:
测试网址生成模块,用于获取预先配置的测试计划;根据所述测试计划中包含的渠道号及测试服务地址生成对应的测试网址;
测试计划确定模块,用于获取终端触发所述测试网址发送的网络请求;根据所述网络请求获取所述测试网址中包含的渠道号;获取与所述渠道号对应测试计划;
测试方案确定模块,用于根据所述终端的触发顺序从所述测试方案中确定一个测试方案对应的内容在所述测试网址上进行展示,以对所述测试方案的用户行为数据进行测试。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910588953.7A CN110413512B (zh) | 2019-07-03 | 2019-07-03 | Ab测试方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910588953.7A CN110413512B (zh) | 2019-07-03 | 2019-07-03 | Ab测试方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110413512A true CN110413512A (zh) | 2019-11-05 |
CN110413512B CN110413512B (zh) | 2023-05-12 |
Family
ID=68358658
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910588953.7A Active CN110413512B (zh) | 2019-07-03 | 2019-07-03 | Ab测试方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110413512B (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110798385A (zh) * | 2019-11-07 | 2020-02-14 | 中天宽带技术有限公司 | 广域网访问设置功能的测试方法、装置、设备及介质 |
CN111737143A (zh) * | 2020-07-17 | 2020-10-02 | 北京热云科技有限公司 | 一种网页ab测试故障排查方法及系统 |
CN111782542A (zh) * | 2020-07-13 | 2020-10-16 | 豆盟(北京)科技股份有限公司 | 测试方法、装置、设备、系统和计算机存储介质 |
CN113055248A (zh) * | 2021-03-12 | 2021-06-29 | 土巴兔集团股份有限公司 | 流量分配方法、装置、计算机设备及存储介质 |
CN113204477A (zh) * | 2021-03-31 | 2021-08-03 | 北京达佳互联信息技术有限公司 | 应用测试方法、装置、电子设备及存储介质 |
CN114257529A (zh) * | 2021-12-24 | 2022-03-29 | 深圳市欣博跃电子有限公司 | 网络设备稳定性测试方法、装置、设备、系统及介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2648106A1 (en) * | 2012-04-05 | 2013-10-09 | CoreMedia AG | Method and web content management system for A/B testing or multivariate testing of websites on computers being connected to a web content management system |
CN103577321A (zh) * | 2012-08-07 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种网站页面的多版本并行测试方法和服务器 |
US20150026522A1 (en) * | 2013-07-19 | 2015-01-22 | Dawnray Young | Systems and methods for mobile application a/b testing |
CN107957938A (zh) * | 2016-10-14 | 2018-04-24 | 北京酷我科技有限公司 | 一种获取网站测试数据的方法及系统 |
CN108664397A (zh) * | 2018-05-03 | 2018-10-16 | 北京奇虎科技有限公司 | 一种用于应用测试的用户分流方法和装置 |
CN108874660A (zh) * | 2018-05-03 | 2018-11-23 | 北京奇虎科技有限公司 | 一种应用测试方法和装置 |
CN109308255A (zh) * | 2017-07-28 | 2019-02-05 | 北京京东尚科信息技术有限公司 | 一种用于a/b测试实验的方法和装置 |
CN109815119A (zh) * | 2018-12-14 | 2019-05-28 | 平安科技(深圳)有限公司 | 一种app链接渠道的测试方法及装置 |
-
2019
- 2019-07-03 CN CN201910588953.7A patent/CN110413512B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2648106A1 (en) * | 2012-04-05 | 2013-10-09 | CoreMedia AG | Method and web content management system for A/B testing or multivariate testing of websites on computers being connected to a web content management system |
CN103577321A (zh) * | 2012-08-07 | 2014-02-12 | 阿里巴巴集团控股有限公司 | 一种网站页面的多版本并行测试方法和服务器 |
US20150026522A1 (en) * | 2013-07-19 | 2015-01-22 | Dawnray Young | Systems and methods for mobile application a/b testing |
CN107957938A (zh) * | 2016-10-14 | 2018-04-24 | 北京酷我科技有限公司 | 一种获取网站测试数据的方法及系统 |
CN109308255A (zh) * | 2017-07-28 | 2019-02-05 | 北京京东尚科信息技术有限公司 | 一种用于a/b测试实验的方法和装置 |
CN108664397A (zh) * | 2018-05-03 | 2018-10-16 | 北京奇虎科技有限公司 | 一种用于应用测试的用户分流方法和装置 |
CN108874660A (zh) * | 2018-05-03 | 2018-11-23 | 北京奇虎科技有限公司 | 一种应用测试方法和装置 |
CN109815119A (zh) * | 2018-12-14 | 2019-05-28 | 平安科技(深圳)有限公司 | 一种app链接渠道的测试方法及装置 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110798385A (zh) * | 2019-11-07 | 2020-02-14 | 中天宽带技术有限公司 | 广域网访问设置功能的测试方法、装置、设备及介质 |
CN111782542A (zh) * | 2020-07-13 | 2020-10-16 | 豆盟(北京)科技股份有限公司 | 测试方法、装置、设备、系统和计算机存储介质 |
CN111737143A (zh) * | 2020-07-17 | 2020-10-02 | 北京热云科技有限公司 | 一种网页ab测试故障排查方法及系统 |
CN111737143B (zh) * | 2020-07-17 | 2020-12-22 | 北京热云科技有限公司 | 一种网页ab测试故障排查方法及系统 |
CN113055248A (zh) * | 2021-03-12 | 2021-06-29 | 土巴兔集团股份有限公司 | 流量分配方法、装置、计算机设备及存储介质 |
CN113204477A (zh) * | 2021-03-31 | 2021-08-03 | 北京达佳互联信息技术有限公司 | 应用测试方法、装置、电子设备及存储介质 |
CN113204477B (zh) * | 2021-03-31 | 2024-01-12 | 北京达佳互联信息技术有限公司 | 应用测试方法、装置、电子设备及存储介质 |
CN114257529A (zh) * | 2021-12-24 | 2022-03-29 | 深圳市欣博跃电子有限公司 | 网络设备稳定性测试方法、装置、设备、系统及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110413512B (zh) | 2023-05-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110413512A (zh) | Ab测试方法、装置、计算机设备和存储介质 | |
CN108959059B (zh) | 一种测试方法以及测试平台 | |
CN108377240A (zh) | 异常接口检测方法、装置、计算机设备和存储介质 | |
CN108874926A (zh) | 海量数据查询方法、装置、计算机设备和存储介质 | |
CN109039800A (zh) | 在流量实验中进行流量分配的方法、装置和计算机设备 | |
CN109302522A (zh) | 测试方法、装置以及计算机系统和介质 | |
CN107133174A (zh) | 测试用例代码自动生成装置与方法 | |
CN108804548B (zh) | 测试数据查询方法、装置、计算机设备和存储介质 | |
CN111563368A (zh) | 报表生成方法、装置、计算机设备和存储介质 | |
CN109471795A (zh) | 分组测试方法、装置、计算机设备及存储介质 | |
CN111522728A (zh) | 自动化测试用例的生成方法、电子设备及可读存储介质 | |
CN108388515A (zh) | 测试数据生成方法、装置、设备以及计算机可读存储介质 | |
CN110119336A (zh) | 数据处理方法、装置、计算机可读存储介质和计算机设备 | |
CN110442752A (zh) | 组织架构图生成方法、装置、计算机设备和存储介质 | |
CN107562637A (zh) | 一种用于软件测试的方法、设备、系统及存储介质 | |
CN109144487A (zh) | 进件业务开发方法、装置、计算机设备和存储介质 | |
CN110471585A (zh) | 应用程序功能图标展示方法、装置和计算机设备 | |
CN109543073A (zh) | 企业供销关系图谱生成方法、装置和计算机设备 | |
CN107239403A (zh) | 一种问题定位方法和设备 | |
CN113742338A (zh) | 工程验收表单结构化存储系统 | |
CN109491885A (zh) | 测试问题定位方法、装置、计算机设备和存储介质 | |
CN108984241A (zh) | 看板卡片的处理方法、装置、计算机设备及存储介质 | |
CN110232018A (zh) | 接口测试方法、装置、计算机设备 | |
CN110399309A (zh) | 一种测试数据生成方法及装置 | |
CN112346962A (zh) | 一种应用于对照测试系统中的对照数据测试方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |