CN115794649A - 一种h5网页ab测试方法、系统及可读存储介质 - Google Patents
一种h5网页ab测试方法、系统及可读存储介质 Download PDFInfo
- Publication number
- CN115794649A CN115794649A CN202211631381.4A CN202211631381A CN115794649A CN 115794649 A CN115794649 A CN 115794649A CN 202211631381 A CN202211631381 A CN 202211631381A CN 115794649 A CN115794649 A CN 115794649A
- Authority
- CN
- China
- Prior art keywords
- user
- grouping
- test
- webpage
- strategy information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
Abstract
本发明提供一种H5网页AB测试方法，配置分组策略信息并发送给广告平台；服务器收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，所述用户由所述广告平台根据广告投放人设置的定向参数圈定；位于用户浏览器端的AB测试模块解析浏览器地址栏中的URL，所述URL由所述广告平台生成，获取分组策略信息，根据分组策略信息对当前用户进行随机分组，根据分组结果加载相应的测试网页。本发明避免对用户信息的抓取，提高用户隐私的安全性，降低前后端交互的频次以及对后端的依赖程度，缩短页面渲染完成时间并提升用户体验。
Description
技术领域
本发明涉及一种H5网页AB测试方法、系统及可读存储介质。
背景技术
产品在推广和使用过程中，通常会存在UI优化、布局调整、推荐算法优化等实际应用场景；针对这些可能对用户体验以及产品推广有影响的迭代，通常需要开展相应的AB实验；一方面可以确保迭代和优化的方向是否正确，另一方面可以精确地量化策略结果从而真正地实现数据驱动；除此以外，还可以降低错误决策对线上所有用户带来的负面影响。
目前存在一些通用的技术方案，在这些通用方案中通常会依赖用户身份或者Cookie对流量进行划分，具体技术方案及其架构如下：
1.通过SDK的方式进行处理
如图1所示，本方案主要是基于统一的SDK对接AB测试服务，由AB测试服务下发具体的分组策略，前端业务代码结合AB测试SDK的用户分组情况调用后端业务接口，获取业务数据并进行展示，之后将不同分组的用户行为打点上报并进行数据分析。
该方案存在以下缺点：(1)用户分组信息的获取依赖用户身份或者Cookie。(2)需要基于用户标签对用户分桶，并结合随机算法确保流量分配合理性与随机性。(3)不同端的业务需要研发多套SDK，维护成本相应增加。
2.通过后端业务层增加Router模块进行处理
如图2所示，本方案由于AB实验两组业务部署在不同的服务器，需要在后端业务层增加Router模块对AB实验的相关请求进行统一处理，Router模块对接AB测试服务后获取用户分组情况，然后根据用户分组策略调用后端业务接口，获取业务数据并进行展示，之后将不同分组的用户行为打点上报并进行数据分析。
该方案存在以下缺点：(1)用户分组信息的获取依赖用户身份或者Cookie。(2)需要基于用户标签对用户分桶，并结合随机算法确保流量分配合理性与随机性。(3)后端业务层的Router模块作为整个AB实验的核心，需要支持高并发以及高可用。
3.通过在业务端增加AB lib模块进行处理。
如图3所示，本方案主要在后端业务接口服务中整合AB lib模块，前端业务代码调用系统统一的接口，后端业务接口通过AB lib模块与AB测试服务进行交互，并请求对应的分组，之后结合分组情况获取对应的业务数据并返回至前端进行展示，对不同分组的用户行为打点上报并进行数据分析。
该方案存在以下缺点：(1)用户分组信息的获取依赖用户身份或者Cookie。(2)需要基于用户标签对用户分桶，并结合随机算法确保流量分配合理性与随机性。(3)后端业务接口整合AB lib之后会增加接口服务的复杂度；AB实验逻辑调整时需要对线上所有接口进行升级，增加逻辑调整对线上功能稳定性带来的风险。
总之，现有存在以下缺点：(1)在用户分组信息的生成过程中，需要获取用户信息对用户打标签，无法保证用户隐私的安全性；(2)为了确保流量合理划分，尽可能将实验对象之间的差异性降至最小，实验对象需要具备完全随机化和同质的特点，整个过程对实验对象分桶的随机性以及实验算法的精准性有较高要求；(3)H5网页在获取用户分组策略并进行展示时，前后端请求和响应的过程会增加页面首次渲染完成的时间，影响用户体验；此外，对后端业务层的高并发及高可用能力也具有较高要求。
发明内容
针对现有技术存在的问题，本发明提供一种H5网页AB测试方法，避免对用户信息的抓取，提高用户隐私的安全性，降低前后端交互的频次以及对后端的依赖程度，缩短页面渲染完成时间并提升用户体验。
本发明提供的H5网页AB测试方法，包括，配置分组策略信息并发送给广告平台；服务器收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，所述用户由所述广告平台根据广告投放人设置的定向参数圈定；位于用户浏览器端的AB测试模块解析浏览器地址栏中的URL，所述URL由所述广告平台生成，获取分组策略信息，根据分组策略信息对当前用户进行随机分组，根据分组结果加载相应的测试网页。
本发明设定分组策略信息后，由广告平台下发用户访问的URL，用户信息由广告平台控制，广告平台将测试链接推送给符合测试要求的特定用户，测试方不抓取用户信息，提高了用户隐私的安全性，确保测试方符合合规要求。H5网页在获取用户分组策略时，在前端进行解析并对用户分组，加载相应的测试网页，降低前后端交互的频次以及对后端的依赖程度，缩短页面渲染完成时间并提升用户体验。
优选地，同一用户可能会多次访问测试页面，本发明所述AB测试模块在根据分组策略信息对当前用户进行随机分组前，先获取本地缓存中的分组结果，如果本地缓存中存储了分组结果，则直接根据分组结果加载相应的测试网页，确保同一用户被分配测试同一网页。如果本地缓存被清空或者本地缓存中没有存储分组结果，为继续完成测试，本发明则根据分组策略信息对当前用户进行随机分组，然后根据分组结果加载相应的测试网页。
优选地，所述AB测试模块对当前用户进行随机分组后，将分组结果存在本地缓存中。
优选地，在用户点击测试网页后，所述服务器对用户的访问请求做出响应。
本发明提供一种H5网页AB测试系统，包括AB测试工具、AB测试模块、服务器；所述AB测试工具用于配置分组策略信息并发送给广告平台；所述服务器用于在收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，所述用户由所述广告平台根据广告投放人设置的定向参数圈定；所述AB测试模块位于用户浏览器端，用于解析浏览器地址栏中的URL，所述URL由所述广告平台生成，获取分组策略信息，根据分组策略信息对当前用户进行随机分组，根据分组结果加载相应的测试网页。
优选地，所述AB测试模块还用于在根据分组策略信息对当前用户进行随机分组前，先获取本地缓存中的分组结果，如果本地缓存了分组结果，则直接根据分组结果加载相应的测试网页，如果本地缓存被清空或者本地缓存中没有分组结果，则根据分组策略信息对当前用户进行随机分组，然后根据分组结果加载相应的测试网页。
优选地，所述AB测试模块还用于对当前用户进行随机分组后，将分组结果存在本地缓存中。
优选地，所述服务器还用于在用户点击测试网页后，对用户的访问请求做出响应。
优选地，所述广告平台为Google Ads平台，也可以是其他广告平台，只要能够生成符合要求的URL，能够将URL下发符合要求的用户即可。
本发明还提供一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被执行时实现本发明所述的H5网页AB测试方法。
本发明由广告平台负责圈定用户，用户信息由广告平台抓取保存，本发明避免对用户信息的抓取，提高用户隐私的安全性；本发明利用广告平台的优质用户资源，提高了AB实验对象的同质程度来缩小实验对象之间的差异，从而提升流量划分的精确性与合理性；本发明由前端网页代码进行用户分组和加载测试页面，降低前后端交互的频次以及对后端的依赖程度，缩短页面渲染完成时间并提升用户体验。
附图说明
图1为AB测试现有技术业务逻辑图一；
图2为AB测试现有技术业务逻辑图二；
图3为AB测试现有技术业务逻辑图三；
图4为本发明业务逻辑图。
具体实施方式
下面以Google Ads平台为广告平台，以优化icon图标提升点击率为例，结合图4，介绍本发明的实施过程。
整体流程为：结合具体业务在AB测试工具上配置分组策略信息，Google Ads平台基于配置的分组策略信息生成受众人群对应的URL；前端获取URL中的分组策略信息并结合AB测试模块对实验对象进行随机分组并加载不同内容，然后结合用户行为进行打点上报。
(1)在AB测试工具上配置分组策略信息。
结合具体业务，在明确实验目标、实验指标、实验对象的基础之上，配置分组策略。其中配置部分可以设定实验分组的比例；广告系列在创建过程中可以设置用户定向规则从而圈定用户群体，这也就决定了参与实验的对象范围以及实验对象的同质属性。例如，分组策略为：将实验名称设置为“MM-DD-icon-click-XXX-v1”，设置两组icon图标，分别为“control-XXX-v1-1”、“test-XXX-v1-1”，参与测试的用户分成2组，2组数量相同。分组策略配置完成后，传送至Google Ads平台。在广告平台提供页面上设置定向参数，例如：参与测试的用户年龄为20-25岁，定向参数决定了哪些用户可以参与本次AB测试，由广告投放人根据自己的实际需要来设置。
(2)Google Ads平台生成用户访问的URL链接，由Google Ads平台将URL链接推送给目标用户，即，年龄在20-25岁的用户。Google Ads平台推送链接的方式有很多，比如短信推送，比如Google Ads平台在各类网页、APP上的发布广告页面。由于Google Ads平台收集了用户个人信息，可以精准地将广告推送到目标用户。用户个人信息由Google Ads平台收集存储，AB测试方无需掌握用户个人信息，避免对用户信息的抓取，提高用户隐私的安全性。Google Ads平台同一个广告系列下人群定向几乎相同的特性能有效减少实验分组中实验对象的差异，确保实验对象的同质属性，减小实验分流不均导致实验结论有误的可能性。
URL链接中含有分组策略信息，如实验名称、用于测试的两组icon图标名称、分组数量等，分组策略信息用于供H5页面前端的AB测试模块对访问URL链接的用户进行随机分组。
(3)用户根据Google Ads平台推送的URL发出访问请求，部署有具体业务的服务器收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，AB测试模块由相关前端代码实现，也就是将实现AB测试的代码以及测试网页的代码推送到用户的浏览器。H5页面前端的AB测试模块对浏览器地址栏中的URL链接中的分组策略信息进行提取，根据提取出来的分组策略信息，采用随机分组算法对用户进行分组。采用随机分组算法、根据分组策略信息进行随机分组，是常规方式，本发明不涉及这部分改进。由于AB测试模块设置在H5页面前端，即，实现AB测试模块的相关代码为网页端代码，在提取分组策略信息之后，直接在网页端进行分组，并加载具有相应的icon图标的网页内容，无需将分组策略信息传送给部署具体业务的服务器，由服务器进行分组，然后在推送具有相应的icon图标的页面给浏览器，由于无需与后端服务器交互，减少对后端业务的依赖程度，缩短了H5网页页面渲染时间，大大提升了用户体验。
由于分组策略信息规定分成2组，每组用户数量相同，在用户初次访问时，其中一半用户加载含“control-XXX-v1-1”图标的网页，另一半用户加载含“test-XXX-v1-1”图标的网页。用户随机分组后，将用户分组信息存在浏览器本地缓存中。
由于本发明不记录用户个人信息，不会通过用户个人信息，例如用户姓名，来判断该用户分在哪个组，本发明通过用户浏览器的本地缓存来判断，先获取本地本地缓存中的用户分组结果，给用户浏览器加载含相应图标的测试网页。如果用户清除了本地缓存或者本地缓存中没有存储分组结果，也就获取不到用户分组结果(也有可能不是用户清除了缓存，而是该用户第一次访问)，则AB测试模块提取URL链接中的分组策略信息，利用随机分组算法对用户进行分组，然后再加载含相应图标的测试网页。因此，在整个测试期间，不是绝对的按照2组人数完全相同的方式展开测试，而是允许存在一些误差。
在用户浏览器加载页面后，用户可能会点击该图标，在用户点击测试网页后，服务器对用户的访问请求做出响应，用户也有可能不点击，对用户行为进行记录，打点上报数据分析平台。
以上是以Google Ads平台为例，对于其他广告平台也可以适用，只要该广告平台能够将测试推送给符合要求的特定用户，将分组策略信息加入URL链接中，使得AB测试模块可以提取分组策略信息并进行随机分组即可。
Claims (10)
1.一种H5网页AB测试方法，其特征在于：配置分组策略信息并发送给广告平台；服务器收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，所述用户由所述广告平台根据广告投放人设置的定向参数圈定；位于用户浏览器端的AB测试模块解析浏览器地址栏中的URL，所述URL由所述广告平台生成，获取分组策略信息，根据分组策略信息对当前用户进行随机分组，根据分组结果加载相应的测试网页。
2.如权利要求1所述的H5网页AB测试方法，其特征在于：所述AB测试模块在根据分组策略信息对当前用户进行随机分组前，先获取本地缓存中的分组结果，如果本地缓存中存储了分组结果，则直接根据分组结果加载相应的测试网页，如果本地缓存被清空或者本地缓存中没有存储分组结果，则根据分组策略信息对当前用户进行随机分组，然后根据分组结果加载相应的测试网页。
3.如权利要求2所述的H5网页AB测试方法，其特征在于：所述AB测试模块对当前用户进行随机分组后，将分组结果存在本地缓存中。
4.如权利要求1、2或3所述的H5网页AB测试方法，其特征在于：在用户点击测试网页后，所述服务器对用户的访问请求做出响应。
5.一种H5网页AB测试系统，其特征在于：包括AB测试工具、AB测试模块、服务器；所述AB测试工具用于配置分组策略信息并发送给广告平台；所述服务器用于在收到用户访问请求后，将AB测试模块以及用于AB测试的网页推送至用户浏览器端，所述用户由所述广告平台根据广告投放人设置的定向参数圈定；所述AB测试模块位于用户浏览器端，用于解析浏览器地址栏中的URL，所述URL由所述广告平台生成，获取分组策略信息，根据分组策略信息对当前用户进行随机分组，根据分组结果加载相应的测试网页。
6.如权利要求5所述的H5网页AB测试系统，其特征在于：所述AB测试模块还用于在根据分组策略信息对当前用户进行随机分组前，先获取本地缓存中的分组结果，如果本地缓存了分组结果，则直接根据分组结果加载相应的测试网页，如果本地缓存被清空或者本地缓存中没有分组结果，则根据分组策略信息对当前用户进行随机分组，然后根据分组结果加载相应的测试网页。
7.如权利要求6所述的H5网页AB测试系统，其特征在于：所述AB测试模块还用于对当前用户进行随机分组后，将分组结果存在本地缓存中。
8.如权利要求5、6或7所述的H5网页AB测试系统，其特征在于：所述服务器还用于在用户点击测试网页后，对用户的访问请求做出响应。
9.如权利要求5、6或7所述的H5网页AB测试系统，其特征在于：所述广告平台为GoogleAds平台。
10.一种可读存储介质，所述可读存储介质上存储有计算机程序，其特征在于：所述计算机程序被执行时实现权利要求1-4任一权利要求所述的H5网页AB测试方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211631381.4A CN115794649A (zh) | 2022-12-19 | 2022-12-19 | 一种h5网页ab测试方法、系统及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211631381.4A CN115794649A (zh) | 2022-12-19 | 2022-12-19 | 一种h5网页ab测试方法、系统及可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115794649A true CN115794649A (zh) | 2023-03-14 |
Family
ID=85425732
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211631381.4A Pending CN115794649A (zh) | 2022-12-19 | 2022-12-19 | 一种h5网页ab测试方法、系统及可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115794649A (zh) |
-
2022
- 2022-12-19 CN CN202211631381.4A patent/CN115794649A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106446228B (zh) | 一种web页面数据的采集分析方法及装置 | |
| EP2122494B1 (en) | Tracking web server | |
| CN102067126B (zh) | 对分布式搜索的结果进行货币化和优先级区分 | |
| CN108492108A (zh) | 区块链跨链通信方法、系统和计算机可读存储介质 | |
| CN111639279B (zh) | 图形码生成方法、目标页面加载方法和装置 | |
| KR20110100631A (ko) | 모바일 광고 최적화 아키텍처 | |
| CN110399383A (zh) | 应用于服务器的数据处理方法、装置、计算设备、介质 | |
| CN108805694A (zh) | 信贷咨询服务方法、装置、设备及计算机可读存储介质 | |
| CN108959337A (zh) | 大数据获取方法、装置、设备及存储介质 | |
| US9026557B2 (en) | Schema mapping based on data views and database tables | |
| CN107862425B (zh) | 风控数据采集方法、设备、系统及可读存储介质 | |
| CN109740129B (zh) | 基于区块链的报表生成方法、装置、设备及可读存储介质 | |
| CN107835132B (zh) | 一种流量来源跟踪的方法及装置 | |
| CN109684873A (zh) | 数据访问控制方法、装置、计算机设备和存储介质 | |
| CN110795697A (zh) | 逻辑表达式的获取方法、装置、存储介质以及电子装置 | |
| CN113900907B (zh) | 一种映射构建方法和系统 | |
| CN104270443B (zh) | 一种能够动态解析Web应用的云计算系统及方法 | |
| CN113360210A (zh) | 数据对账方法、装置、计算机设备和存储介质 | |
| CN108170860A (zh) | 数据查询方法、装置、电子设备及计算机可读存储介质 | |
| CN112232751A (zh) | 业务数据处理方法、装置、系统、计算机设备和存储介质 | |
| CN115794649A (zh) | 一种h5网页ab测试方法、系统及可读存储介质 | |
| CN110347943A (zh) | 渠道信息处理方法、装置、存储介质及计算机设备 | |
| CN108229127B (zh) | 预先产生验证数据以区分客户端的系统及其方法 | |
| CN114066277A (zh) | 业务决策方法、决策平台、可读介质和电子设备 | |
| CN114428723A (zh) | 测试系统、系统测试方法、相关设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |