CN110034953A - 组间实验中策略链的分析方法、装置、设备及存储介质 - Google Patents
组间实验中策略链的分析方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN110034953A CN110034953A CN201910188270.2A CN201910188270A CN110034953A CN 110034953 A CN110034953 A CN 110034953A CN 201910188270 A CN201910188270 A CN 201910188270A CN 110034953 A CN110034953 A CN 110034953A
- Authority
- CN
- China
- Prior art keywords
- layer
- experiment
- information
- father
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/20—Software design
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/04—Network management architectures or arrangements
- H04L41/044—Network management architectures or arrangements comprising hierarchical management structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0823—Configuration setting characterised by the purposes of a change of settings, e.g. optimising configuration for enhancing reliability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0893—Assignment of logical groups to network elements
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于大数据的组间实验中策略链的分析方法、装置、设备及存储介质,所述方法包括:在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链;获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层;调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。本发明在实验层中加入父实验层和子实验层,将父实验层和子实验层组成的不同的策略链进行实验,提高组间实验的灵活性。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种组间实验中策略链的分析方法、装置、设备及存储介质。
背景技术
出于用户系统的稳定性考虑,在大型交互系统设计时,一般会考虑加入分离式组间实验,以验证在迭代过程中,修改内容不会对用户体验造成严重影响。在设计实验时,一般会选择策略链式的排布式流程,比如在一次实验中分为实验步骤A→B→C→D,当用户分配到该实验任务时,会依次检查各实验步骤是否满足实验步骤要求,如果不满足则会退出实验流,造成实验设计者难以对单个实验本身进行控制变量,同时需要花大量的时间以及浪费一定的流量去进行实验结果的统计才能得出结果,从而降低实验的灵活性。
发明内容
本发明的主要目的在于提出一种组间实验中策略链的分析方法、装置、设备及存储介质,旨在提高实验的灵活性。
为实现上述目的,本发明提供一种组间实验中策略链的分析方法,所述组间实验中策略链的分析方法包括以下步骤:
在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链;
获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥;
调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;
根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
优选地,所述子实验层包括多个不同的策略链;
所述获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,包括:
获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层;
获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
优选地,所述获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层之前,所述方法还包括:
获取父实验层中的父实验信息,根据所述父实验信息在预先设定的实验列表中查找对应的子实验信息,根据所述父实验信息与子实验信息的对应关系,建立所述父实验层和子实验层组成的各策略链。
优选地,所述获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层,包括:
获取所述子实验层的各个不同的策略链的参数配置信息,查找所述参数配置信息中的属性信息;
将所述属性信息设为强制执行,并根据所述属性信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
优选地,所述用户数据采集程序集成在软件开发工具包;
所述调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息之前,所述方法还包括:
获取写入指令,提取所述写入指令中的软件开发工具包以及写入地址信息,根据所述写入地址信息将所述软件开发工具包进行写入;
所述调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息,包括:
调用所述软件开发工具包,在预设时间内采集所述父实验层和子实验层的用户使用信息。
优选地,所述用户使用信息包括父实验层和子实验层的用户访问数量;
所述根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整,包括:
提取所述用户使用信息中的用户访问数量,判断所述用户访问数量是否符合所述流量配置信息;
在所述用户访问数量符合所述流量配置信息时,通过预设规则对当前策略链进行打分;
获取打分结果,判断所述打分结果是否满足预设阈值,在所述打分结果未满足预设阈值时,对所述流量配置信息进行调整。
优选地,所述获取打分结果,判断所述打分结果是否满足预设阈值,在所述打分结果未满足预设阈值时,对所述流量配置信息进行调整之后,所述方法还包括:
获取所述父实验层和子实验层的标签信息,根据所述标签信息对所述用户使用信息进行分类;
根据分类结果查找出所述用户使用信息中的子实验层用户信息,根据所述子实验层用户信息对所述子实验层的配置信息进行调整。
此外,为实现上述目的,本发明还提出一种组间实验中策略链的分析装置,其特征在于,所述组间实验中策略链的分析装置包括:
获取模块,用于在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链;
分配模块,用于获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥;
调用模块,用于调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;
调整模块,用于根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
此外,为实现上述目的,本发明还提出一种设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的组间实验中策略链的分析程序,所述组间实验中策略链的分析程序配置为实现如上所述的组间实验中策略链的分析方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有组间实验中策略链的分析程序,所述组间实验中策略链的分析程序被处理器执行时实现如上文所述的组间实验中策略链的分析方法的步骤。
本发明提出的组间实验中策略链的分析方法,通过在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链;获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥;调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整,从而可在实验层中加入父实验层和子实验层,将父实验层和子实验层组成不同的策略链进行实验,提高组间实验的灵活性。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图;
图2为本发明组间实验中策略链的分析方法第一实施例的流程示意图;
图3为本发明组间实验中策略链的分析方法一实施例的实验层的结构示意图;
图4为本发明组间实验中策略链的分析方法第二实施例的流程示意图;
图5为本发明组间实验中策略链的分析方法第三实施例的流程示意图;
图6为本发明组间实验中策略链的分析装置第一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的设备结构示意图。
如图1所示,该设备可以包括:处理器1001,例如CPU,通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如按键,可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的设备结构并不构成对设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及组间实验中策略链的分析程序。
在图1所示的设备中,网络接口1004主要用于连接外网,与其他网络设备进行数据通信;用户接口1003主要用于连接用户设备,与设备进行数据通信;本发明设备通过处理器1001调用存储器1005中存储的组间实验中策略链的分析程序,并执行本发明实施例提供的组间实验中策略链的分析的实施方法。
基于上述硬件结构,提出本发明组间实验中策略链的分析方法实施例。
参照图2,图2为本发明组间实验中策略链的分析方法第一实施例的流程示意图。
在第一实施例中,所述组间实验中策略链的分析方法包括以下步骤:
步骤S10,在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链。
需要说明的是,在本实施例中,针对设计大型交互系统时,页面逻辑以及用户操作并不为顺序执行,本实施例设计了针对性的、可选强制性的系统实验机制,例如实验层设有多个策略链,A→B→C→D、A→E→C→D、A→F→C→D,对于用户而言,输入输出均相同,仅中间过程产生差别,即视B、E、F为子实验,A为父实验;当实验设计者需要参考步骤间的相互作用时,可以通过特定配置,将用户分流、引导入子实验中,以观察某些细小更变对用户偏好以及操作行为的影响,其中,所述父实验层为用户通用的进去界面,例如通过登录界面进行登录时,所述子实验层为强制设置的具有针对性的用户使用逻辑层,例如在一般情况下,用户通过查看水果的图片时,可设置查看水果图片的下一逻辑图片为饮料的图片,或者用户在查看水果的图片时,可设置查看水果图片的下一个逻辑图片为零食的图片,从而根据用户自身属性,例如年龄、性别等,或前置的实验顺序,进入对应的逻辑链获知当前实验的效果。
在具体实现中,通过在一般的实验层设置父实验层和子实验层,通过父实验层和子实验层组成各种策略链,通过设定的用户流量时用户在进入父实验层时,可针对用户进入不同的子实验层,从而实现在实验中不同实验变量的灵活控制。
步骤S20,获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥。
需要说明的是,所述流量配置信息为预先设定的分配子实验层的流量的比例关系,例如获取当前子实验层的流量配置信息为1:1:1的流量配置关系,例:如果设计者按1:1:1的流量进行配置,则假设有9个流量进入本次实验,则进入B、E、F的数量均为3,从而实现在分流引导中,对流量进行二次分发,实现对流量的灵活配置。
在具体实现中,如图3所示,将子实验之间流量互斥,多个子实验共用父实验100%流量,例如实验1、实验2以及实验6等为设为分布在不同层的实验信息,其中,实验1、实验2以及实验3为位于层1,实验4、实验5以及实验6为位于层2,在父实验4中,子实验1和子实验2为实验4的两个子实验,可共用实验4的流量信息,并且子实验1和2之间的流量互斥,通过预先设置的流量配置信息对子实验1和子实验2中的流量进行分配,从而实现对通过策略链对用户使用情况的更细化的分析。
步骤S30,调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息。
需要说明的是,所述用户数据采集程序可为设在所述客户端上的软件开发工具包(Software Development Kit,SDK),还可为其他数据采集工具,本实施例对此不作限制,在本实施例中,以设在客户端的SDK工具为例进行说明。
在具体实现中中,所述用户使用信息为通过SDK工具采集用户的使用信息,例如点击等行为事件或者是否执行信息,其中,所述用户的使用信息包括用户行为信息,由于SDK无法对行为信息进行识别,只是简单的采集用户的行为信息,并不能对用户的行为信息进行分析,在初始状态下,SDK需要将采集的用户行为信息推送至服务器,通过服务器对用户的行为信息进行分析,并将分析结果反馈给客户端,从而使客户端实现对用户行为的识别。
步骤S40,根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
需要说明的是,通过获取的用户使用信息可统计出用户访问量,从而得到当前的逻辑链是否符合用户的需求,在统计出的用户访问量超过预设阈值时,则表明当前的流量配置更符合用户的需求,相应的,在统计出的用户访问量未达到预设阈值时,可快速地通过配置中心进行流量分配信息的调整,从而实现对实验策略链的灵活配置。
在具体实现中,可通过访问量的数量进行打分,根据打分结果得到当前流量配置的效果,从而实现对逻辑链用户使用情况的更细化的分析
本实施例通过上述方案,通过在实验层中的加入父实验层和子实验层,将父实验层和子实验层组成的不同的策略链进行实验,通过不同的策略链对用户进行实验,并根据实验结果可对策略链的配置进行调整,从而提高组间实验的灵活性。
进一步地,如图4所示,基于第一实施例提出本发明组间实验中策略链的分析方法第二实施例,在本实施例中,所述子实验层包括多个不同的策略链;
所述步骤S20,包括:
步骤S201,获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层;
需要说明的是,在所述父实验层设有配置信息,通过所述配置信息可保证进入用户的流量信息满足实验者的需求,即根据设定的配置信息分配对应的流量信息,例如例如获取当前子实验层的流量配置信息为1:1:1的流量配置关系,例:如果设计者按1:1:1的流量进行配置,则假设有9个流量进入本次实验,则进入B、E、F的数量均为3,从而实现在分流引导中,对流量进行二次分发,实现对流量的灵活配置。
步骤S202,获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
在本实施例中,由于一个父实验可能对应多个子实验层,在这种情况下,对各个子实验层设有参数配置信息,通过所述参数配置信息可将所述父实验层中的流量信息进行分发,从而实现流量的二次分发,通过所述子实验层配置不同的策略链用于实验,提高实验的灵活性。
进一步地,所述步骤S202之前,所述方法还包括:
步骤S203,获取父实验层中的父实验信息,根据所述父实验信息在预先设定的实验列表中查找对应的子实验信息,根据所述父实验信息与子实验信息的对应关系,建立所述父实验层和子实验层组成的各策略链。
需要说明的是,所述实验列表为预先设定的父实验信息与子实验信息的对应关系,在实验中,设有多个父实验和多个子实验,在进入父实验中,可根据实验列表信息根据所述父实验信息查找对应的子实验信息,从而建立实验层与子实验层的对应关系,提高实验的准确性。
进一步地,所述步骤S202,包括:
获取所述子实验层的各个不同的策略链的参数配置信息,查找所述参数配置信息中的属性信息。
需要说明的是,在每个子实验层设有相应的配置信息,通过所述配置信息可实现对用户流量的分发,在本实施例中,为了保证每个子实验层进行实验,对所述子实验层的属性信息设为强制执行,从而将父实验层中的流量引入子实验中。
将所述属性信息设为强制执行,并根据所述属性信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
本实施例提供的方案,通过在每个实验层设有相应的配置信息,通过所述配置信息,对所述子实验层的属性信息设为强制执行,从而将父实验层中的流量引入子实验中,从而保证每个子实验层进行实验,并通过对不同子实验的设计实现对实验中变量的灵活配置。
进一步地,如图5所示,基于第一实施例或第二实施例提出本发明组间实验中策略链的分析方法第三实施例,在本实施例中,基于第一实施例进行说明,所述用户数据采集程序集成在软件开发工具包;
所述步骤S30之前,所述方法还包括:
获取写入指令,提取所述写入指令中的软件开发工具包以及写入地址信息,根据所述写入地址信息将所述软件开发工具包进行写入。
需要说明的是,在本实施例中,所述用户数据采集程序集成在软件开发工具包,例如SDK,还可为其他可实现相同或相似功能的采集工具,本实施例对此不作限制,在本实施例中以设在客户端的SDK为例进行说明。
在具体实现中,所述写入指令可为通过串口进行数据的写入,还可为通过写入界面进行数据输入,从而实现在客户端设置采集工具,用户采集用户的使用信息,便于对实验数据的有效分析。
所述步骤S30,包括:
调用所述软件开发工具包,在预设时间内采集所述父实验层和子实验层的用户使用信息。
进一步地,所述用户使用信息包括父实验层和子实验层的用户访问数量;
所述步骤S40,包括
步骤S401,提取所述用户使用信息中的用户访问数量,判断所述用户访问数量是否符合所述流量配置信息。
在本实施例中,为了实现对实验数据的分析,首先判断实验数据的合理性,例如判断所述用户访问数量是否符合所述流量配置信息,在本实施例中将各子实验层的配置信息设有1:1:1时,则判断进行子实验中的各个用户数量是否按照设定的配置指令,从而保证实验数据的有效性。
步骤S402,在所述用户访问数量符合所述流量配置信息时,通过预设规则对当前策略链进行打分。
在具体实现中,为了保证对数据的有效分析,通过预设规则对当前策略链进行打分,其中,所述预设规则可为用户的执行数量,根据所述用户的执行数量可知当前的子实验层是否符合用户的实际需求,用户通过查看水果的图片时,可设置查看水果图片的下一逻辑图片为饮料的图片,或者用户在查看水果的图片时,可设置查看水果图片的下一个逻辑图片为零食的图片,从而可根据用户的执行情况得到用户的偏好,便于对实验层的实验效果进行统计分析,还可通过其他判定规则进行多维度打分,实现对实验结果的更精确的分析。
步骤S403,获取打分结果,判断所述打分结果是否满足预设阈值,在所述打分结果未满足预设阈值时,对所述流量配置信息进行调整。
需要说明的是,所述预设阈值可为60分,还可为其他阈值,本实施例对此不作限制,为了保证数据的可参考性,可设置预设阈值,例如在打分分值小于所述预设阈值,则表明当前的子实验层的实验并不符合用户的需求,则可根据打分结果对子实验层进行及时调整,避免在实验完成时再进行统计分析,从而降低实验效率。
进一步地,所述步骤403之后,所述方法还包括:
获取所述父实验层和子实验层的标签信息,根据所述标签信息对所述用户使用信息进行分类。
需要说明的是,由于用户数据采集程序采集所有用户的使用信息,其中包括父实验层的用户使用信息和子实验层的用户信息,在这种情况下,为了保证对数据的有效分析,可将所述父实验层和子实验层设定标签信息,从而实现对不同层的用户使用信息进行区分以及识别。
根据分类结果查找出所述用户使用信息中的子实验层用户信息,根据所述子实验层用户信息对所述子实验层的配置信息进行调整。
可以理解的是,所述调整可为对父实验层的配置信息进行调整,还可为对子实验层的实验信息进行调整,根据用户使用信息可实现及时有效的参数调整,从而提高实验层实验的灵活性。
本实施例提供的方案,通过预设规则对当前策略链进行打分,并通过标签信息对父实验层和子实验层的数据进行有效区分,并针对分析结果对子实验层的实验信息进行调整,根据用户使用信息可实现及时有效的参数调整,从而提高实验层实验的灵活性。
本发明进一步提供一种组间实验中策略链的分析装置。
参照图6,图6为本发明组间实验中策略链的分析装置第一实施例的功能模块示意图。
本发明组间实验中策略链的分析装置第一实施例中,该组间实验中策略链的分析装置包括:
获取模块10,用于在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链。
需要说明的是,在本实施例中,针对设计大型交互系统时,页面逻辑以及用户操作并不为顺序执行,本实施例设计了针对性的、可选强制性的系统实验机制,例如实验层设有多个策略链,A→B→C→D、A→E→C→D、A→F→C→D,对于用户而言,输入输出均相同,仅中间过程产生差别,即视B、E、F为子实验,A为父实验;当实验设计者需要参考步骤间的相互作用时,可以通过特定配置,将用户分流、引导入子实验中,以观察某些细小更变对用户偏好以及操作行为的影响,其中,所述父实验层为用户通用的进去界面,例如通过登录界面进行登录时,所述子实验层为强制设置的具有针对性的用户使用逻辑层,例如在一般情况下,用户通过查看水果的图片时,可设置查看水果图片的下一逻辑图片为饮料的图片,或者用户在查看水果的图片时,可设置查看水果图片的下一个逻辑图片为零食的图片,从而根据用户自身属性,例如年龄、性别等,或前置的实验顺序,进入对应的逻辑链获知当前实验的效果。
在具体实现中,通过在一般的实验层设置父实验层和子实验层,通过父实验层和子实验层组成各种策略链,通过设定的用户流量时用户在进入父实验层时,可针对用户进入不同的子实验层,从而实现在实验中不同实验变量的灵活控制。
分配模块20,用于获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥。
需要说明的是,所述流量配置信息为预先设定的分配子实验层的流量的比例关系,例如获取当前子实验层的流量配置信息为1:1:1的流量配置关系,例:如果设计者按1:1:1的流量进行配置,则假设有9个流量进入本次实验,则进入B、E、F的数量均为3,从而实现在分流引导中,对流量进行二次分发,实现对流量的灵活配置。
在具体实现中,如图3所示,将子实验之间流量互斥,多个子实验共用父实验100%流量,例如实验1、实验2以及实验6等为设为分布在不同层的实验信息,其中,实验1、实验2以及实验3为位于层1,实验4、实验5以及实验6为位于层2,在父实验4中,子实验1和子实验2为实验4的两个子实验,可共用实验4的流量信息,并且子实验1和2之间的流量互斥,通过预先设置的流量配置信息对子实验1和子实验2中的流量进行分配,从而实现对通过策略链对用户使用情况的更细化的分析。
调用模块30,用于调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息。
需要说明的是,所述用户数据采集程序可为设在所述客户端上的软件开发工具包(Software Development Kit,SDK),还可为其他数据采集工具,本实施例对此不作限制,在本实施例中,以设在客户端的SDK工具为例进行说明。
在具体实现中中,所述用户使用信息为通过SDK工具采集用户的使用信息,例如点击等行为事件或者是否执行信息,其中,所述用户的使用信息包括用户行为信息,由于SDK无法对行为信息进行识别,只是简单的采集用户的行为信息,并不能对用户的行为信息进行分析,在初始状态下,SDK需要将采集的用户行为信息推送至服务器,通过服务器对用户的行为信息进行分析,并将分析结果反馈给客户端,从而使客户端实现对用户行为的识别。
调整模块40,用于根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
需要说明的是,通过获取的用户使用信息可统计出用户访问量,从而得到当前的逻辑链是否符合用户的需求,在统计出的用户访问量超过预设阈值时,则表明当前的流量配置更符合用户的需求,相应的,在统计出的用户访问量未达到预设阈值时,可快速地通过配置中心进行流量分配信息的调整,从而实现对实验策略链的灵活配置。
在具体实现中,可通过访问量的数量进行打分,根据打分结果得到当前流量配置的效果,从而实现对逻辑链用户使用情况的更细化的分析
本实施例通过上述方案,通过在实验层中的加入父实验层和子实验层,将父实验层和子实验层组成的不同的策略链进行实验,通过不同的策略链对用户进行实验,并根据实验结果可对策略链的配置进行调整,从而提高组间实验的灵活性。
此外,为实现上述目的,本发明还提出一种设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的组间实验中策略链的分析程序,所述组间实验中策略链的分析程序配置为实现如上文所述的组间实验中策略链的分析方法的步骤。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有组间实验中策略链的分析程序,所述组间实验中策略链的分析程序被处理器执行如上文所述的组间实验中策略链的分析方法的步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个计算机可读存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台智能终端设备(可以是手机,计算机,终端设备,空调器,或者网络终端设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种组间实验中策略链的分析方法,其特征在于,所述组间实验中策略链的分析方法包括:
在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包括各策略链;
获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥;
调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;
根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
2.如权利要求1所述的组间实验中策略链的分析方法,其特征在于,所述子实验层包括多个不同的策略链;
所述获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,包括:
获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层;
获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
3.如权利要求2所述的组间实验中策略链的分析方法,其特征在于,所述获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层之前,所述方法还包括:
获取父实验层中的父实验信息,根据所述父实验信息在预先设定的实验列表中查找对应的子实验信息,根据所述父实验信息与子实验信息的对应关系,建立所述父实验层和子实验层组成的各策略链。
4.如权利要求2所述的组间实验中策略链的分析方法,其特征在于,所述获取所述子实验层的各个不同的策略链的参数配置信息,根据所述参数配置信息将所述父实验层中的用户流量进行分流,引导入各个子实验层,包括:
获取所述子实验层的各个不同的策略链的参数配置信息,查找所述参数配置信息中的属性信息;
将所述属性信息设为强制执行,并根据所述属性信息将所述父实验层中的用户流量进行分流,引导入各个子实验层。
5.如权利要求1至4中任一项所述的组间实验中策略链的分析方法,其特征在于,所述用户数据采集程序集成在软件开发工具包;
所述调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息之前,所述方法还包括:
获取写入指令,提取所述写入指令中的软件开发工具包以及写入地址信息,根据所述写入地址信息将所述软件开发工具包进行写入;
所述调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息,包括:
调用所述软件开发工具包,在预设时间内采集所述父实验层和子实验层的用户使用信息。
6.如权利要求1至4中任一项所述的组间实验中策略链的分析方法,其特征在于,所述用户使用信息包括父实验层和子实验层的用户访问数量;
所述根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整,包括:
提取所述用户使用信息中的用户访问数量,判断所述用户访问数量是否符合所述流量配置信息;
在所述用户访问数量符合所述流量配置信息时,通过预设规则对当前策略链进行打分;
获取打分结果,判断所述打分结果是否满足预设阈值,在所述打分结果未满足预设阈值时,对所述流量配置信息进行调整。
7.如权利要求6所述的组间实验中策略链的分析方法,其特征在于,所述获取打分结果,判断所述打分结果是否满足预设阈值,在所述打分结果未满足预设阈值时,对所述流量配置信息进行调整之后,所述方法还包括:
获取所述父实验层和子实验层的标签信息,根据所述标签信息对所述用户使用信息进行分类;
根据分类结果查找出所述用户使用信息中的子实验层用户信息,根据所述子实验层用户信息对所述子实验层的配置信息进行调整。
8.一种组间实验中策略链的分析装置,其特征在于,所述组间实验中策略链的分析装置包括:
获取模块,用于在用户进入实验层时,获取进入实验层的流量信息,所述实验层包括父实验层和子实验层,所述父实验层和子实验层包含各策略链;
分配模块,用于获取所述实验层的流量配置信息,根据所述流量配置信息将所述流量信息分配至所述父实验层和子实验层,其中,所述子实验层共用父实验层的流量信息,所述子实验层之间流量互斥;
调用模块,用于调用用户数据采集程序,在预设时间内采集所述父实验层和子实验层的用户使用信息;
调整模块,用于根据所述用户使用信息分析对应的用户,并通过分析结果对所述流量配置信息进行调整。
9.一种设备,其特征在于,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的组间实验中策略链的分析程序,所述组间实验中策略链的分析程序配置为实现如权利要求1至7中任一项所述的组间实验中策略链的分析方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有组间实验中策略链的分析程序,所述组间实验中策略链的分析程序被处理器执行时实现如权利要求1至7中任一项所述的组间实验中策略链的分析方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910188270.2A CN110034953A (zh) | 2019-03-12 | 2019-03-12 | 组间实验中策略链的分析方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910188270.2A CN110034953A (zh) | 2019-03-12 | 2019-03-12 | 组间实验中策略链的分析方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110034953A true CN110034953A (zh) | 2019-07-19 |
Family
ID=67235942
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910188270.2A Pending CN110034953A (zh) | 2019-03-12 | 2019-03-12 | 组间实验中策略链的分析方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110034953A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110808872A (zh) * | 2019-10-21 | 2020-02-18 | 微梦创科网络科技(中国)有限公司 | 一种流量实验的实现方法、装置及电子设备 |
CN111967798A (zh) * | 2020-09-07 | 2020-11-20 | 上海优扬新媒信息技术有限公司 | 实验样本分配的方法及装置、设备及计算机可读存储介质 |
CN113076195A (zh) * | 2021-03-31 | 2021-07-06 | 北京字节跳动网络技术有限公司 | 对象的分流方法、装置、可读介质和电子设备 |
CN114760251A (zh) * | 2022-04-13 | 2022-07-15 | 北京泰迪熊移动科技有限公司 | 数据分流方法、装置、电子设备及计算机可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104503842A (zh) * | 2014-12-22 | 2015-04-08 | 广州唯品会信息科技有限公司 | 基于多层分流实验框架的策略执行方法和装置 |
CN105373480A (zh) * | 2015-12-15 | 2016-03-02 | 广州唯品会信息科技有限公司 | 优化ABTest系统分流的方法及系统 |
US20170128838A1 (en) * | 2015-11-09 | 2017-05-11 | Google Inc. | Application testing with experimental layers |
CN108845936A (zh) * | 2018-05-31 | 2018-11-20 | 阿里巴巴集团控股有限公司 | 一种基于海量用户的ab测试方法及系统 |
-
2019
- 2019-03-12 CN CN201910188270.2A patent/CN110034953A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104503842A (zh) * | 2014-12-22 | 2015-04-08 | 广州唯品会信息科技有限公司 | 基于多层分流实验框架的策略执行方法和装置 |
US20170128838A1 (en) * | 2015-11-09 | 2017-05-11 | Google Inc. | Application testing with experimental layers |
CN105373480A (zh) * | 2015-12-15 | 2016-03-02 | 广州唯品会信息科技有限公司 | 优化ABTest系统分流的方法及系统 |
CN108845936A (zh) * | 2018-05-31 | 2018-11-20 | 阿里巴巴集团控股有限公司 | 一种基于海量用户的ab测试方法及系统 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110808872A (zh) * | 2019-10-21 | 2020-02-18 | 微梦创科网络科技(中国)有限公司 | 一种流量实验的实现方法、装置及电子设备 |
CN111967798A (zh) * | 2020-09-07 | 2020-11-20 | 上海优扬新媒信息技术有限公司 | 实验样本分配的方法及装置、设备及计算机可读存储介质 |
CN111967798B (zh) * | 2020-09-07 | 2023-10-03 | 度小满科技(北京)有限公司 | 实验样本分配的方法及装置、设备及计算机可读存储介质 |
CN113076195A (zh) * | 2021-03-31 | 2021-07-06 | 北京字节跳动网络技术有限公司 | 对象的分流方法、装置、可读介质和电子设备 |
CN113076195B (zh) * | 2021-03-31 | 2023-04-07 | 抖音视界有限公司 | 对象的分流方法、装置、可读介质和电子设备 |
CN114760251A (zh) * | 2022-04-13 | 2022-07-15 | 北京泰迪熊移动科技有限公司 | 数据分流方法、装置、电子设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110034953A (zh) | 组间实验中策略链的分析方法、装置、设备及存储介质 | |
CN106202177B (zh) | 一种文本分类方法及装置 | |
CN106484622B (zh) | 测试方法、装置及系统 | |
CN104281611B (zh) | 网站测试系统中的用户流量分配方法及装置 | |
CN110046296A (zh) | 实验数据的处理方法、装置、设备及存储介质 | |
Kim et al. | An empirical analysis of mobile voice service and SMS: a structural model | |
CN109919652A (zh) | 用户群体分类方法、装置、设备及存储介质 | |
CN105893253A (zh) | 应用软件测试方法、测试装置及测试设备 | |
CN106296142A (zh) | 一种多支付渠道选择的方法及系统 | |
CN107909466A (zh) | 客户关系网络展示方法、装置、设备及可读存储介质 | |
CN108469975A (zh) | 控件显示方法、装置、计算机设备和存储介质 | |
US11558769B2 (en) | Estimating apparatus, system, method, and computer-readable medium, and learning apparatus, method, and computer-readable medium | |
CN109657542A (zh) | 面试人员的性格预测方法、装置、计算机设备及计算机存储介质 | |
CN106445977A (zh) | 图片推送方法及装置 | |
CN109829069A (zh) | 图像审核处理方法、装置、电子设备及存储介质 | |
CN110377742A (zh) | 文本分类评测方法、装置、可读存储介质和计算机设备 | |
CN109871770A (zh) | 房产证识别方法、装置、设备及存储介质 | |
CN110059002A (zh) | 测试数据的生成方法、测试设备、存储介质及装置 | |
CN108681505A (zh) | 一种基于决策树的测试用例排序方法和装置 | |
CN109670913B (zh) | 为平台的租户提供服务的方法、装置、介质及电子设备 | |
US7451422B1 (en) | Simultaneous assignment of select I/O objects and clock I/O objects to banks using integer linear programming | |
US20090210195A1 (en) | Simulated bucket testing | |
CN107016460A (zh) | 用户换机预测方法及装置 | |
CN107909457A (zh) | 薪资计算方法、装置、设备及计算机可读存储介质 | |
CN109726087A (zh) | 多网页方案测试方法、装置、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190719 |
|
WD01 | Invention patent application deemed withdrawn after publication |