CN108255696A - 一种基于用户对网页操作行为采集的分析方法和系统 - Google Patents

Abstract

本发明实施例提供了一种基于用户对网页操作行为采集的分析方法和系统。本发明实施例预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；获取在试点区域的测试时间内用户对测试网页操作的基础数据；在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。本实施例仅需进行一次分析指标预置，分析工具即可通过采集数据进行智能分析，降低负载压力。

Description

一种基于用户对网页操作行为采集的分析方法和系统

技术领域

本发明涉及通信技术领域，尤其涉及一种基于用户对网页操作行为采集的分析方法和系统。

背景技术

目前针对互联网应用采集到的用户行为和操作日志可以运用大数据、云计算技术完成数据计算过程，依靠专业人员进行分析工作，其过程中涉及的分析指标、分析方法均需有专业人员介入完成，以人脑完成该过程中会存在主观性，且专业人员的水平良莠不齐，最终形成的分析报告质量则不能确保其分析价值体现是否完整，针对报告中反映的现象能否成功转化为产品改进建议、运营活动建议均存在不稳定性。形成了一种投入大量资源，而最终未能将资源投入有力转化成收益的现象。

现有的一种技术的发明专利，申请号201410106000.X，名称为用于互联网用户行为分析的数据处理方法和装置，公开了一种用于互联网用户行为分析的数据处理方法和装置。其中，用于互联网用户行为分析的数据处理方法包括：获取目标网站的用户行为数据；按照预设维度对用户行为数据进行计算，得到计算结果；获取预设维度下的训练集；将计算结果与训练集进行比较，得到比较结果；以及根据比较结果判断用户行为数据是否出现异常。通过本发明，达到了提高用户行为数据异常检测的准确性的效果。该发明主要利用预设维度及其训练集分析数据准确性，其预设维度是固定的或由使用维护者进行预置，在变更时会缺乏分析依据或必须通过其他分析手段形成，依据该发明中所描述的内容难以达到；检测其数据异常后，未描述其异常数据后续处理手段。

发明内容

本发明的实施例提供了一种基于用户对网页操作行为采集的分析方法和系统，本发明提供如下方案；预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

获取在试点区域的测试时间内用户对测试网页操作的基础数据；

在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

根据本发明的上述方法，所述预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标，包括：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。

根据本发明的上述方法，所述在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页，包括：

设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常。

根据本发明的上述方法，对所述标记异常的测试网页进行处理，包括：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。

根据本发明的另一方面，还提供一种基于用户对网页操作行为采集的分析系统，包括：

预备模块：其用于预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

获取模块：其用于获取在试点区域的测试时间内用户对测试网页操作的基础数据；

分析模块：其用于在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

根据本发明的另一方面，所述预备模块具体用于：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。

根据本发明的另一方面，所述分析模块具体用于：

设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常。

根据本发明的另一方面，所述分析模块具体用于：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。

由上述本发明的实施例提供的技术方案可以看出，本发明实施例预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；获取在试点区域的测试时间内用户对测试网页操作的基础数据；在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。本实施例仅需进行一次分析指标预置，分析工具即可通过采集数据进行智能分析，动态调整采集过程以及分析过程，提升分析结果利用价值；分析过程可发现数据异常，针对特定异常可触发客户端搭载功能插件进行异常问题修复节省决策者工作资源，仅投入于关键问题的解决即可，同时分析工具对自行完成部分进行验证，保证其决策可靠性；决策优化系统过程可提高系统应用的运行性能，降低负载压力，为用户实现一种方便可靠的网页分析工具。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为现有技术中应用场景图；

图2为本发明实施例一提供的一种基于用户对网页操作行为采集的分析方法的处理流程图；

图3为本发明实施例二提供的一种基于用户对网页操作行为采集的分析方法和系统的系统模块图。

具体实施方式

为便于对本发明实施例的理解，下面将结合附图以几个具体实施例为例做进一步的解释说明，且各个实施例并不构成对本发明实施例的限定。

实施例一

本发明的实施例中，涉及云服务、终端、分析工具(或云服务、分析工具)可自由组合的技术架构，如附图1所示：

云服务主要负责存储用户行为或操作日志埋点的采集指标，存储系统完整配置信息，存储已采集的用户行为或操作日志数据，云服务部署在阿里云下，可保证存储空间自动扩展以及满足数据库读取性能；

终端作为采集终端安装在用户计算机上，支持Windows XPSP3及以上系统版本，主要支持用户使用客户端上搭载的产品及应用、插件、服务等，负责获取云服务存储的采集指标及系统配置信息，用户行为或操作日志数据的终端采集工具，定时将用户行为或操作日志数据上报到云服务；

分析工具作为本发明的核心部分，获取云服务的系统配置信息及用户行为或操作日志，结合采集指标完成数据分析工作；

本实施例的一种基于用户对网页操作行为采集的分析方法，需要预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标，包括：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。本实施例中，对网页对象的操作偏好点击步骤指用户在对网页操作中为点击到达目的网页习惯性进行的点击操作步骤；对网页对象的操作的最短点击步骤指用户在对网页操作中为点击到达目的网页可以优选的最短点击步骤。

由于各终端采样的用户对网页对象的操作的基础数据，是一个总体性的数据，包括在一个整体采样区域内的所有用户对网页操作行为点击的集合，比如在整体采样区域内，可以有若干个子采样区域，这样每一个子采样区域可以是一个元素，比如，在对一个网页对象的操作中，启动网页的行为可以认为是一个元素，点击网页中的子网页标签也可以认为是一个元素，用户在网页内的下载行为也可以认为是一个元素，等等，本领域技术人员应能理解上述元素仅为举例，其他现有的或今后可能出现的元素如可适用于本发明实施例，也应包含在本发明保护范围以内，并在此以引用方式包含于此。每一个元素对应一个元素标识；

本实施例的一种基于用户对网页操作行为采集的分析方法，具体包括如下步骤，具体如附图2所示：

步骤11、预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

步骤12、获取在试点区域的测试时间内用户对测试网页操作的基础数据；

步骤13、在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

测试网页中包括的元素很多，通常只用选择需要考虑的指标的元素作为测试元素来进行分析，具体地，

优选地，设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常；若所述待测试网页评价结果为正常，则不做处理。

对所述标记异常的测试网页进行处理，包括：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。

若所述测试网页系统配置调节无效，则进行人工调节。

为了便于理解，本实施例给出如下示例：实例1：

例如，终端9月1日至9月5日采集江苏地区用户对测试网页操作的基础数据共计480000条，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算得出按照地区元素，无锡地区数据总量为250000条；以用户启动网页操作为元素，计算得出用户启动次数为40000次；以首页频道点击操作为元素，首页频道点击次数为200000次；

在本次测试中，选择用户启动网页操作，首页频道点击操作作为测试元素；参考系统历史运行情况，基于用户启动网页操作，首页频道点击操作点击量基准阈值，对用户启动网页操作的点击次数，首页频道点击操作点击次数进行校准后，用户启动次数为40000次；首页频道点击次数为140000次；此时，启动与首页频道点击行为次数比例为1:3.5；意味着平均每一用户单次运行客户端后，点击首页频道3.5次；得出结论：江苏无锡地区首页频道点击次数疑似异常。由于此案例中需要人工调节，由决策者协调系统开发人员检查客户端运行部分代码，发现终端端登录后，会自动触发点击首页频道事件，导致点击首页频道行为数据异常；进而检查江苏无锡地区下发终端版本问题。

实例2：

客户端8月15日至8月20日采集北京地区用户行为基础数据共计300000条，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算得出在线服务频道点击次数为650000次，在线服务频道下应用A点击次数为50000次，应用B点击次数为30000次，应用C点击次数为10000次，在线服务面板内应用点击次数合计90000次；

参考系统历史运行情况，基于在线服务频道点击量基准阈值，对在线服务频道进行校准后，得出结论：北京地区在线服务频道点击次数疑似异常，

此时微量调节所述测试网页系统配置：北京地区在线服务频道面板鼠标悬停时间1秒调整为3秒，对8月22日至8月27日期间进行采样结果后，采集结果：用户行为基础数据共计310000条，采用所述高级分析指标，在调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，在线服务频道点击次数180000次，在线服务频道下应用A点击次数为60000次，应用B点击次数为35000次，应用C点击次数为10000次；则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

验证后结论：在线服务频道面板点击次数异常主要由于面板弹出触发悬停时间较短，容易引起用户误操作。

实施例二

该实施例提供了一种一种基于用户对网页操作行为采集的分析系统，其具体实现结构如图3所示，具体可以包括如下的模块：

预备模块31：其用于预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

获取模块32：其用于获取在试点区域的测试时间内用户对测试网页操作的基础数据；

分析模块33：其用于在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

所述预备模块31具体用于：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。

所述分析模块33具体用于：

设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常。

所述分析模块33具体用于：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。

用本发明实施例的系统进行网页分析的具体过程与前述方法实施例类似，此处不再赘述。

综上所述，本发明实施例通过预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；获取在试点区域的测试时间内用户对测试网页操作的基础数据；在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。本发明实施例预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；获取在试点区域的测试时间内用户对测试网页操作的基础数据；在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。本实施例仅需进行一次分析指标预置，分析工具即可通过采集数据进行智能分析，动态调整采集过程以及分析过程，提升分析结果利用价值；分析过程可发现数据异常，针对特定异常可触发客户端搭载功能插件进行异常问题修复节省决策者工作资源，仅投入于关键问题的解决即可，同时分析工具对自行完成部分进行验证，保证其决策可靠性；决策优化系统过程可提高系统应用的运行性能，降低负载压力，为用户实现一种方便可靠的网页分析工具。

本领域普通技术人员可以理解：附图只是一个实施例的示意图，附图中的模块或流程并不一定是实施本发明所必须的。

通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。

Claims (8)

1.一种基于用户对网页操作行为采集的分析方法，其特征在于，包括：

预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

获取在试点区域的测试时间内用户对测试网页操作的基础数据；

在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

2.根据权利要求1所述的一种基于用户对网页操作行为采集的分析方法，其特征在于，所述预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标，包括：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。

3.根据权利要求1所述的一种基于用户对网页操作行为采集的分析方法，其特征在于，所述在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页，包括：

设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常。

4.根据权利要求3所述的一种基于用户对网页操作行为采集的分析方法，其特征在于，对所述标记异常的测试网页进行处理，包括：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。

5.一种基于用户对网页操作行为采集的分析系统，其特征在于，包括：

预备模块：其用于预先基于用户对网页对象的操作的基础数据生成的初步分析指标获取高级分析指标；

获取模块：其用于获取在试点区域的测试时间内用户对测试网页操作的基础数据；

分析模块：其用于在测试网页的元素中选择测试元素，采用所述高级分析指标，结合所述在试点区域的测试时间内用户对测试网页操作的基础数据，计算在测试时间内用户对测试元素的每一元素对应的点击量，以分析所述测试网页。

6.根据权利要求5所述的一种基于用户对网页操作行为采集的分析系统，其特征在于，所述预备模块具体用于：

获取由各终端采样的用户对网页对象的操作的基础数据，并根据所述基础数据生成初步分析结果；

根据初步分析结果，结合用户行为和操作日志总结用户对网页对象的操作偏好点击步骤和完成对网页对象的操作的最短点击步骤；结合所述用户对网页对象的操作偏好点击步骤和所述完成对网页对象的操作的最短点击步骤，基于对网页对象的元素划分，生成高级分析指标，所述高级分析指标包括对网页对象按元素划分的每一元素对应的分析指标。

7.根据权利要求5所述的一种基于用户对网页操作行为采集的分析系统，其特征在于，所述分析模块具体用于：

设置对测试网页的测试元素的每一元素对应的点击量基准阈值；

对于所述计算在测试时间内用户对测试元素的每一元素对应的点击量，进行校准，按照所述测试元素的每一元素对应的点击量基准阈值对校准后的测试元素的每一元素对应的点击量进行评价，若所述待测试网页评价结果为异常，则标记所述测试网页异常。

8.根据权利要求7所述的一种基于用户对网页操作行为采集的分析系统，其特征在于，所述分析模块具体用于：

微量调节所述测试网页系统配置，待所述系统配置生效后，进行回归采用分析，若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果好转，则继续正向调节所述测试网页系统配置，使所述待测试网页评价结果正常；

若调节后计算在测试时间内用户对测试元素的每一元素对应的点击量，较之历史的评价结果恶化，则反向调节所述测试网页系统配置，使所述待测试网页评价结果正常。