CN107797908A - 一种网站用户的行为数据采集方法 - Google Patents

Abstract

本发明公开了一种网站用户的行为数据采集方法，用于提高数据采集效率、并采集到完整的用户行为数据。在该方法中，检测网站用户使用客户端在当前网页上执行的动作；使用当前网页上预先嵌入的统一日志脚本对网站用户的动作进行跟踪，并生成动作的跟踪ID；使用统一日志脚本记录动作的位置标识；判断网站用户是否关闭当前网页；若网站用户关闭掉当前网页，计算网站用户在当前网页上的停留时间；若网站用户没有关闭当前网页，记录当前网页的来源页标识；根据统一日志脚本采集到的行为数据生成网站用户的行为日志，并保存网站用户的行为日志，行为日志中包括：停留时间，或者来源页标识。

Description

一种网站用户的行为数据采集方法

技术领域

本发明涉及计算机技术领域，具体涉及一种网站用户的行为数据采集方法。

背景技术

随着互联网的发展，特别是移动互联网的发展，对于用户体验的关注度越来越高，对数据分析需求的精细化程度要求也越来越高。对于不同网站，所需要的统计指标类型也是不同的，通过各种统计指标数据可以反映产品总体情况，数据的价值除了反映现状，还有更重要的是应用。通过采集用户行为日志，统计并分析用户行为数据，可以为我们了解用户真正的需求，改善产品,指导业务增长提供科学依据。

现有技术提供的网站系统中，对用户行为日志的采集研究不太成熟，甚至很多网站系统并没有采集用户行为数据，现有技术中在采集用户行为数据时无法与网站的运行日志有效结合，导致采集到的用户行为数据不够全面，数据采集效率低。

发明内容

本发明的目的在于提供一种网站用户的行为数据采集方法，用于提高数据采集效率、并采集到完整的用户行为数据。

为了达到上述目的，本发明采用这样的如下技术方案：

本发明提供一种网站用户的行为数据采集方法，包括：

检测网站用户使用客户端在当前网页上执行的动作；

使用所述当前网页上预先嵌入的统一日志脚本对所述网站用户的动作进行跟踪，并生成所述动作的跟踪标识ID；

使用所述统一日志脚本记录所述动作的位置标识；

判断所述网站用户是否关闭所述当前网页；

若所述网站用户关闭掉所述当前网页，计算所述网站用户在所述当前网页上的停留时间；

若所述网站用户没有关闭所述当前网页，记录所述当前网页的来源页标识；

根据所述统一日志脚本采集到的行为数据生成所述网站用户的行为日志，并保存所述网站用户的行为日志，所述行为日志中包括：所述停留时间，或者所述来源页标识。

采用上述技术方案后，本发明提供的技术方案将有如下优点：

在本发明实施例中，在网页上预先嵌入的统一日志脚本，可以使用该统一日志脚本对网站用户的动作进行跟踪，并生成动作的跟踪ID，使用统一日志脚本记录动作的位置标识，当网站用户关闭掉当前网页时可以计算网站用户在当前网页上的停留时间，当网站用户没有关闭当前网页时记录当前网页的来源页标识。最后可以根据统一日志脚本采集到的行为数据生成网站用户的行为日志，并保存网站用户的行为日志。本发明实施例中统一日志脚本是预先嵌入到网页中的，因此可以灵活配置需要记录日志的模块与功能,能够记录用户的操作情况。通过在每个页面中嵌入的统一日志脚本，形成完整的日志数据，监控该网页的所有操作并自动生成相应的日志记录，提高了数据采集效率、并采集到完整的用户行为数据。

附图说明

图1为本发明实施例提供一种网站用户行为数据的采集方法的流程方框示意图；

图2为本发明实施例提供的日志生成机制流程图。

具体实施方式

本发明实施例提供了一种网站用户的行为数据采集方法，用于提高数据采集效率、并采集到完整的用户行为数据。

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部实施例。基于本发明中的实施例，本领域的技术人员所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换，这仅仅是描述本发明的实施例中对相同属性的对象在描述时所采用的区分方式。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，以便包含一系列单元的过程、方法、系统、产品或设备不必限于那些单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它单元。

以下分别进行详细说明。

本发明网站用户的行为数据采集方法的一个实施例，可应用于网站系统对用户的行为数据收集场景中，请参阅图1和图2所示，本发明提供的网站用户的行为数据采集方法，可以包括如下步骤：

101、检测网站用户使用客户端在当前网页上执行的动作。

其中，网站用户可以使用客户端访问网站，网站用户可以访问网站中的各个网页，以对某一个网页的行为数据收集为例，该网页也可以定义为“当前网页”，首先检测网站用户是否操作了当前网页，若网站用户操作了当前网页，网站用户可以执行相应的动作。

102、使用当前网页上预先嵌入的统一日志脚本对网站用户的动作进行跟踪，并生成动作的跟踪标识(identifier，ID)。

其中，网站中的每个网页都预先嵌入有统一日志脚本，该统一日志脚本是日志采集的脚本程序，统一日志脚本可以实现日志采集组件化，其中，组件化是指解耦复杂系统时将多个功能模块拆分、重组的过程，就是像功能做成可插拔的组件，主要是体现功能的弱耦合性。比如需要采集日志的网页，本发明实施例中可以引入统一日志脚本，如果不需要采集日志，就不引入这个脚本，这个脚本就像是一个组件，引入这个脚本后页面遵循这个日志脚本的使用规范即可。另外，动作的跟踪ID是动作的唯一标识，每次动作后，随机生成。

103、使用统一日志脚本记录动作的位置标识。

其中，动作的位置标识是以编码方式表示操作的位置标识，格式为：“系统.栏目.按钮”。

104、判断网站用户是否关闭当前网页。

在步骤104执行之后，根据不同的判断结果分别执行步骤105和步骤106。

105、若网站用户关闭掉当前网页，计算网站用户在当前网页上的停留时间。

在本发明的一些实施例中，步骤105计算网站用户在当前网页上的停留时间，包括：

使用统一日志脚本在网页上加载onLoad事件和onUnload事件；

通过onLoad事件记录网页的载入时间，以及通过onUnload事件记录网页的关闭时间；

通过关闭时间和载入时间之间的间隔时间确定当前网页的停留时间。

其中，在统一日志脚本中，为每个页面统一添加onLoad和onUnload事件，分别记录页面的载入和关闭时间，两者的间隔时间即为页面的停留时间。

106、若网站用户没有关闭当前网页，记录当前网页的来源页标识。

其中，当前页的来源页中需要记录完整的访问路径，如：页面a→页面b→页面c。

107、根据统一日志脚本采集到的行为数据生成网站用户的行为日志，并保存网站用户的行为日志，行为日志中包括：停留时间，或者来源页标识。

通过前述的举例说明可知，在网页上预先嵌入的统一日志脚本，可以使用该统一日志脚本对网站用户的动作进行跟踪，并生成动作的跟踪ID，使用统一日志脚本记录动作的位置标识，当网站用户关闭掉当前网页时可以计算网站用户在当前网页上的停留时间，当网站用户没有关闭当前网页时记录当前网页的来源页标识。最后可以根据统一日志脚本采集到的行为数据生成网站用户的行为日志，并保存网站用户的行为日志。本发明实施例中统一日志脚本是预先嵌入到网页中的，因此可以灵活配置需要记录日志的模块与功能,能够记录用户的操作情况。通过在每个页面中嵌入的统一日志脚本，形成完整的日志数据，监控该网页的所有操作并自动生成相应的日志记录，提高了数据采集效率、并采集到完整的用户行为数据。

在本发明的一些实施例中，步骤107根据统一日志脚本采集到的行为数据生成网站用户的行为日志，包括：

通过统一日志脚本采集网站用户在当前网页上执行动作的信息；

根据动作的信息在日志组成要素中填充相应的要素值；

在日志组成要素填充完成后，以JSON对象的形式进行封装，形成完整的行为日志。

本发明实施例可提供一种可灵活配置需要记录日志的模块与功能的方法,能够记录用户的操作情况，包括：访问轨迹、搜索记录、点击按钮等，能够自动计算每个页面的停留时间。在统一脚本中，为每个页面统一添加onLoad和onUnload事件，分别记录页面的载入和关闭时间，两者的间隔时间即为页面的停留时间。通过在每个页面中嵌入统一的日志采集脚本，统一日志脚本根据当前动作的相关信息，填充日志的所有组成要素，并以JSON对象的形式进行封装，形成完整的日志数据，监控该页面的所有操作并自动生成相应的日志记录。

进一步的，在本发明的一些实施例中，步骤101检测网站用户使用客户端在当前网页上执行的动作之前，本发明实施例提供的方法还包括：

对网站用户在网站的不同网页上的操作过程中涉及到的全部动作进行动作分类，得到多种类型的动作分别对应的动作类型编码；

对网站的不同网页上所配置的全部业务进行业务分类，得到多种类型的业务分别对应的业务类型编码；

设定日志组成要素，日志组成要素，包括：操作时间、客户端IP地址、浏览客户端、跟踪ID、访客标识、网站标识、用户标识、位置标识、按钮名称、域名、页面标题、页面统一资源定位符(Uniform Resoure Locator，URL)、来源页、状态码。

举例说明，如下表1所示：

在本发明实施例中，首先设定好动作分类，将用户的操作过程中所涉及的全部动作进行归类。先设定好动作分类、业务分类，再将这些分类数据分别赋值到各个页面的相应元素中，用户的操作其实就是操作这些元素，因此也就获取到用户的操作数据。

举例说明如下，设定动作类型“打开”，动作类型编码为“01”；设定动作类型“关闭”，动作类型编码为“02”；设定动作类型“下载”，动作类型编码为“03”；设定动作类型“查询”，动作类型编码为“04”；设定动作类型“提交”，动作类型编码为“05”。这个是根据需求可以扩展，常用的这5种

在本发明的一些实施例中，保存网站用户的行为日志之后，方法还包括：

根据网站用户的行为日志确定业务类型，并分析业务的办理时长。

其中，设定好业务分类，通过规则配置，集中管理同一个业务的不同操作。通过该配置，可以分析多条日志是否属于同一个业务，从而分析出该业务的整个办理时长。对于分析业务办理时长是否合理、改良业务流程。

需要说明的是，动作分类适用于所有页面，比如打开一个页面、关闭一个页面，这是所有的网页都有的动作，跟业务没关系；业务分类就是网站管理方法为业务系统的业务设定的分类，赋值到页面上业务对应的元素，比如可以人为设定行政审批系统是w01,审批系统下收件业务是001，新增按钮是01，那么在对应的页面上放上这些值，到时候用户访问操作这些页面的时候可以获取到这些值w01.001.01，结合动作类型分类就可以确定用户访问哪些页面，做了哪些业务操作，什么时候进入这个页面，什么时候离开这个页面。

举例说明如下，一个业务配置包括业务类型、位置标识、业务操作、操作顺序。比如收件业务，它的业务类型为收件，位置标识为权力运行系统->收件管理，业务操作为新增/保存/打印等，对应的操作顺序为1/2/3。

在本发明的一些实施例中，还可以设定日志组成要素。然后使用统一日志脚本文件程序获取要素值，形成日志数据。

例如，设定日志组成要素包括：“操作时间”，记录日志的产生时间；“客户端IP”，记录客户端的ip地址；“浏览客户端”，记录浏览器类型；“访客标识”，记录用户未登录时，以访客的身份进行标识；“跟踪id”：动作的唯一标识，每次动作后，随机生成；“网站/系统标识”：如：权力运行系统、网上办事大厅等，可提供统一的方法获取该信息；“用户标识”：如果是登录用户，记录其账号；如果是访客，其值为0；“位置标识”：以编码方式表示操作的位置标识，格式为：系统.栏目.按钮；“按钮名称”：如果有按钮的，该值为按钮的实际名称，否则为0；“域名”：document.domain；“页面标题”：document.title，当前页的标题；“页面URL”：当前页面的url，可使用document.URL来获取；“来源页”：Document.referer，当前页的来源页，需要记录完整的访问路径，如：页面a->页面b->页面c；“状态码”：HTTP状态码，包括200，401，403，500等常见状态码，以小时和天为统计周期，统计每个周期内的状态码次数。

其中，HTTP状态码中，200可以表示请求已成功，401表示当前请求需要用户验证，403表示服务器已经理解请求，但是拒绝执行它。500表示服务器遇到了一个未曾预料的状况，导致了它无法完成对请求的处理。

本发明提供一种能够实现组件化接入网站系统，可灵活配置需要记录日志的模块与功能的方法，对于用户在本网站的访问量(Page View，PV)、独立访客(Unique Visitor，UV)、跳出率、访问深度、停留时长等信息统一监控采集并自动生成相应的日志纪录，为了解用户真正的需求，改善产品,指导业务增长提供科学依据。

另外需说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。另外，本发明提供的装置实施例附图中，模块之间的连接关系表示它们之间具有通信连接，具体可以实现为一条或多条通信总线或信号线。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，所属领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件的方式来实现，当然也可以通过专用硬件包括专用集成电路、专用CPU、专用存储器、专用元器件等来实现。一般情况下，凡由计算机程序完成的功能都可以很容易地用相应的硬件来实现，而且，用来实现同一功能的具体硬件结构也可以是多种多样的，例如模拟电路、数字电路或专用电路等。但是，对本发明而言更多情况下软件程序实现是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在可读取的存储介质中，如计算机的软盘、U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

综上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照上述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对上述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (5)

1.一种网站用户的行为数据采集方法，其特征在于，包括：

检测网站用户使用客户端在当前网页上执行的动作；

使用所述当前网页上预先嵌入的统一日志脚本对所述网站用户的动作进行跟踪，并生成所述动作的跟踪标识ID；

使用所述统一日志脚本记录所述动作的位置标识；

判断所述网站用户是否关闭所述当前网页；

若所述网站用户关闭掉所述当前网页，计算所述网站用户在所述当前网页上的停留时间；

若所述网站用户没有关闭所述当前网页，记录所述当前网页的来源页标识；

根据所述统一日志脚本采集到的行为数据生成所述网站用户的行为日志，并保存所述网站用户的行为日志，所述行为日志中包括：所述停留时间，或者所述来源页标识。

2.根据权利要求1所述的方法，其特征在于，所述计算所述网站用户在所述当前网页上的停留时间，包括：

使用所述统一日志脚本在所述网页上加载onLoad事件和onUnload事件；

通过所述onLoad事件记录所述网页的载入时间，以及通过所述onUnload事件记录所述网页的关闭时间；

通过所述关闭时间和所述载入时间之间的间隔时间确定所述当前网页的停留时间。

3.根据权利要求1所述的方法，其特征在于，所述根据所述统一日志脚本采集到的行为数据生成所述网站用户的行为日志，包括：

通过所述统一日志脚本采集所述网站用户在所述当前网页上执行所述动作的信息；

根据所述动作的信息在日志组成要素中填充相应的要素值；

在所述日志组成要素填充完成后，以JSON对象的形式进行封装，形成完整的行为日志。

4.根据权利要求3所述的方法，其特征在于，所述检测网站用户使用客户端在当前网页上执行的动作之前，所述方法还包括：

对所述网站用户在网站的不同网页上的操作过程中涉及到的全部动作进行动作分类，得到多种类型的动作分别对应的动作类型编码；

对网站的不同网页上所配置的全部业务进行业务分类，得到多种类型的业务分别对应的业务类型编码；

设定日志组成要素，所述日志组成要素，包括：操作时间、客户端IP地址、浏览客户端、跟踪ID、访客标识、网站标识、用户标识、位置标识、按钮名称、域名、页面标题、页面统一资源定位符URL、来源页、状态码。

5.根据权利要求4所述的方法，其特征在于，所述保存所述网站用户的行为日志之后，所述方法还包括：

根据所述网站用户的行为日志确定业务类型，并分析业务的办理时长。