CN111475756A - 一种信息无痕曝光采集方法及装置 - Google Patents

Abstract

本发明公开了一种信息无痕曝光采集方法及装置，该方法包括如下步骤：S1：从服务端获取无痕曝光配置信息并写入内存中，根据无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；S2：搜索页面上所有已开启无痕曝光的区域，捕获已开启无痕曝光的区域的曝光元素onload事件，根据曝光元素获取曝光信息；S3：将曝光信息模拟堆栈方式写入内存；S4：将写入内存的曝光信息根据曝光规则进行发送上报。本发明解决了目前曝光埋点过程中对自身业务的侵入性，几乎可做到业务无埋点的情况下进行页面信息曝光的采集，从而大大降低了信息曝光采集的门槛；并规范了曝光信息上报的过程，解决了高并发导致的HTTP请求阻塞，web端页面卡死、崩溃等问题。

Description

一种信息无痕曝光采集方法及装置

技术领域

本发明涉及信息采集技术领域，特别涉及一种信息无痕曝光采集方法及装置。

背景技术

目前关于web端信息曝光多采用的是通过JS手动埋点的方式，即当需要曝光的节点或者信息达到业务规定的相关场景后，调用预先设定义好的方法(此方法一般为JS中提供的全局方法)完成实时上报。这样的做法存在以下问题：

1、信息曝光的相关操作侵入到页面的业务逻辑中，给正常的业务逻辑的开发带来诸多不便；

2、由于曝光信息的上报需要发送HTTP请求(通常情况下预先设定义好的方法的调用即会产生一次HTTP请求)，在实践中我们发现预先设定义好的方法被调用的场景及次数很混乱，这导致在某一个具体的时间点HTTP请求暴增，超过浏览器能够承受的并发，从而导致HTTP请求阻塞、页面崩溃、闪退等严重的问题。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种信息无痕曝光采集方法及装置，以克服现有技术中存在的曝光埋点侵入性高，以及高频的HTTP请求等问题。

为解决上述一个或多个技术问题，本发明采用的技术方案是：

一方面，提供了一种信息无痕曝光采集方法，所述方法包括如下步骤：

S1：从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；

S2：搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息；

S3：将所述曝光信息模拟堆栈方式写入内存；

S4：将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

进一步的，所述搜索页面上所有已开启无痕曝光的区域后还包括：

判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。

进一步的，所述步骤S3具体包括：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

进一步的，所述步骤S4具体包括：

S4.1：查询所述内存中是否有曝光信息，若没有，则结束流程，否则，执行步骤S4.2；

S4.2：查询定时器是否开启，若是，则直接执行步骤S4.3，否则，开启定时器后执行步骤S4.3；

S4.3：将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除；

S4.4：查询所述内存中是否有曝光信息，若有，则返回步骤S4.3，否则关闭所述定时器后结束流程。

进一步的，所述方法还包括：

配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

另一方面，提供了一种信息无痕曝光采集装置，所述装置包括：

设置模块，用于从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；

搜索模块，用于搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息；

存储模块，用于将所述曝光信息模拟堆栈方式写入内存；

上报模块，用于将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

进一步的，所述搜索模块包括：

判断单元，用于判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。

进一步的，所述存储模块具体用于：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

进一步的，所述上报模块包括：

第一查询单元，用于查询所述内存中是否有曝光信息；

第二查询单元，用于查询定时器是否开启；

信息上报单元，用于将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除。

进一步的，所述装置还包括：

配置模块，用于配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

本发明实施例提供的技术方案带来的有益效果是：

1、本发明实施例提供的信息无痕曝光采集方法及装置，通过捕获开启自动曝光区域内的元素onload事件，业务方只需要在对应的后台管理页面中，配置是否开启曝光的开关，以及曝光频率即可，无需在手动调用对应采集脚本的曝光方法，从而去除了对自身业务的入侵，几乎可做到业务无埋点的情况下进行页面信息曝光的采集，从而大大降低了信息曝光采集的门槛；

2、本发明实施例提供的信息无痕曝光采集方法及装置，通过模拟堆栈存储方式将HTTP请求先进先出有序发送，解决了高并发导致的HTTP请求阻塞，web端页面卡死、崩溃等问题。而且可以实时的对曝光信息上报模块的规则进行配置，以应对不同业务场景。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据一示例性实施例示出的信息无痕曝光采集方法的流程图；

图2是根据一示例性实施例示出的信息无痕曝光采集方法的另一流程图；

图3是根据一示例性实施例示出的信息无痕曝光采集装置的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供的信息无痕曝光采集方法及装置，针对目前WEB信息曝光的技术中存在的曝光埋点侵入性高以及高频的HTTP请求等问题，做了规避和统一管控。首先，本发明实施例提供的信息无痕曝光采集方法及装置中，传统曝光采集技术实现方式中业务代码和曝光埋点的代码耦合在一起的情况将不存在。然后通过模拟堆栈存储方式将HTTP请求先进先出有序发送，很好的解决了关于传统曝光技术出现的HTTP请求阻塞等问题。而且本发明实施例中加入了对曝光信息上报这块的流控，以应对大促及非大促等各种业务场景的需要。

图1是根据一示例性实施例示出的信息无痕曝光采集方法的流程图，参照图1所示，该方法包括如下步骤：

S1：从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则。

具体的，页面加载开始的第一时间从服务端获取无痕曝光配置信息并将其写入内存中。然后根据无痕曝光配置信息搜索开启无痕曝光的区域的内容，并且根据无痕曝光配置信息设置相关曝光规则Rn。其中，相关曝光规则至少包括流控规则、采集规则等。这里需要说明的是，在本发明实施例中，曝光规则支持实时配置，即用户可根据实际业务场景对曝光规则进行实时配置。

S2：搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息。

具体的，当页面加载完成以后，搜索页面上已开启无痕曝光的区域，向下捕获曝光元素的onload事件(onload事件会在特定场景被触发，如页面或图像加载完成后立即被触发)，然后根据曝光元素获取曝光信息。当监测到曝光元素对应的onload事件被触发后，进而触发对应的采集方法，根据采集规则采集相应的曝光信息。即根据捕获到的曝光元素，搜索其自身携带的各种属性，及在当前页面DOM节点中的位置信息，并向上冒泡查询其父辈节点的上符合预先设定的规则信息，记录和上报。

作为一种较优的实施方式，本发明实施例中，还需要设置onload事件的回调方法，在该回调方法中根据上述相关曝光规则设置对应曝光方案。

S3：将所述曝光信息模拟堆栈方式写入内存。

作为一种较优的实施方式，本发明实施例中，将曝光信息模拟堆栈方式写入内存具体包括：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

具体的，在监测到曝光元素对应的onload事件触发后，触发执行回调，搜索当前触发onload事件的曝光元素的信息，并向上冒泡搜索对应曝光元素携带的曝光信息，然后将曝光信息写入内存中存储。

S4：将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

具体的，为了解决传统曝光技术中出现的HTTP请求阻塞页面崩溃、闪退等问题，本发明实施例中，通过模拟堆栈存储方式将HTTP请求先进先出有序发出，并且在曝光信息上报这块加入了流控规则，将曝光信息分批定时定量的发出。

作为一种较优的实施方式，本发明实施例中，所述搜索页面上所有已开启无痕曝光的区域后还包括：

判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。这里需要说明的是，本发明实施例中，判断是否开启页面的无痕曝光的依据可以为：遍历页面文档对象模型(DOM)节点，寻找存在无痕曝光属性(SAP-MODID)的区域，并认为开启无痕曝光的区域。这个操作是开启无痕曝光前台或者说是主开关，如果查询不到SAP-MODID将没有后续的曝光操作。

具体的，用户可以根据实际需求判断是否开启页面的无痕曝光。

作为一种较优的实施方式，本发明实施例中，所述步骤S4具体包括：

S4.1：查询所述内存中是否有曝光信息，若没有，则结束流程，否则，执行步骤S4.2。

具体的，本发明实施例中，曝光数据(即曝光信息)缓存记录采用分批的方式发送上报，且曝光信息上报前，需先查询内存中是否有数据(即曝光信息)。

S4.2：查询定时器是否开启，若是，则直接执行步骤S4.3，否则，开启定时器后执行步骤S4.3。

具体的，定时器的时间间隔可以根据用户的实际需求进行设置，例如设置定时器的时间间隔为100ms。

S4.3：将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除。

具体的，在本发明实施例中，设置的曝光规则中包括流控规则，曝光信息根据流控规则拼接上报。例如，每100ms将之前内存中的曝光信息发送出去，最多发10条HTTP请求。曝光信息发送出去后将已发送的曝光信息从内存中删除。

S4.4：查询所述内存中是否有曝光信息，若有，则返回步骤S4.3，否则关闭所述定时器后结束流程。

具体的，每次曝光信息发送出去后，再次查询内存中是否有曝光信息，若有，则返回步骤S4.3，继续将曝光信息根据流控规则拼接上报，否则，先关闭定时器，然后结束流程。

作为一种较优的实施方式，本发明实施例中，所述方法还包括：

配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

具体的，本发明实施例中，可在后台管理页面中配置对应页面的无痕曝光开关，通过该无痕曝光开关可根据用户需求实时开启或者关闭无痕曝光采集。

图2是根据一示例性实施例示出的信息无痕曝光采集方法的另一流程图，以下结合图2示例性举例说明本发明的具体实施方式：

例如，假设某页面A中三块区域需要开启无痕曝光，分别是：‘人气好货’、‘生活部落’、‘排行榜’且对应自动曝光的ID标识为“99348015073”，即ID1为“99348015073”。当页面加载完成以后，采集方法会搜索到ID1，并捕获ID1区域下的所有支持onload事件的DOM元素(即曝光元素)，假设为DOMS1。采集方法继续在页面中搜索自动曝光规则R1。设置DOMS1的onload事件的回调方法，在此回调方法中根据曝光规则R1设置对应的曝光方案。

当用户浏览到页面中的ID1区域时，假设ID1区域中需要曝光的产品卡包括：P1、P2、P3、P4……产品卡中在当前页面中被加载(即被用户浏览)会自动触发对应的onload事件，进而触发对应的采集方法，曝光日记采集开始。然后根据不同的采集规则采集曝光信息。采集的P1的曝光信息可包括：P1父节点A，A.herf，A.title…编码以后为_infoA。P1的_infoA日志上报格式G1如下：//WWW.XXX.XXX/salog.gif？_infoA。然后根据流控规则按G1上报P1的曝光信息，例如，每100ms发送10条。

当页面上有很多类似P1产品卡Pn时，可实时配置流控规则上报曝光信息。例如，设置每1000ms发送10条等。

图3是根据一示例性实施例示出的信息无痕曝光采集装置的结构示意图，参照图3所示，该装置包括：

设置模块，用于从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；

搜索模块，用于搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息；

存储模块，用于将所述曝光信息模拟堆栈方式写入内存；

上报模块，用于将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

具体的，为了解决传统曝光技术中出现的HTTP请求阻塞页面崩溃、闪退等问题，本发明实施例中，上报模块通过模拟堆栈存储方式将HTTP请求先进先出有序发出，并且在曝光信息上报这块加入了流控规则，将曝光信息分批定时定量的发出。

作为一种较优的实施方式，本发明实施例中，所述搜索模块包括：

判断单元，用于判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。

作为一种较优的实施方式，本发明实施例中，所述存储模块具体用于：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

作为一种较优的实施方式，本发明实施例中，所述上报模块包括：

第一查询单元，用于查询所述内存中是否有曝光信息；

第二查询单元，用于查询定时器是否开启；

信息上报单元，用于将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除。

作为一种较优的实施方式，本发明实施例中，所述装置还包括：

配置模块，用于配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

综上所述，本发明实施例提供的技术方案带来的有益效果是：

1、本发明实施例提供的信息无痕曝光采集方法及装置，通过捕获开启自动曝光区域内的元素onload事件，业务方只需要在对应的后台管理页面中，配置是否开启曝光的开关，以及曝光频率即可，无需在手动调用对应采集脚本的曝光方法，从而去除了对自身业务的入侵，几乎可做到业务无埋点的情况下进行页面信息曝光的采集，从而大大降低了信息曝光采集的门槛；

2、本发明实施例提供的信息无痕曝光采集方法及装置，通过模拟堆栈存储方式将HTTP请求先进先出有序发送，解决了高并发导致的HTTP请求阻塞，web端页面卡死、崩溃等问题。而且可以实时的对曝光信息上报模块的规则进行配置，以应对不同业务场景。

需要说明的是：上述实施例提供的信息无痕曝光采集装置在触发无痕曝光采集业务时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的信息无痕曝光采集装置与信息无痕曝光采集方法实施例属于同一构思，即该方法是基于该信息无痕曝光采集装置的，其具体实现过程详见方法实施例，这里不再赘述。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种信息无痕曝光采集方法，其特征在于，所述方法包括如下步骤：

S1：从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；

S2：搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息；

S3：将所述曝光信息模拟堆栈方式写入内存；

S4：将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

2.根据权利要求1所述的信息无痕曝光采集方法，其特征在于，所述搜索页面上所有已开启无痕曝光的区域后还包括：

判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。

3.根据权利要求1或2所述的信息无痕曝光采集方法，其特征在于，所述步骤S3具体包括：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

4.根据权利要求1或2所述的信息无痕曝光采集方法，其特征在于，所述步骤S4具体包括：

S4.1：查询所述内存中是否有曝光信息，若没有，则结束流程，否则，执行步骤S4.2；

S4.2：查询定时器是否开启，若是，则直接执行步骤S4.3，否则，开启定时器后执行步骤S4.3；

S4.3：将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除；

S4.4：查询所述内存中是否有曝光信息，若有，则返回步骤S4.3，否则关闭所述定时器后结束流程。

5.根据权利要求1或2所述的信息无痕曝光采集方法，其特征在于，所述方法还包括：

配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

6.一种信息无痕曝光采集装置，其特征在于，所述装置包括：

设置模块，用于从服务端获取无痕曝光配置信息并写入内存中，根据所述无痕曝光配置信息搜索开启无痕曝光的区域的内容并设置相关曝光规则；

搜索模块，用于搜索页面上所有已开启无痕曝光的区域，捕获所述已开启无痕曝光的区域的曝光元素onload事件，根据所述曝光元素获取曝光信息；

存储模块，用于将所述曝光信息模拟堆栈方式写入内存；

上报模块，用于将所述写入内存的曝光信息根据所述曝光规则进行发送上报。

7.根据权利要求6所述的信息无痕曝光采集装置，其特征在于，所述搜索模块包括：

判断单元，用于判断是否开启所述页面的无痕曝光，若开启，则捕获所述已开启无痕曝光的区域的曝光元素onload事件，并根据所述曝光元素获取曝光信息，否则不做处理。

8.根据权利要求6或7所述的信息无痕曝光采集装置，其特征在于，所述存储模块具体用于：

搜索所述onload事件的曝光元素的信息，并向上冒泡搜索所述曝光元素携带的曝光信息，将所述曝光信息写入内存。

9.根据权利要求6或7所述的信息无痕曝光采集装置，其特征在于，所述上报模块包括：

第一查询单元，用于查询所述内存中是否有曝光信息；

第二查询单元，用于查询定时器是否开启；

信息上报单元，用于将所述曝光信息根据所述曝光规则中的流控规则拼接上报，并将已发送的曝光信息从所述内存中删除。

10.根据权利要求6或7所述的信息无痕曝光采集装置，其特征在于，所述装置还包括：

配置模块，用于配置对应页面的无痕曝光开关，实时开启或者关闭无痕曝光采集。

Images