CN108255879B - 网页浏览流量作弊的检测方法及装置 - Google Patents

网页浏览流量作弊的检测方法及装置 Download PDF

Info

Publication number
CN108255879B
CN108255879B CN201611250145.2A CN201611250145A CN108255879B CN 108255879 B CN108255879 B CN 108255879B CN 201611250145 A CN201611250145 A CN 201611250145A CN 108255879 B CN108255879 B CN 108255879B
Authority
CN
China
Prior art keywords
logs
log
continuous
webpage browsing
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611250145.2A
Other languages
English (en)
Other versions
CN108255879A (zh
Inventor
陈熹荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201611250145.2A priority Critical patent/CN108255879B/zh
Publication of CN108255879A publication Critical patent/CN108255879A/zh
Application granted granted Critical
Publication of CN108255879B publication Critical patent/CN108255879B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/954—Navigation, e.g. using categorised browsing

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供的一种网页浏览流量作弊的检测方法及装置，可以获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；确定所述日志列表中的连续日志，根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。由于本发明可以根据连续日志的数量及所述连续日志的生成时间来确定网页浏览流量是否作弊，因此本发明无需对网页浏览日志进行解析，方便快捷，也降低了系统的运行负担。

Description

网页浏览流量作弊的检测方法及装置
技术领域
本发明涉及流量作弊检测技术领域，尤其是涉及一种网页浏览流量作弊的检测方法及装置。
背景技术
网页浏览流量是衡量一个网页的重要指标，但是互联网上存在不少web机器人、爬虫等，它们会恶意的访问网页来提升网页浏览流量。这些web机器人、爬虫访问网页带来的作弊的网页浏览流量往往数目巨大，导致后续对网页浏览流量进行分析的准确性大大降低。
为了检测出作弊的网页浏览流量，目前业内普遍使用Google Analysis进行检测。Google Analysis通过对网页浏览日志进行解析，通过解析结果得出网页浏览过程中的跳出率、平均访问时间、平均页面访问深度等参数来判断网页浏览流量是否为作弊流量。
但跳出率、平均访问时间、页面访问深度需要对网页浏览日志进行解析才能得到，而需要解析的网页浏览日志数量较多，因此现有技术需要花费较长的时间才能确定网页浏览流量是否为作弊浏览，同时，对大量的网页浏览日志进行解析也给系统带来了很大的运行负担。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的网页浏览流量作弊的检测方法及装置，方案如下：
一种网页浏览流量作弊的检测方法，包括：
获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
可选的，所述方法还包括：
确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
可选的，所述方法还包括：
判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则删除该用户的预设比例的具有作弊标识的网页浏览日志。
可选的，所述根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度，包括：
确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
可选的，根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊，包括：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
一种网页浏览流量作弊的检测装置，包括：列表生成单元、日志确定单元、速度确定单元和作弊确定单元，
所述列表生成单元，用于获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
所述日志确定单元，用于确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
所述速度确定单元，用于根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
所述作弊确定单元，用于根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
可选的，所述装置还包括：标识添加单元，用于所述作弊确定单元确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
可选的，所述装置还包括：日志删除单元，用于判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则删除该用户的预设比例的具有作弊标识的网页浏览日志。
可选的，所述速度确定单元，包括：参数确定子单元和计算子单元，
所述参数确定子单元，用于确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
所述计算子单元，用于根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
可选的，所述作弊确定单元，具体用于：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
借由上述技术方案，本发明实施例提供的一种网页浏览流量作弊的检测方法及装置，可以获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；确定所述日志列表中的连续日志，根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。由于本发明可以根据连续日志的数量及所述连续日志的生成时间来确定网页浏览流量是否作弊，因此本发明无需对网页浏览日志进行解析，方便快捷，也降低了系统的运行负担。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明实施例提供的一种网页浏览流量作弊的检测方法的流程图；
图2示出了本发明实施例提供的另一种网页浏览流量作弊的检测方法的流程图；
图3示出了本发明实施例提供的另一种网页浏览流量作弊的检测方法的流程图；
图4示出了本发明实施例提供的一种网页浏览流量作弊的检测装置的结构示意图；
图5示出了本发明实施例提供的另一种网页浏览流量作弊的检测装置的结构示意图；
图6示出了本发明实施例提供的另一种网页浏览流量作弊的检测装置的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
如图1所示，本发明实施例提供的一种网页浏览流量作弊的检测方法，可以包括：
S100、获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
其中，用户的日志有多种类型，步骤S100在具体执行过程中可以对用户的日志进行类型筛选，将日志类型为PageView的日志确定为网页浏览日志，并获得用户的网页浏览日志。
可以理解的是，网页浏览日志的生成时间可以直接在日志的文件属性中读取到，而不需要对日志进行解析，十分方便快捷，给系统带来的运行负的较小。
S200、确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
发明人研究发现，web机器人、爬虫常在很短的时间内连续且大量的访问网页，因而其所产生的网页浏览日志生成时间的时间间隔较小。
在实际应用中，可以按照日志列表中的先后顺序依次读取各日志的生成时间从而依次判断相邻两个网页浏览日志生成时间的时间间隔。
其中，上述预设间隔可以为三十分钟。
同时，上述连续日志的确定也可以提高后续计算的网页浏览日志的生成速度的准确性，这是由于：有些时候，web机器人、爬虫在对网页访问一段时间后会停止一段时间，然后继续访问。此过程虽然产生了大量网页浏览日志，但中间存在较长的时间间隔，如将整个过程作为访问时间，则计算得到的网页浏览日志的生成速度将较小，可能会将其误判为非作弊情况产生的网页浏览日志。本发明通过连续日志的确定就可以排除上述间隔。
S300、根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
在实际应用中，步骤S300之前还可以包括：判断所述连续日志的数量是否不低于预设数量，如果是，再执行步骤S300。
通过此判断步骤的增加，就可以将数量较小的连续日志排除而不对其进行处理。这是由于，web机器人、爬虫常在很短的时间内产生大量的网页浏览日志，如数量较少，则可以排除是作弊的网页浏览日志。
其中，步骤S300可以具体包括：
确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
其中，所述根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度，可以具体包括：
根据公式
S＝n/(Tn-T1+Δt)
计算得到该用户的网页浏览日志的生成速度，其中，S为该用户的网页浏览日志的生成速度；Δt为预设补偿时间，其中，Δt可以为1秒。
S400、根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
步骤S400的具体执行方式有多种，如当网页浏览日志的生成速度大于预设速度阈值时，则确定该用户的所述连续日志对应的网页浏览流量是否作弊。
当然，步骤S400还可以同时根据其他参量确定该用户的所述连续日志对应的网页浏览流量是否作弊，如：根据网页浏览日志的生成速度及所述Tn与T1之间的时间间隔确定该用户的所述连续日志对应的网页浏览流量是否作弊。具体的，步骤S400可以包括：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
下面举例说明：
若所述网页浏览日志的生成速度(单位为“个/分钟”)所在的速度区间为[30，∞)且确定的时间区间(单位为“分钟”)为[2，∞)，则确定该用户的所述连续日志对应的网页浏览流量作弊。
若所述网页浏览日志的生成速度(单位为“个/分钟”)所在的速度区间为[10，30)且确定的时间区间(单位为“分钟”)为[5，∞)，则确定该用户的所述连续日志对应的网页浏览流量作弊。
若所述网页浏览日志的生成速度(单位为“个/分钟”)所在的速度区间为[5，10)且确定的时间区间(单位为“分钟”)为[10，∞)，则确定该用户的所述连续日志对应的网页浏览流量作弊。
当然，在本发明其他实施例中，还可以同时根据网页浏览日志的生成时间在一天中的分布情况确定该用户的所述连续日志对应的网页浏览流量是否作弊，如：
若所述网页浏览日志的生成速度(单位为“个/分钟”)所在的速度区间为[2，5)且确定的时间区间(单位为“分钟”)为[60，∞)且所述连续日志的生成时间在凌晨1点-5点，则确定该用户的所述连续日志对应的网页浏览流量作弊。
本发明实施例提供的一种网页浏览流量作弊的检测方法，可以获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；确定所述日志列表中的连续日志，根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。由于本发明可以根据连续日志的数量及所述连续日志的生成时间来确定网页浏览流量是否作弊，因此本发明无需对网页浏览日志进行解析，方便快捷，也降低了系统的运行负担。
如图2所示，本发明实施例提供的另一种网页浏览流量作弊的检测方法，还可以包括：
S500、确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
在图2所示实施例基础上，如图3所示，本发明实施例提供的另一种网页浏览流量作弊的检测方法，还可以包括：
S600、判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则执行步骤S700；
S700、删除该用户的预设比例的具有作弊标识的网页浏览日志。
由于作弊后产生的网页浏览日志较多，因此占用了大量的存储空间，这种情况下只需要保留一定量的具有作弊标识的网页浏览日志即可。
当然，步骤S700也可以多删除一些具有作弊标识的网页浏览日志，从而无需频繁进行日志删除操作，例如：当具有作弊标识的网页浏览日志的数量是否大于1000个时，删除50％的具有作弊标识的网页浏览日志。
与上述方法实施例相对应，本发明还提供了一种网页浏览流量作弊的检测装置。
如图4所示，本发明实施例提供的一种网页浏览流量作弊的检测装置，可以包括：列表生成单元100、日志确定单元200、速度确定单元300和作弊确定单元400，
所述列表生成单元100，用于获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
其中，用户的日志有多种类型，列表生成单元100可以对用户的日志进行类型筛选，将日志类型为PageView的日志确定为网页浏览日志，并获得用户的网页浏览日志。
可以理解的是，网页浏览日志的生成时间可以直接在日志的文件属性中读取到，而不需要对日志进行解析，十分方便快捷，给系统带来的运行负的较小。
所述日志确定单元200，用于确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
发明人研究发现，web机器人、爬虫常在很短的时间内连续且大量的访问网页，因而其所产生的网页浏览日志生成时间的时间间隔较小。
在实际应用中，可以按照日志列表中的先后顺序依次读取各日志的生成时间从而依次判断相邻两个网页浏览日志生成时间的时间间隔。
其中，上述预设间隔可以为三十分钟。
同时，上述连续日志的确定也可以提高后续计算的网页浏览日志的生成速度的准确性，这是由于：有些时候，web机器人、爬虫在对网页访问一段时间后会停止一段时间，然后继续访问。此过程虽然产生了大量网页浏览日志，但中间存在较长的时间间隔，如将整个过程作为访问时间，则计算得到的网页浏览日志的生成速度将较小，可能会将其误判为非作弊情况产生的网页浏览日志。本发明通过连续日志的确定就可以排除上述间隔。
所述速度确定单元300，用于根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
在实际应用中，速度确定单元300可以首先判断所述连续日志的数量是否不低于预设数量，如果是，再根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度。
通过此判断的增加，就可以将数量较小的连续日志排除而不对其进行处理。这是由于，web机器人、爬虫常在很短的时间内产生大量的网页浏览日志，如数量较少，则可以排除是作弊的网页浏览日志。
其中，所述速度确定单元300，可以包括：参数确定子单元和计算子单元，
所述参数确定子单元，用于确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
所述计算子单元，用于根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
其中，所述计算子单元，可以具体用于：
根据公式
S＝n/(Tn-T1+Δt)
计算得到该用户的网页浏览日志的生成速度，其中，S为该用户的网页浏览日志的生成速度；Δt为预设补偿时间，其中，Δt可以为1秒。
所述作弊确定单元400，用于根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
作弊确定单元400确定网页浏览流量是否作弊的具体执行方式有多种，如当网页浏览日志的生成速度大于预设速度阈值时，则确定该用户的所述连续日志对应的网页浏览流量是否作弊。
当然，作弊确定单元400还可以同时根据其他参量确定该用户的所述连续日志对应的网页浏览流量是否作弊，如：根据网页浏览日志的生成速度及所述Tn与T1之间的时间间隔确定该用户的所述连续日志对应的网页浏览流量是否作弊。具体的，作弊确定单元400可以具体用于：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
当然，在本发明其他实施例中，还可以同时根据网页浏览日志的生成时间在一天中的分布情况确定该用户的所述连续日志对应的网页浏览流量是否作弊。
本发明实施例提供的一种网页浏览流量作弊的检测装置，可以获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；确定所述日志列表中的连续日志，根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。由于本发明可以根据连续日志的数量及所述连续日志的生成时间来确定网页浏览流量是否作弊，因此本发明无需对网页浏览日志进行解析，方便快捷，也降低了系统的运行负担。
如图5所示，本发明实施例提供的另一种网页浏览流量作弊的检测装置，还可以包括：
标识添加单元500，用于所述作弊确定单元400确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
在图5所示实施例基础上，如图6所示，本发明实施例提供的另一种网页浏览流量作弊的检测装置，还可以包括：
日志删除单元600，用于判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则删除该用户的预设比例的具有作弊标识的网页浏览日志。
由于作弊后产生的网页浏览日志较多，因此占用了大量的存储空间，这种情况下只需要保留一定量的具有作弊标识的网页浏览日志即可。
当然，日志删除单元600也可以多删除一些具有作弊标识的网页浏览日志，从而无需频繁进行日志删除操作。
在图6所示实施例基础上，所述作弊确定单元400，可以具体用于：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
所述网页浏览流量作弊的检测装置包括处理器和存储器，上述列表生成单元、日志确定单元、速度确定单元和作弊确定单元等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来确定网页浏览流量是否作弊。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
本发明实施例提供的一种网页浏览流量作弊的检测装置，可以获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；确定所述日志列表中的连续日志，根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。由于本发明可以根据连续日志的数量及所述连续日志的生成时间来确定网页浏览流量是否作弊，因此本发明无需对网页浏览日志进行解析，方便快捷，也降低了系统的运行负担。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序代码：
获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种网页浏览流量作弊的检测方法，其特征在于，包括：
获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则删除该用户的预设比例的具有作弊标识的网页浏览日志。
4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度，包括：
确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
5.根据权利要求4所述的方法，其特征在于，根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊，包括：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
6.一种网页浏览流量作弊的检测装置，其特征在于，包括：列表生成单元、日志确定单元、速度确定单元和作弊确定单元，
所述列表生成单元，用于获得用户的网页浏览日志，按照网页浏览日志生成时间的早晚顺序对获得的各网页浏览日志进行排列，生成日志列表；
所述日志确定单元，用于确定所述日志列表中的连续日志，所述连续日志中相邻的两个网页浏览日志生成时间的时间间隔不大于预设间隔；
所述速度确定单元，用于根据所述连续日志的数量及所述连续日志的生成时间，确定该用户的网页浏览日志的生成速度；
所述作弊确定单元，用于根据所述网页浏览日志的生成速度确定该用户的所述连续日志对应的网页浏览流量是否作弊。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：标识添加单元，用于所述作弊确定单元确定该用户的所述连续日志对应的网页浏览流量作弊时，为所述连续日志添加作弊标识。
8.根据权利要求7所述的装置，其特征在于，所述装置还包括：日志删除单元，用于判断该用户的具有作弊标识的网页浏览日志的数量是否大于预设数量，如果是，则删除该用户的预设比例的具有作弊标识的网页浏览日志。
9.根据权利要求6至8中任一项所述的装置，其特征在于，所述速度确定单元，包括：参数确定子单元和计算子单元，
所述参数确定子单元，用于确定所述连续日志中网页浏览日志的最早生成时间T1、所述连续日志中网页浏览日志的最晚生成时间Tn及所述连续日志的数量n；
所述计算子单元，用于根据所述T1、所述Tn和所述n计算得到该用户的网页浏览日志的生成速度。
10.根据权利要求9所述的装置，其特征在于，所述作弊确定单元，具体用于：
确定所述网页浏览日志的生成速度所在的速度区间，确定所述Tn与T1之间的时间间隔所在的时间区间，根据确定的所述速度区间及确定的所述时间区间确定该用户的所述连续日志对应的网页浏览流量是否作弊。
CN201611250145.2A 2016-12-29 2016-12-29 网页浏览流量作弊的检测方法及装置 Active CN108255879B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611250145.2A CN108255879B (zh) 2016-12-29 2016-12-29 网页浏览流量作弊的检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611250145.2A CN108255879B (zh) 2016-12-29 2016-12-29 网页浏览流量作弊的检测方法及装置

Publications (2)

Publication Number Publication Date
CN108255879A CN108255879A (zh) 2018-07-06
CN108255879B true CN108255879B (zh) 2021-10-08

Family

ID=62721982

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611250145.2A Active CN108255879B (zh) 2016-12-29 2016-12-29 网页浏览流量作弊的检测方法及装置

Country Status (1)

Country Link
CN (1) CN108255879B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192227A (zh) * 2006-11-30 2008-06-04 阿里巴巴公司 一种基于分布式计算网络的日志文件分析方法和系统
CN102136989A (zh) * 2010-01-26 2011-07-27 华为技术有限公司 报文传输的方法、系统和设备
CN102279786A (zh) * 2011-08-25 2011-12-14 百度在线网络技术（北京）有限公司 一种监测应用程序有效访问量的方法及装置
CN102681904A (zh) * 2011-03-16 2012-09-19 中国电信股份有限公司 数据同步调度方法和装置
CN103178982A (zh) * 2011-12-23 2013-06-26 阿里巴巴集团控股有限公司 日志分析方法和装置
TW201344598A (zh) * 2012-04-23 2013-11-01 Hon Hai Prec Ind Co Ltd 系統事件日誌管理系統及系統事件日誌管理方法
CN103593415A (zh) * 2013-10-29 2014-02-19 北京国双科技有限公司 网页访问量作弊的检测方法和装置
CN103714057A (zh) * 2012-09-28 2014-04-09 北京亿赞普网络技术有限公司 一种在线网页信息的实时监测方法和装置
CN105550184A (zh) * 2014-10-31 2016-05-04 阿里巴巴集团控股有限公司 一种信息获取方法及装置
CN105760252A (zh) * 2014-12-19 2016-07-13 中兴通讯股份有限公司 实现事务日志镜像备份的方法及装置
CN106097000A (zh) * 2016-06-02 2016-11-09 腾讯科技（深圳）有限公司 一种信息处理方法及服务器

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977284B2 (en) * 2001-10-04 2015-03-10 Traxcell Technologies, LLC Machine for providing a dynamic data base of geographic location information for a plurality of wireless devices and process for making same
JP5025550B2 (ja) * 2008-04-01 2012-09-12 株式会社東芝 音声処理装置、音声処理方法及びプログラム
JP6252309B2 (ja) * 2014-03-31 2017-12-27 富士通株式会社 監視漏れ特定処理プログラム，監視漏れ特定処理方法及び監視漏れ特定処理装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192227A (zh) * 2006-11-30 2008-06-04 阿里巴巴公司 一种基于分布式计算网络的日志文件分析方法和系统
CN102136989A (zh) * 2010-01-26 2011-07-27 华为技术有限公司 报文传输的方法、系统和设备
CN102681904A (zh) * 2011-03-16 2012-09-19 中国电信股份有限公司 数据同步调度方法和装置
CN102279786A (zh) * 2011-08-25 2011-12-14 百度在线网络技术（北京）有限公司 一种监测应用程序有效访问量的方法及装置
CN103178982A (zh) * 2011-12-23 2013-06-26 阿里巴巴集团控股有限公司 日志分析方法和装置
TW201344598A (zh) * 2012-04-23 2013-11-01 Hon Hai Prec Ind Co Ltd 系統事件日誌管理系統及系統事件日誌管理方法
CN103714057A (zh) * 2012-09-28 2014-04-09 北京亿赞普网络技术有限公司 一种在线网页信息的实时监测方法和装置
CN103593415A (zh) * 2013-10-29 2014-02-19 北京国双科技有限公司 网页访问量作弊的检测方法和装置
CN105550184A (zh) * 2014-10-31 2016-05-04 阿里巴巴集团控股有限公司 一种信息获取方法及装置
CN105760252A (zh) * 2014-12-19 2016-07-13 中兴通讯股份有限公司 实现事务日志镜像备份的方法及装置
CN106097000A (zh) * 2016-06-02 2016-11-09 腾讯科技（深圳）有限公司 一种信息处理方法及服务器

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
Improved PageRank algorithm based on feedback of user clicks;Zhou Cailan等;《2011 International Conference on Computer Science and Service System (CSSS)》;20110804;第3949-3952页 *
基于时间序列分解的用户行为分析;常慧君等;《数据采集与处理》;20150315;第30卷(第2期);第441-451页 *
基于时频分析的网络流量异常检测研究;张鹏;《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》;20061215(第12期);第I139-155页 *
大规模网络数据流异常检测系统的研究与实现;田玥;《中国优秀博硕士学位论文全文数据库(硕士)信息科技辑》;20051115(第7期);第I139-218页 *
如何查看服务器日志进行网站分析;马海祥博客;《https://www.mahaixiang.cn/seoyjy/909.html》;20141112;第1页 *

Also Published As

Publication number Publication date
CN108255879A (zh) 2018-07-06

Similar Documents

Publication Publication Date Title
EP3293642A1 (en) Method and apparatus for recording and restoring click position in page
CN111506731B (zh) 一种训练字段分类模型的方法、装置及设备
CN106817235B (zh) 网站异常访问量的检测方法及装置
CN109886956B (zh) 检测缺陷点聚集性的方法及装置
CN110955846A (zh) 传播路径图生成方法及装置
WO2021169386A1 (zh) 一种图数据处理方法、装置、设备、介质
CN109600272B (zh) 爬虫检测的方法及装置
CN112583944B (zh) 一种更新域名证书的处理方法和装置
CN112926636A (zh) 牵引变流器柜体温度异常检测方法和装置
Dederichs et al. Comparison of automated operational modal analysis algorithms for long-span bridge applications
CN113919683A (zh) 工艺工时的计算方法、装置、存储介质及处理器
CN108255879B (zh) 网页浏览流量作弊的检测方法及装置
CN110889065B (zh) 页面停留时长确定方法、装置与设备
CN110020074A (zh) 确定网页流失率的方法及装置
CN109558548A (zh) 一种消除css样式冗余的方法及相关产品
CN113468384B (zh) 网络情报源信息的处理方法、装置、存储介质及处理器
CN108267613B (zh) 一种测风数据处理方法及相关设备
CN108062338B (zh) 一种评估功能页面的导航能力的方法及装置
CN106610833B (zh) 一种触发重叠html元素鼠标事件的方法及装置
CN110908587A (zh) 一种用于存储时序数据的方法及其装置
CN111125087A (zh) 数据的存储方法及装置
CN115148028A (zh) 依据历史数据构建车辆路测场景的方法、装置及一种车辆
CN104239199A (zh) 虚拟机器人的生成方法、自动化测试方法及相关装置
CN114817209A (zh) 监控规则的处理方法和装置、处理器及电子设备
CN106997353B (zh) 网页改版的监控方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100080 No. 401, 4th Floor, Haitai Building, 229 North Fourth Ring Road, Haidian District, Beijing

Applicant after: Beijing Guoshuang Technology Co.,Ltd.

Address before: 100086 Cuigong Hotel, 76 Zhichun Road, Shuangyushu District, Haidian District, Beijing

Applicant before: Beijing Guoshuang Technology Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant