CN105719162A - 监测推广链接有效性的方法及装置 - Google Patents

Abstract

本发明提供了一种监测推广链接有效性的方法及装置。在该方法中，采用爬虫模拟跳转的整个过程，对链接整个跳转过程进行监测，根据HttpResponse对象，判断跳转正常，对多级跳转过程同样有效，从而避免了用户一直点击异常跳转链接，提升了用户体验，同时，避免商家为用户点击异常的跳转链接而付费，提升广告投放效果。

Description

监测推广链接有效性的方法及装置

技术领域

本发明涉及电子商务技术领域，尤其涉及一种监测推广链接有效性的方法及装置。

背景技术

随着网络的日益普及，通过互联网平台进行营销推广已经成为商家推广的重要手段之一，其中包括电子邮件营销，搜索引擎营销等方式，都是通过给用户展示推广链接，用户点击后，跳转到商家推广的目标着陆页面。

在使用互联网平台做营销推广时，为了统计营销推广的效果，通常做法是在互联网平台和真正的目标着陆页之间，部署一套跳转系统，用户点击推广链接时，请求先经过跳转系统，跳转系统记录相关日志，再由跳转系统将请求跳转至目标着陆页。

现有的跳转系统，为了保证点击请求从推广平台到目标着陆页的实时性，通常只是会记录跳转日志，不会去检测整个跳转过程是否正常。同时，存在部分跳转链接，跳转到目标着陆页之前，跳转请求可能会经过多个不同系统，在这种发生多级跳转情况下，跳转系统是无法判断整个多级跳转过程是否正常的，因为多级跳转只是在请求第一次跳转时，发生在跳转系统上，剩余跳转都是发生在其他系统上。

在实现本发明的过程中，申请人发现现有技术的跳转系统不能够检测到链接请求整个跳转过程是否正常，会有以下缺点：

1、当出现异常跳转的推广链接，不能够及时通知到商家进行修正，导致当用户点击到跳转异常的推广链接时，始终跳转不到真正目标着陆页，影响用户体验；

2、增加商家成本，降低推广效果，现在搜索引擎或者视频媒体等推广平台，都存在按用户每次点击收取费用的模式，当用户点击到跳转异常的推广链接，不能跳转至目标着陆页，直接导致商家损失。

发明内容

(一)要解决的技术问题

鉴于上述技术问题，本发明提供了一种监测推广链接有效性的方法及装置，以监测异常跳转的推广链接，增加用户体验并减少客户损失。

(二)技术方案

根据本发明的一个方面，提供了一种监测推广链接有效性的方法。该方法包括：步骤A：接收推广链接列表；步骤B：将推广链接列表中的推广链接分配至各个爬虫节点；以及步骤C：在每一个爬虫节点，对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效的推广链接进行记录。

根据本发明的另一个方面，还提供了一种监测推广链接有效性的装置。该装置包括：接收模块，用于推广链接列表；链接分配模块，用于将推广链接列表中的推广链接分配至爬虫模块的各个爬虫节点；以及爬虫模块，包括多个的爬虫节点，每一爬虫节点对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效推广链接进行记录。

(三)有益效果

从上述技术方案可以看出，本发明监测推广链接有效性的方法及装置采用爬虫模拟跳转的整个过程，对链接整个跳转过程进行监测，根据HttpResponse对象，判断跳转正常，对多级跳转过程同样有效，从而避免了用户一直点击异常跳转链接，提升了用户体验，同时，避免商家为用户点击异常的跳转链接而付费，提升广告投放效果。

附图说明

图1为根据本发明实施例监测推广链接有效性的方法的流程图；

图2为图1所示方法中步骤C的流程图；

图3为根据本发明实施例监测推广链接有效性的装置的结构示意图。

【符号说明】

301-读取模块；302-链接分配模块；

303-爬虫模块；304-通知模块；

305-定时模块。

具体实施方式

本发明通过爬虫自动化模拟推广链接的整个过程，自动判别跳转是否正常，当判定链接有跳转异常情况，及时通知商家对链接进行修改处理，从而实现了整个推广链接的自动化监测。

为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明进一步详细说明。

在本发明的一个示例性实施例中，提供了一种监测推广链接有效性的方法。请参照图1，本实施例监测推广链接有效性的方法包括：

步骤A：接收用户配置的推广链接列表；

此处的用户可以是商户或者是电子商务平台运营商。该推广链接列表并非限定于严格意义上的表格，其可以是表格，数据库，采用文本处理程序整理的多个推广链接或其他形式，其包括将待验证的推广链接整理出来的任何形式。

本步骤中，推广链接可以是商家或平台运营商手动输入的，也可以是根据软件根据商户或平台运营商提供的信息自动生成的，一般情况用为多个。

步骤B：将推广链接列表中的推广链接分配至各个爬虫节点；

本步骤中，爬虫节点的数目可以用户根据需要进行设定。当需要处理的种子链接URL数量较大时，可以多设置一些爬虫节点，反之，则可以少设置一些爬虫节点，甚至可以仅设置一个爬虫节点。一般情况下，设置爬虫的数量介于5～100个之间。

步骤C：在每一个爬虫节点，对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效的推广链接进行记录；

本实施例中，爬虫节点采用HttpClient技术对推广链接进行模拟请求。在详细说明本步骤之前，首先对Http协议状态码进行说明：根据Http协议返回状态码规定，大体可分为以下几种：

A、状态码以2开头，2XX：服务器成功接受了客户端请求；

B、状态码以3开头，3XX：请求重定向，重定向URL在返回的Location中；

C、状态码以4开头，4XX：客户端请求发生错误；

D、状态码以5开头，5XX：服务端发送错误；

其中，X表示阿拉伯数字，2XX表示以2开头的三位状态码，3XX表示以3开头的三位状态码，4XX表示以4开头的三位状态码，5XX表示以5开头的三位状态码，关于状态码的详细内容可参考相关协议，此处不再赘述。

具体而言，如图2所示，本步骤中一爬虫节点对一个推广链接进行模拟请求的过程包括：

子步骤C0：记录当前的推广链接，并将该推广链接作为种子链接；

子步骤C1：采用HttpClient技术对种子链接进行模拟请求；

子步骤C2：接收种子链接对该模拟请求返回的HttpResponse对象；

子步骤C3：基于HttpResponse对象中code字段进行判断：

子分步骤C3a：判断HttpResponse对象中code字段中的状态码是否为3XX，如果是，根据Http协议状态码规定，可以得知该种子链接发生重定向，重定向的URL地址为返回HttpResponse对象中Location字段，则执行子分步骤C3b；否则，执行子分步骤C3c；；

子分步骤C3b：获取HttpResponse对象中Location字段中的链接地址，并将其作为种子链接，再次执行子步骤C1；

子分步骤C3c：判断HttpResponse对象中code字段中的状态码是否为2XX，如果是，则表明种子链接的跳转过程中为正常情况，则判断当前推广链接有效，执行子分步骤C3d；执行子分步骤C3e；

子分步骤C3d，当前推广链接有效，执行下一推广链接的判断过程，执行子步骤C0；

子分步骤C3e，否则表明种子链接的跳转过程中有异常情况，则判断当前推广链接无效，将当前的推广链接记录至无效链接列表中，执行下一推广链接的判断过程，执行子步骤C0；

步骤D：将各个爬虫节点记录的无效链接发送给用户。

在全部推广链接验证完毕之后，将无效链接列表发送到商家邮箱。当然，该无效链接列表也可以以其他方式提供给商家，例如打印成纸件，或者该无效链接列表仅作为平台运营商自身的参考资料使用，则本步骤就可以省略。

在本实施例中，是按照预设的时间周期，例如：1小时、一天、一周或一月，来执行步骤A～步骤D，来监测推广链接的有效性，从而保证在最短的时间内发现无效链接，最大限度的提升用户体验，避免商家损失。同时，商家也可以对无效链接进行修改，保证推广效果。

至此，本实施例监测推广链接有效性的方法介绍完毕。

在本发明的另一个实施例中，还提供了一种监测推广链接有效性的装置。请参照图3，本实施例监测推广链接有效性的装置包括：

接收模块301，用于接收用户配置的推广链接列表；

链接分配模块302，用于将推广链接列表中的推广链接分配至爬虫模块的各个爬虫节点；

爬虫模块303，包括多个的爬虫节点，每一爬虫节点对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效推广链接进行记录；以及

通知模块304，用于将无效推广链接推送至用户；

定时模块305，用于按照预设的时间周期调用接收模块301、链接分配模块302、爬虫模块303和通知模块304，以实时监测推广链接的有效性。

其中，每一个爬虫节点又可以包括：

记录子模块，用于记录当前的推广链接，并将该推广链接作为种子链接；

模拟请求发起子模块，用于采用HttpClient技术对种子链接进行模拟请求；

接收子模块，用于接收种子链接对该模拟请求返回的HttpResponse对象；

判断子模块，用于判断HttpResponse对象中code字段中的状态码是否为3XX，如果是，则提取HttpReponse对象Location字段中的链接地址，并将其作为种子链接，并基于当前种子链接调用模拟请求发起子模块；否则，判断HttpResponse对象中code字段中的状态码是否为2XX，如果是，则判断当前推广链接有效，调用记录子模块执行下一推广链接的判断再否则，判断当前推广链接无效，将当前的推广链接记录至无效链接列表中，调用记录子模块执行下一推广链接的判断。

需要说明的是，为了达到简要说明的目的，上述第一实施例中任何可作相同应用的技术特征叙述皆并于此，无需再重复相同叙述。

至此，本发明第二实施例监测推广链接有效性的装置介绍完毕。

至此，已经结合附图对本发明两实施例进行了详细描述。依据以上描述，本领域技术人员应当对本发明监测推广链接有效性的方法及装置有了清楚的认识。

需要说明的是，在附图或说明书正文中，未绘示或描述的实现方式，均为所属技术领域中普通技术人员所知的形式，并未进行详细说明。此外，上述对各元件和方法的定义并不仅限于实施例中提到的各种具体结构、形状或方式，本领域普通技术人员可对其进行简单地更改或替换，例如：除非特别描述或必须依序发生的步骤，第一实施例中的步骤顺序并无限制于以上所列，且可根据所需设计而变化或重新安排。

综上所述，本发明通过爬虫自动化模拟链接跳转的整个过程，自动判别跳转是否正常，当判定链接有跳转异常情况，及时通知商家对链接进行修改处理来实现整个链接跳转监测自动化过程，从而提升了用户体验，同时避免了商户损失，具有较好的推广应用价值。

需要说明的是，本发明实施例中提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的相关设备中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (12)

1.一种监测推广链接有效性的方法，其特征在于，包括：

步骤A：接收推广链接列表；

步骤B：将推广链接列表中的推广链接分配至各个爬虫节点；以及

步骤C：在每一个爬虫节点，对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效的推广链接进行记录。

2.根据权利要求1所述的方法，其特征在于，所述步骤C中，爬虫节点采用HttpClient技术对推广链接进行模拟请求。

3.根据权利要求2所述的方法，其特征在于，所述步骤C中，爬虫节点对一个推广链接进行模拟请求的过程包括：

子步骤C0：记录当前的推广链接，并将该推广链接作为种子链接；

子步骤C1：采用HttpClient技术对种子链接进行模拟请求；

子步骤C2：接收种子链接对该模拟请求返回的HttpResponse对象；

子步骤C3：基于HttpResponse对象中code字段中的状态码进行判断：

子分步骤C3a：判断状态码是否为3XX，如果是，则执行子分步骤C3b；否则，执行子分步骤C3c；；

子分步骤C3b：获取HttpResponse对象中Location字段中的链接地址，并将其作为种子链接，再次执行子步骤C1；

子分步骤C3c：判断状态码是否为2XX，如果是，则执行子分步骤C3d；否则，执行子分步骤C3e；

子分步骤C3d，判断当前推广链接有效，结束；

子分步骤C3e，判断当前推广链接无效，结束；

其中，所述3XX为以3开头的三位状态码，2XX表示以2开头的三位状态码。

4.根据权利要求1所述的方法，其特征在于，还包括：

步骤D：将各个爬虫节点记录的无效链接发送给用户。

5.根据权利要求4所述的方法，其特征在于：

所述步骤C包括：将无效的推广链接增加至无效链接列表中；

所述步骤D包括：将无效链接列表通过电子或纸件方式发送给客户。

6.根据权利要求4所述的方法，其特征在于，按照预设的时间周期来执行步骤A～C，以实时监测推广链接的有效性。

7.根据权利要求6所述的方法，其特征在于，所述时间周期为一天、一周或一月。

8.根据权利要求1至7中任一项所述的方法，其特征在于，所述步骤B中，爬虫节点的数目介于5～100个之间。

9.根据权利要求1至7中任一项所述的方法，其特征在于，所述推广链接列表为商户或电子商务平台运营商配置，为表格、数据库，或采用文本处理程序整理的多个推广链接的形式。

10.一种监测推广链接有效性的装置，其特征在于，包括：

接收模块(301)，用于推广链接列表；

链接分配模块(302)，用于将推广链接列表中的推广链接分配至爬虫模块的各个爬虫节点；以及

爬虫模块(303)，包括多个的爬虫节点，每一爬虫节点对分配的每一个推广链接进行模拟请求，判断该推广链接是否有效，并对无效推广链接进行记录。

11.根据权利要求10所述的装置，其特征在于，所述爬虫节点包括：

记录子模块，用于记录当前的推广链接，并将该推广链接作为种子链接；

模拟请求发起子模块，用于采用HttpClient技术对种子链接进行模拟请求；

接收子模块，用于接收种子链接对该模拟请求返回的HttpResponse对象；

判断子模块，用于判断HttpResponse对象中code字段中的状态码是否为3XX，如果是，则提取HttpReponse对象Location字段中的链接地址，并将其作为种子链接，并基于当前种子链接调用模拟请求发起子模块；否则，判断状态码是否为2XX，如果是，则判断当前推广链接有效，调用记录子模块执行下一推广链接的判断；再否则，判断当前推广链接无效，将当前的推广链接记录至无效链接列表中，调用记录子模块执行下一推广链接的判断；

其中，所述3XX为以3开头的三位状态码，2XX表示以2开头的三位状态码。

12.根据权利要求10或11所述的装置，其特征在于，还包括：

通知模块(304)，用于将无效推广链接推送至用户；

定时模块(305)，用于按照预设的时间周期调用接收模块(301)、链接分配模块(302)、爬虫模块(303)和通知模块(304)，以实时监测推广链接的有效性。