CN104750741A - 一种无效链接处理方法及装置 - Google Patents

Abstract

本发明涉及通信技术领域，公开了一种无效链接处理方法及装置，以解决现有技术中对无效链接处理不够精确的技术问题，该方法包括：检测获得网页中的无效链接的地址信息；根据无效链接的地址信息确定无效链接的类型；根据无效链接的类型，采用对应的方式处理无效连接。

Description

一种无效链接处理方法及装置

技术领域

本发明涉及通信技术领域，特别涉及一种无效链接处理方法及装置。

背景技术

随着互联网技术的发展，涌现出越来越多的网站，随着网站数量的增多，其复杂度也越来越高，这就难免出现各种各样的无效链接页面，所谓无效链接页面指的是某个网站上的连接页面无法打开或者是打开的链接页面为错误的链接页面，如果一个网站上无效链接页面较多的话，对于用户来说，这些无法打开的链接必然导致用户体验较低。

针对上述问题，现有技术中可以通过以下方案解决无效链接问题：

第一种，人工设置蜘蛛协议(robots.txt)文件，这样可以禁止搜索引擎抓取无效链接页面，通常情况下，网络蜘蛛会先访问网站根目录下的robots.txt，网络蜘蛛会遵守协议，不抓取被禁止的页面，以避免搜索引擎因为无效链接页面而对网站进行降权处理。

第二种，人工设置301重定向，所谓301重定向即指页面永久性移走，也就是说，当用户或搜索引擎向网站服务器发出浏览请求时，服务器将返回的HTTP数据流中头信息(header)中状态码的一种，表示本网页永久性转移到另一个人工设定的网页地址，采用这种方式可以避免用户或搜索引擎浪费流量，在一定程度上提高了用户体验。

第三种，人工设置404页面，提示用户所请求浏览的页面不存在或者链接错误，同时引导用户尝试链接网站上其他页面，可以避免网络蜘蛛进入网站死胡同。

本申请发明人发现现有技术中至少存在以下技术问题：

由于在现有技术中，往往通过单一的方式对无效链接进行处理，例如：人工设置蜘蛛协议文件、人工设置301重定向或者人工设置404，但是产生无效链接的原因有多种，如果全部采用单一的方式对无效链接进行处理的话将存在着对无效链接处理不够精确的技术问题；

并且，在网站无效链接的较多的情况下，例如：数千上万条无效链接页面，如果采用人工方式设置robots.txt文件、301重定向或者404页面的话，将产生大量工作量，操作起来非常不方便，并且容易出现人工设置错误等问题。

发明内容

本发明实施例提供一种无效链接处理方法及装置，以解决现有技术中对无效链接处理不够精确的技术问题。

本发明实施例技术方案如下：

本发明实施例提供一种无效链接处理方法，包括：检测获得网页中的无效链接的地址信息；根据所述无效链接的地址信息确定所述无效链接的类型；根据所述无效链接的类型，采用对应的方式处理所述无效连接。

由上述方案可知，在本发明实施例中采用与无效链接的类型对应的方式对无效链接进行处理，而不是采用单一的方式对无效链接进行处理，故而达到了对无效链接处理更加精确的技术效果；

并且，由于不需要用户手动设置，故而降低了用户的工作量且操作更加方便，并且防止了用户的误操作。

优选的，所述根据所述无效链接的类型，采用对应的方式处理所述无效连接，具体包括：若所述无效链接的地址信息的无效链接类型为静态网页类型，则将所述无效链接的地址信息替换为重定向链接的地址信息；否则，将所述无效链接的地址信息所对应的页面替换为空字符页面。

由上述方案可知，在无效链接类型为静态网页类型时，则将无效链接的地址信息替换为重定向链接的地址信息，由于静态网页无效则有可能是网络链接发生了变化，故而将静态网页类型对应的地址替换为重定向无效链接的地址信息，有利于对无效链接的修复；而在无效链接类型不是静态网页类型时，其失效很可能是文件丢失，在这种情况下，很难恢复相关文件，故而将无效链接的地址信息的页面替换为空字符页面，从而网络系统中不再搜录该无效链接的地址信息，也就是不会再请求获得该无效链接的地址信息对应的页面，进而能够降低耗费的流量，并且提高页面的美观度。

优选的，在所述将所述无效链接的地址信息替换为重定向链接的地址信息之后，所述方法还包括：接收替换指令，根据所述替换指令中所携带的新的地址信息将所述重定向链接的地址信息替换为所述新的地址信息，其中，所述新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面。

由上述方案可知，可以通过接收替换指令，从而将无效链接的地址信息由重定向链接的地址信息替换为新的地址信息，而新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面，故而达到了能够修复部分无效链接的技术效果。

优选的，所述根据所述无效链接的地址信息确定所述无效链接的类型，具体包括：读取所述无效链接的地址信息的扩展名；通过所述无效链接的地址信息的扩展名确定所述无效链接的地址信息所对应的无效链接类型。

由上述方案可知，直接通过无效链接的地址信息就可以确定无效链接的地址信息所对应的无效链接类型，而不要再获取其它信息，故而达到了降低处理负担的技术效果。

本发明实施例提供一种无效链接处理装置，包括：检测模块，用于检测获得网页中的无效链接的地址信息；确定模块，用于根据所述无效链接的地址信息确定所述无效链接的类型；处理模块，用于根据所述无效链接的类型，采用对应的方式处理所述无效连接。

由上述方案可知，在本发明实施例中采用与无效链接的类型对应的方式对无效链接进行处理，而不是采用单一的方式对无效链接进行处理，故而达到了对无效链接处理更加精确的技术效果；

并且，由于不需要用户手动设置，故而降低了用户的工作量且操作更加方便，并且防止了用户的误操作。

优选的，所述处理模块，具体包括：第一替换单元，用于若所述无效链接的地址信息的无效链接类型为静态网页类型，则将所述无效链接的地址信息替换为重定向链接的地址信息；第二替换单元，用于否则，将所述无效链接的地址信息所对应的页面替换为空字符页面。

由上述方案可知，在无效链接类型为静态网页类型时，则将无效链接的地址信息替换为重定向链接的地址信息，由于静态网页无效则有可能是网络链接发生了变化，故而将静态网页类型对应的地址替换为重定向无效链接的地址信息，有利于对无效链接的修复；而在无效链接类型不是静态网页类型时，其失效很可能是文件丢失，在这种情况下，很难恢复相关文件，故而将无效链接的地址信息的页面替换为空字符页面，从而网络系统中不再搜录该无效链接的地址信息，也就是不会再请求获得该无效链接的地址信息对应的页面，进而能够降低耗费的流量，并且提高页面的美观度。

优选的，所述装置还包括：接收模块，用于在将所述无效链接的地址信息替换为重定向链接的地址信息之后，接收替换指令，根据所述替换指令中所携带的新的地址信息将所述重定向链接的地址信息替换为所述新的地址信息，其中，所述新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面。

由上述方案可知，可以通过接收替换指令，从而将无效链接的地址信息由重定向链接的地址信息替换为新的地址信息，而新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面，故而达到了能够修复部分无效链接的技术效果。

优选的，所述确定模块，具体包括：读取单元，用于读取所述无效链接的地址信息的扩展名；确定单元，用于通过所述无效链接的地址信息的扩展名确定所述无效链接的地址信息所对应的无效链接类型。

由上述方案可知，直接通过无效链接的地址信息就可以确定无效链接的地址信息所对应的无效链接类型，而不要再获取其它信息，故而达到了降低处理负担的技术效果。

附图说明

图1为本发明实施例无效链接处理方法的流程图；

图2为本发明实施例无效链接处理方法中确定无效链接的类型的流程图；

图3为本发明实施例无效链接处理方法中根据无效链接的类型采用对应的方式处理无效连接的流程图；

图4为本发明实施例中无效链接处理装置的结构图。

具体实施方式

本发明实施例提供一种无效链接处理方法及装置，以解决现有技术中对无效链接处理不够精确的技术问题。

本申请实施例中的技术方案为解决上述存在的对无效链接处理不够精确的问题，总体思路如下：

检测获得网页中的无效链接的地址信息；根据无效链接的地址信息确定无效链接的类型；根据无效链接的类型，采用对应的方式处理无效连接。由于在本发明实施例中采用与无效链接的类型对应的方式对无效链接进行处理，而不是采用单一的方式对无效链接进行处理，故而达到了对无效链接处理更加精确的技术效果；并且，由于不需要用户手动设置，故而降低了用户的工作量且操作更加方便，并且防止了用户的误操作。

下面通过附图以及具体实施例对本发明技术方案做详细的说明，应当理解本发明实施例以及实施例中的具体特征是对本发明技术方案的详细的说明，而不是对本发明技术方案的限定，在不冲突的情况下，本发明实施例以及实施例中的技术特征可以相互组合。

第一方面，本发明实施例提供无效链接处理方法，请参考图1，方法包括：

步骤S101：检测获得网页中的无效链接的地址信息；

举例来说，可以通过无效链接页面的检测工具检测网站的所有无效链接页面，无效链接页面的检测工具例如为：Xenu Link Sleuth工具、tool站长工具等等。其中，Xenu Link Sleuth工具使用起来较为简单，并且最大支持100线程，检测速度较快。

然后，无效链接页面的检测工具将获取到的无效链接页面生成文本文件或者网页文件，例如：123.txt、123.html等等，并将生成的文本文件或者网页文件上传到指定的目录，从而就能够获取无效链接的地址信息。其中，每个文本文件或者网页文件都包含有无效链接网页的扩展名，例如，无效链接的地址信息为：www.wuxiaolianjie.html，其扩展名则为：html；无效链接的地址信息为：www.wuxiaolianjie.com/pic/1.jpg，其扩展名则为jpg等等。

步骤S102：根据无效链接的地址信息确定无效链接的类型；

步骤S103：根据无效链接的类型，采用对应的方式处理无效连接。

可选的，步骤S102中，根据无效链接的地址信息确定无效链接的类型，请参考图2，具体包括：

步骤S201：读取无效链接的地址信息的扩展名；

举例来说，扩展名例如为：jpg、gif、png、html、java等等。

步骤S202：通过无效链接的地址信息的扩展名确定无效链接的地址信息所对应的无效链接类型。

举例来说，如果无效链接的地址信息的扩展名为html，则确定无效链接的类型为静态网页类型，如果无效链接的地址信息的扩展名不为html，则确定无效链接的类型不为静态网页类型，该无效链接的类型例如为：java代码（扩展名例如为：java）、图像（扩展名例如为：jpg、gif、png等等），视频（扩展名例如为：rm、rmvb等等）。

可选的，步骤S103中，根据无效链接的类型，采用对应的方式处理无效连接，请参考图3，具体包括：

步骤S301：若无效链接的地址信息的无效链接类型为静态网页类型，则将无效链接的地址信息替换为重定向链接的地址信息；

举例来说，假设无效链接的地址信息为：www.wuxiaolianjie.html，那么针对该无效链接的地址信息生成对应的重定向配置文件，配置文件中包含无效链接的地址信息和重定向链接的地址信息，如果用户请求到这类无效链接页面，那么过滤器将截断该请求，进行301重定向，即在读取到重定向配置文件时，将重定向到重定向链接的地址信息，重定向链接的地址信息可以链接到默认的地址、也可以连接到提高用户视觉效果的页面地址，本发明实施例不作限制。

由于在无效链接类型为静态网页类型时，则将无效链接的地址信息替换为重定向链接的地址信息，由于静态网页无效则有可能是网络链接发生了变化，故而将静态网页类型对应的地址替换为重定向无效链接的地址信息，有利于对无效链接的修复。

步骤S302：否则，将无效链接的地址信息所对应的页面替换为空字符页面。

举例来说，可以首先执行将无效链接的地址信息替换为空字符的操作，并在执行完放置在指定目录，具体步骤为：程序先读取目标服务器上对应的无效链接的地址信息，接着使用正则表达式将无效链接的地址信息替换为空字符，然后生成新的空字符无效链接的地址信息的引用页面放置到服务器指定目录，这样，后续服务器定时扫描该目录，即可将用户请求的无效链接的地址信息的引用页面替换成空字符页面，从而实现自动删除无效链接的效果。

由于在无效链接类型不是静态网页类型时，其失效很可能是文件丢失，在这种情况下，很难恢复相关文件，故而将无效链接的地址信息的页面替换为空字符页面，从而网络系统中不再搜录该无效链接的地址信息，也就是不会再请求获得该无效链接的地址信息对应的页面，进而能够降低耗费的流量，并且提高页面的美观度。

可选的，在基于步骤S103将无效链接的地址信息替换为重定向链接的地址信息之后，方法还包括：

接收替换指令，根据替换指令中所携带的新的地址信息将重定向链接的地址信息替换为新的地址信息，其中，新的地址信息用于链接到无效链接的地址信息失效之前所指向的页面。

举例来说，假设无效链接的地址信息为：www.wuxiaolianjie.html，但是该链接所指向的页面的链接已发生变化，假设更换为：www.wxlj123.html，在这种情况下，可以通过工作人员手动将默认的重定向链接的地址信息替换为www.wxlj123.html，从而能够修复该无效链接的地址信息对应的页面内容。

第二方面，本发明实施例提供一种无效链接处理装置，请参考图4，具体包括：

检测模块40，用于检测获得网页中的无效链接的地址信息；

确定模块41，用于根据无效链接的地址信息确定无效链接的类型；

处理模块42，用于根据无效链接的类型，采用对应的方式处理无效连接。

可选的，处理模块42，具体包括：

第一替换单元，用于若无效链接的地址信息的无效链接类型为静态网页类型，则将无效链接的地址信息替换为重定向链接的地址信息；

第二替换单元，用于否则，将无效链接的地址信息所对应的页面替换为空字符页面。

可选的，装置还包括：

接收模块，用于在将无效链接的地址信息替换为重定向链接的地址信息之后，接收替换指令，根据替换指令中所携带的新的地址信息将重定向链接的地址信息替换为新的地址信息，其中，新的地址信息用于链接到无效链接的地址信息失效之前所指向的页面。

可选的，确定模块41，具体包括：

读取单元，用于读取无效链接的地址信息的扩展名；

确定单元，用于通过无效链接的地址信息的扩展名确定无效链接的地址信息所对应的无效链接类型。

本发明的一个或多个实施例至少具有以下有益效果：

由上述方案可知，在本发明实施例中采用与无效链接的类型对应的方式对无效链接进行处理，而不是采用单一的方式对无效链接进行处理，故而达到了对无效链接处理更加精确的技术效果；

并且，由于不需要用户手动设置，故而降低了用户的工作量且操作更加方便，并且防止了用户的误操作。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种无效链接处理方法，其特征在于，包括：

检测获得网页中的无效链接的地址信息；

根据所述无效链接的地址信息确定所述无效链接的类型；

根据所述无效链接的类型，采用对应的方式处理所述无效连接。

2.如权利要求1所述的方法，其特征在于，所述根据所述无效链接的类型，采用对应的方式处理所述无效连接，具体包括：

若所述无效链接的地址信息的无效链接类型为静态网页类型，则将所述无效链接的地址信息替换为重定向链接的地址信息；

否则，将所述无效链接的地址信息所对应的页面替换为空字符页面。

3.如权利要求2所述的方法，其特征在于，在所述将所述无效链接的地址信息替换为重定向链接的地址信息之后，所述方法还包括：

接收替换指令，根据所述替换指令中所携带的新的地址信息将所述重定向链接的地址信息替换为所述新的地址信息，其中，所述新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面。

4.如权利要求1-3任一所述的方法，其特征在于，所述根据所述无效链接的地址信息确定所述无效链接的类型，具体包括：

读取所述无效链接的地址信息的扩展名；

通过所述无效链接的地址信息的扩展名确定所述无效链接的地址信息所对应的无效链接类型。

5.一种无效链接处理装置，其特征在于，包括：

检测模块，用于检测获得网页中的无效链接的地址信息；

确定模块，用于根据所述无效链接的地址信息确定所述无效链接的类型；

处理模块，用于根据所述无效链接的类型，采用对应的方式处理所述无效连接。

6.如权利要求5所述的装置，其特征在于，所述处理模块，具体包括：

第一替换单元，用于若所述无效链接的地址信息的无效链接类型为静态网页类型，则将所述无效链接的地址信息替换为重定向链接的地址信息；

第二替换单元，用于否则，将所述无效链接的地址信息所对应的页面替换为空字符页面。

7.如权利要求6所述的装置，其特征在于，所述装置还包括：

接收模块，用于在将所述无效链接的地址信息替换为重定向链接的地址信息之后，接收替换指令，根据所述替换指令中所携带的新的地址信息将所述重定向链接的地址信息替换为所述新的地址信息，其中，所述新的地址信息用于链接到所述无效链接的地址信息失效之前所指向的页面。

8.如权利要求5-7任一所述的装置，其特征在于，所述确定模块，具体包括：

读取单元，用于读取所述无效链接的地址信息的扩展名；

确定单元，用于通过所述无效链接的地址信息的扩展名确定所述无效链接的地址信息所对应的无效链接类型。