CN105989134A - 网页收录方法和装置 - Google Patents

Abstract

本公开揭示了一种网页收录方法和装置，属于互联网技术领域。所述网页收录方法包括：接收用于请求访问网页的访问请求，所述网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；根据所述访问请求检测所述网页的访问者是否为搜索引擎；若所述访问者是所述搜索引擎，则将所述网页转换为超文本链接标示语言HTML格式，并返回所述HTML格式的所述网页至所述搜索引擎，所述搜索引擎用于对所述网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

Description

网页收录方法和装置

技术领域

本公开涉及互联网技术领域，特别涉及一种网页收录方法和装置。

背景技术

随着HTML5(Hypertext Markup Language，超文本链接标示语言5)技术和JavaScript技术的发展，越来越多的网页开发人员开始使用HTML5和JavaScript来开发网页。

然而，由于目前的搜索引擎只能收录纯html的网页，基于JavaScript编程语言开发的网站无法被搜索引擎收录，并且HTML5网页通常也是使用JavaScript编程语言来编程的，所以上述使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题。

发明内容

本公开提供了一种网页收录方法和装置。所述技术方案如下：

根据本公开实施例的第一方面，提供一种网页收录方法，包括：

接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

根据访问请求检测网页的访问者是否为搜索引擎；

若访问者是搜索引擎，则将网页转换为HTML格式，并返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

可选地，该根据访问请求检测网页的访问者是否为搜索引擎，包括：

读取访问请求中携带的访问者的身份标识；

检测身份标识是否为搜索引擎所对应的身份标识。

可选地，该将网页转换为HTML格式，包括：

若网页包括基于JavaScript开发的网页内容，则通过Webkit引擎将基于JavaScript开发的网页内容转换为HTML格式。

可选地，该将网页转换为HTML格式，包括：

若网页包括基于Flash开发的网页内容，则通过Flash引擎将基于Flash开发的网页内容转换为HTML格式。

可选地，该方法还包括：

若访问者是用户终端，则返回网页至用户终端。

根据本公开实施例的第二方面，提供一种网页收录装置，包括：

接收模块，被配置为接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

检测模块，被配置为根据接收模块接收到的访问请求检测网页的访问者是否为搜索引擎；

转换模块，被配置为在检测模块的检测结果为访问者是搜索引擎时，将网页转换为HTML格式；

第一返回模块，被配置为返回转换模块转换得到的HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

可选地，该检测模块，包括：

读取子模块，被配置为读取访问请求中携带的访问者的身份标识；

检测子模块，被配置为检测读取子模块读取到的身份标识是否为搜索引擎所对应的身份标识。

可选地，该转换模块，被配置为：

在网页包括基于JavaScript开发的网页内容时，通过Webkit引擎将基于JavaScript开发的网页内容转换为HTML格式。

可选地，该转换模块，被配置为：

在网页包括基于Flash开发的网页内容时，通过Flash引擎将基于Flash开发的网页内容转换为HTML格式。

可选地，其特征在于，该装置包括：

第二返回模块，被配置为在检测模块的检测结果为访问者是用户终端时，返回网页至用户终端。

根据本公开实施例的第三方面，提供一种网页收录装置，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，处理器被配置为：

接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

根据访问请求检测网页的访问者是否为搜索引擎；

若访问者是搜索引擎，则将网页转换为HTML格式，并返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

本公开的实施例提供的技术方案可以包括以下有益效果：

通过在接收到用于请求访问网页的网页请求之后，该网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；检测该网页的访问者是否为搜索引擎，当访问者为搜索引擎时，将网页转换为HTML格式，然后返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并于说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的一种网页收录方法的流程图。

图2是根据另一示例性实施例示出的一种网页收录方法的流程图。

图3是根据一示例性实施例示出的一种网页收录装置的框图。

图4是根据另一示例性实施例示出的一种网页收录装置的框图。

图5是根据一示例性实施例示出的一种用于收录网页的装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种网页收录方法的流程图。如图1所示，该网页收录方法可以包括以下步骤。

在步骤101中，接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容。

在步骤102中，根据访问请求检测网页的访问者是否为搜索引擎。

在步骤103中，若访问者是搜索引擎，则将网页转换为HTML格式，并返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

综上所述，本公开实施例中提供的网页收录方法，通过在接收到用于请求访问网页的网页请求之后，该网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；检测该网页的访问者是否为搜索引擎，当访问者为搜索引擎时，将网页转换为HTML格式，然后返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

图2是根据一示例性实施例示出的一种网页收录方法的流程图。如图2所示，该网页收录方法可以包括以下步骤。

在步骤201中，接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容。

当网页被访问时，为该网页提供服务的服务器可以接收到访问者发送的用于请求访问该网页的访问请求。其中，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容。

比如，当搜索引擎想要对某一网页进行收录时，搜索引擎可以发送请求访问该网页的访问请求至服务器。当用户想要访问某一网页时，用户可以通过用户终端发送请求访问该网页的访问请求至服务器。

而为了标识自身的身份，搜索引擎或者用户终端可以发送携带有自身的身份标识的访问请求至服务器。可选地，访问请求的头信息中可以包括User-Agent属性，搜索引擎或者用户终端在该属性中携带自身的身份标识。

比如，搜索引擎在访问网页时，搜索引擎可以在发送的Http访问请求的头信息中携带‘1’；用户终端在访问该网页时，用户终端发送的Http访问请求的头信息中可以携带‘0’。其中，‘1’用于表示访问者为搜索引擎，‘0’用于表示访问者为用户终端。

在步骤202中，读取访问请求中携带的访问者的身份标识。

为了获知当前请求访问网页的访问者是搜索引擎还是用户终端，服务器可以读取访问请求中携带的访问者的身份标识。

可选地，服务器可以读取访问请求的头信息中User-Agent属性的属性值，读取到的属性值即为访问者的身份标识。

在步骤203中，检测身份标识是否为搜索引擎所对应的身份标识。

在步骤204中，若访问者是搜索引擎，则将网页转换为HTML格式。

如果服务器的检测结果为访问请求中携带的身份标识是搜索引擎所对应的身份标识，也即访问者为搜索引擎，则服务器可以将该网页转换为HTML格式。

可选地，若网页包括基于JavaScript开发的网页内容，则通过Webkit引擎将基于JavaScript开发的网页内容转换为HTML格式。

服务器中可以设置有Webkit引擎，当网页包含基于JavaScript开发的网页内容，服务器通过设置的Webkit引擎将基于JavaScript开发的网页内容转换为HTML格式。当然，服务器还可以通过其他引擎来将基于JavaScript开发的网页内容转换为HTML格式，本实施例对此并不做限定。

可选地，若网页包括基于Flash开发的网页内容，则通过Flash引擎将基于Flash开发的网页内容转换为HTML格式。

类似的，服务器中还可以设置有Flash引擎，当网页中包括基于Flash开发的网页内容时，服务器通过Flash引擎将基于Flash开发的网页内容转换为HTML格式。当然，服务器还可以通过其他引擎来进行转换，本实施例对此并不做限定。

在步骤205中，返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

在服务器将网页转换为HTML格式之后，服务器可以返回HTML格式的网页至搜索引擎。由于纯HTML格式的网页可以被搜索引擎收录，所以搜索引擎在接收到HTML格式的网页之后，搜索引擎可以根据正常的网页收录方式判定是否对该网页进行收录。

需要说明的是，如果步骤203的检测结果为访问请求中携带的身份标识不是搜素引擎所对应的身份标识，而是用户终端所对应的身份标识，也即此时访问者为用户终端，则此时服务器可以执行步骤206。

在步骤206中，若访问者是用户终端，则返回网页至用户终端。

如果服务器的检测结果为访问者是用户终端，则服务器可以直接反馈该网页至用户终端。相应的，用户终端可以显示接收到的该网页。

需要补充说明的是，本实施例只是以网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容为例，可选地，网页还可以包括基于Applet或者SiverLight开发的网页内容，此时，服务器在检测到访问者为搜索引擎时，服务器可以通过对应的引擎将网页转换为HTML格式，进而返回HTML格式的网页至搜索引擎，本实施例在此不再赘述。

综上所述，本公开实施例中提供的网页收录方法，通过在接收到用于请求访问网页的网页请求之后，该网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；检测该网页的访问者是否为搜索引擎，当访问者为搜索引擎时，将网页转换为HTML格式，然后返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

下述为本公开装置实施例，可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节，请参照本公开方法实施例。

图3是根据一示例性实施例示出的一种网页收录装置的框图。如图3所示，该网页收录装置可以包括但不限于：接收模块310、检测模块320、转换模块330和第一返回模块340。

接收模块310，被配置为接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

检测模块320，被配置为根据接收模块310接收到的访问请求检测网页的访问者是否为搜索引擎；

转换模块330，被配置为在检测模块320的检测结果为访问者是搜索引擎时，将网页转换为HTML格式；

第一返回模块340，被配置为返回转换模块330转换得到的HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

综上所述，本公开实施例中提供的网页收录装置，通过在接收到用于请求访问网页的网页请求之后，该网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；检测该网页的访问者是否为搜索引擎，当访问者为搜索引擎时，将网页转换为HTML格式，然后返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

图4是根据一示例性实施例示出的一种网页收录装置的框图。如图4所示，该网页收录装置可以包括但不限于：接收模块410、检测模块420、转换模块430和第一返回模块440。

接收模块410，被配置为接收用于请求访问网页的访问请求，网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

检测模块420，被配置为根据接收模块410接收到的访问请求检测网页的访问者是否为搜索引擎；

转换模块430，被配置为在检测模块420的检测结果为访问者是搜索引擎时，将网页转换为HTML格式；

第一返回模块440，被配置为返回转换模块430转换得到的HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录。

可选地，该检测模块420，包括：

读取子模块421，被配置为读取访问请求中携带的访问者的身份标识；

检测子模块422，被配置为检测读取子模块421读取到的身份标识是否为搜索引擎所对应的身份标识。

可选地，转换模块430，被配置为：

在网页包括基于JavaScript开发的网页内容时，通过Webkit引擎将基于JavaScript开发的网页内容转换为HTML格式。

可选地，转换模块430，被配置为：

在网页包括基于Flash开发的网页内容时，通过Flash引擎将基于Flash开发的网页内容转换为HTML格式。

可选地，该装置还包括：

第二返回模块450，被配置为在检测模块420的检测结果为访问者是用户终端时，返回网页至用户终端。

综上所述，本公开实施例中提供的网页收录装置，通过在接收到用于请求访问网页的网页请求之后，该网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；检测该网页的访问者是否为搜索引擎，当访问者为搜索引擎时，将网页转换为HTML格式，然后返回HTML格式的网页至搜索引擎，搜索引擎用于对网页进行收录；解决了相关技术中使用HTML5和JavaScript开发的网页通常存在不能被搜索引擎收录的问题；达到了上述网页能够被搜索引擎正常收录的效果。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图5是根据一示例性实施例示出的一种用于收录网页的装置500的框图。例如，装置500可以被提供为一服务器。参照图5，装置500包括处理组件522，其进一步包括一个或多个处理器，以及由存储器532所代表的存储器资源，用于存储可由处理组件522执行的指令，例如应用程序。存储器532中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外，处理组件522被配置为执行指令，以执行上述网页收录方法。

装置500还可以包括一个电源组件526被配置为执行装置500的电源管理，一个有线或无线网络接口550被配置为将装置500连接到网络，和一个输入输出(I/O)接口558。装置500可以操作基于存储在存储器532的操作系统，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM或类似。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (11)

1.一种网页收录方法，其特征在于，包括：

接收用于请求访问网页的访问请求，所述网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

根据所述访问请求检测所述网页的访问者是否为搜索引擎；

若所述访问者是所述搜索引擎，则将所述网页转换为超文本链接标示语言HTML格式，并返回所述HTML格式的所述网页至所述搜索引擎，所述搜索引擎用于对所述网页进行收录。

2.根据权利要求1所述的方法，其特征在于，所述根据所述访问请求检测所述网页的访问者是否为搜索引擎，包括：

读取所述访问请求中携带的所述访问者的身份标识；

检测所述身份标识是否为所述搜索引擎所对应的身份标识。

3.根据权利要求1所述的方法，其特征在于，所述将所述网页转换为HTML格式，包括：

若所述网页包括基于JavaScript开发的网页内容，则通过Webkit引擎将所述基于JavaScript开发的网页内容转换为所述HTML格式。

4.根据权利要求1所述的方法，其特征在于，所述将所述网页转换为HTML格式，包括：

若所述网页包括基于Flash开发的网页内容，则通过Flash引擎将所述基于Flash开发的网页内容转换为所述HTML格式。

5.根据权利要求1至4任一所述的方法，其特征在于，所述方法还包括：

若所述访问者是用户终端，则返回所述网页至所述用户终端。

6.一种网页收录装置，其特征在于，包括：

接收模块，被配置为接收用于请求访问网页的访问请求，所述网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

检测模块，被配置为根据所述接收模块接收到的所述访问请求检测所述网页的访问者是否为搜索引擎；

转换模块，被配置为在所述检测模块的检测结果为所述访问者是所述搜索引擎时，将所述网页转换为超文本链接标示语言HTML格式；

第一返回模块，被配置为返回所述转换模块转换得到的所述HTML格式的所述网页至所述搜索引擎，所述搜索引擎用于对所述网页进行收录。

7.根据权利要求6所述的装置，其特征在于，所述检测模块，包括：

读取子模块，被配置为读取所述访问请求中携带的所述访问者的身份标识；

检测子模块，被配置为检测所述读取子模块读取到的所述身份标识是否为所述搜索引擎所对应的身份标识。

8.根据权利要求6所述的装置，其特征在于，所述转换模块，被配置为：

在所述网页包括基于JavaScript开发的网页内容时，通过Webkit引擎将所述基于JavaScript开发的网页内容转换为所述HTML格式。

9.根据权利要求6所述的装置，其特征在于，所述转换模块，被配置为：

在所述网页包括基于Flash开发的网页内容时，通过Flash引擎将所述基于Flash开发的网页内容转换为所述HTML格式。

10.根据权利要求6至9任一所述的装置，其特征在于，所述装置还包括：

第二返回模块，被配置为在所述检测模块的检测结果为所述访问者是用户终端时，返回所述网页至所述用户终端。

11.一种网页收录装置，其特征在于，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

接收用于请求访问网页的访问请求，所述网页包括基于JavaScript和Flash中的至少一种语言所开发的网页内容；

根据所述访问请求检测所述网页的访问者是否为搜索引擎；

若所述访问者是所述搜索引擎，则将所述网页转换为超文本链接标示语言HTML格式，并返回所述HTML格式的所述网页至所述搜索引擎，所述搜索引擎用于对所述网页进行收录。