CN104954396A - 资源下载的方法与资源下载的装置 - Google Patents

Abstract

本发明实施例涉及一种资源下载的方法与资源下载的装置。所述方法包括：网关设备接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一统一资源定位符URL；所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL；所述网关设备下载所述第二URL所标识的资源数据。

Description

资源下载的方法与资源下载的装置

技术领域

本发明涉及通信技术领域，尤其涉及一种资源下载的方法与资源下载的装置。

背景技术

近年来随着互联网的发展，互联网的用户数量、应用种类、网络带宽等均呈现出爆炸式的增长，产生了巨大的影响。在互联网应用中对等网络(Peerto Peer，简称：P2P)技术、在线视频技术的发展给互联网带来的影响尤为广泛，据统计，91％的个人用户的互联网流量为视频数据，在移动流量中，66％为视频数据。

面对互联网流量的高速增长，通信运营商主要通过缓存(Cache)互联网方案来应对，以使得运营商可兼顾投资收益以及用户体验。目前，Cache互联网缓存解决方案具体过程为：

部署于接入网侧的接入设备接收多个用户终端发送的访问信息，例如，下载信息具体为用户终端访问的页面的统一资源定位符(Uniform ResourceLocator，简称：URL)，接入设备将用户终端发送的访问信息上报至云服务器。云服务器接收多个接入设备上报的访问信息，并将多个访问信息的访问次数按照由高到低的页序进行热点排序，将排序靠前的热点访问信息进行下载缓存，并将已下载的资源下发至多个接入设备。当接入设备再次接收到用户终端发送的访问信息时，如果已存储与访问信息对应的已下载资源时，则向用户终端发送已下载资源。

但是，现有技术中Cache互联网缓存解决方案也暴露出以下缺陷：对于大部分的家用用户来说，大量发散性的兴趣和爱好，产生了许多个性化的访问，并且每个访问的访问次数较少，使得大量的访问处于热点排序的后面，从而难于进行缓存，造成Cache互联网缓存解决方案的局限性；尤其是当访问信息为获取视频数据时，用户需浪费大量的时间等待接入设备从云服务器实时下载资源，降低用户体验度。

发明内容

本发明实施例提供了一种资源下载的方法与资源下载的装置，实现了通信设备利用待下载资源预测出用户期望下载的资源内容，并将预测出的资源内容缓存在本地，进而提高用户体验度。

在第一方面，本发明实施例提供了一种资源下载的方法，所述方法包括：

网关设备接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一URL；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL；

所述网关设备下载所述第二URL所标识的资源数据。

结合第一方面，在第一方面的第一种可能的实现方式中，所述下载所述预测下载资源的第二URL所标识的资源数据之后，还包括：

所述网关设备接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL；

所述网关设备从已下载的资源数据中查找到所述第二URL所标识的资源数据；

所述网关设备将查找到的资源数据发送给所述用户终端。

结合第一方面，在第一方面的第二种可能的实现方式中，所述网关设备下载所述第二URL所标识的资源数据，具体包括：

所述网关设备判断所述网关设备是否处于空闲状态；

如果所述网关设备处于空闲状态，则所述网关设备识别当前接收的报文流量是否小于流量阈值；

如果所述当前接收的报文流量小于所述流量阈值，则所述网关设备下载所述第二URL所标识的资源数据。

结合第一方面或者第一方面的第一种、第二种可能的实现方式，在第一方面的第三种可能的实现方式中，所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

所述网关设备根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

利用所述查找节点，所述网关设备从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，所述网关设备获取所述桶节点对应的数据节点；

所述网关设备确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，所述网关设备从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

结合第一方面，在第一方面的第四种可能的实现方式，所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的URL，具体包括：

所述网关设备根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述网关设备对所述第一URL进行哈希运算得到的哈希值；

利用所述查找节点，所述网关设备从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，所述网关设备获取所述桶节点对应的数据节点；

所述网关设备确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，所述网关设备从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

结合第一方面的第四种可能的实现方式，在第一方面的第五种可能的实现方式中，所述网关设备对所述第一URL进行哈希运算得到的哈希值，具体包括：

所述网关设备对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

所述网关设备对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

结合第一方面，在第一方面的第六种可能的实现方式中，所述网关设备下载所述第二URL所标识的资源数据之前还包括：

所述网关设备向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述网关设备接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据；

根据所述用户下载指令，所述网关设备下载所述第二URL所标识的资源数据。

在第二方面，本发明实施例提供了一种资源下载的装置，所述装置包括：

接收单元，用于接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一URL，并将所述第一URL传输至获取单元；

获取单元，用于接收所述接收单元传输的所述第一URL，根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并将所述第二URL传输至下载单元；

下载单元，用于接收所述获取单元传输的所述第二URL，下载所述第二URL所标识的资源数据。

结合第二方面，在第二方面的第一种可能的实现方式中，所述装置还包括：查找单元和发送单元，

所述接收单元还用于，接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL，并将所述第二URL传输至查找单元；

所述查找单元，用于接收所述接收单元传输的所述第二URL，从所述下载单元已下载的资源数据中查找到所述第二URL所标识的资源数据，并将查找到的资源数据传输至所述发送单元；

所述发送单元，用于接收所述查找单元传输的查找到的资源数据，将查找到的资源数据发送给所述用户终端。

结合第二方面，在第二方面的第二种可能的实现方式中，所述下载单元包括：判断子单元，用于判断所述装置是否处于空闲状态，并将判断结果传输至识别子单元；

识别子单元，用于接收所述判断子单元传输的判断结果，如果所述装置处于空闲状态，则识别当前接收的报文流量是否小于流量阈值，并将识别结果传输至下载子单元；

下载子单元，用于接收所述识别子单元传输的识别结果，如果所述当前接收的报文流量小于所述流量阈值，则下载所述第二URL所标识的资源数据。

结合第二方面、第二方面的第一种、或者第二种可能的实现方式，在第二方面的第三种可能的实现方式中，所述装置存储的所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述获取单元包括：

获取子单元，用于根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

查找子单元，用于利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

确认子单元，用于确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

结合第二方面、第二方面的第一种、或者第二种可能的实现方式，在第一方面的第四种可能的实现方式中，所述装置存储的预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述获取子单元还用于，根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述装置对所述第一URL进行哈希运算得到的哈希值；

所述查找子单元还用于，利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

所述确认子单元还用于，确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

结合第二方面的第四种可能的实现方式，在第二方面的第五种可能的实现方式中，所述获取子单元具体用于，对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

结合第二方面的上述任意一种可能的实现方式，在第二方面的第六种可能的实现方式中，所述发送单元还用于，向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述接收单元还用于，接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据，并将所述用户下载指令传输至所述下载单元；

所述下载单元还用于，接收所述接收单元传输的所述用户下载指令，根据所述用户下载指令，下载所述第二URL所标识的资源数据。

因此，通过应用本发明实施例提供的资源下载的方法与资源下载的装置，网关设备根据存储的预测模板库中模板信息，获取与第一待下载资源的第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并下载第二URL所标识的资源数据。由于网关设备可预测出用户期望下载的资源数据，将预测出的资源数据进行实时下载，即时地为用户提供，提高了用户体验度。避免了现有技术中当产生许多个个性化的访问时，大量的访问处于热点排序后面，从而难于进行缓存，造成Cache互联网缓存解决方案的局限性，以及浪费用户时间等待接入设备从云服务器实时下载资源，降低用户体验度的问题。

附图说明

图1为本发明实施例一提供的资源下载的方法流程图；

图2为本发明实施例提供的一种预测模板库示意图；

图3为本发明实施例提供的另一种预测模板库示意图；

图4为本发明实施例提供的数据节点包括的各标识关系示意图；

图5为本发明实施例二提供的资源下载的装置结构示意图；

图6为本发明实施例三提供的资源下载的装置硬件结果示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为便于对本发明的理解，下面将结合附图以具体实施例做进一步的解释说明，实施例并不构成对本发明实施例的限定。

实施例一

下面以图1为例详细说明本发明实施例一提供的资源下载的方法，图1为本发明实施例一提供的资源下载的方法流程图。本发明实施例的执行主体为网关设备，优选地，所述网关设备可为家庭网关、路由器、网关管理器等等，或者，所述网关设备可为接入网的网关设备、企业网关防火墙、交换机等等。本发明实施例的提供的资源下载的方法可应用在家庭内部，例如，网关设备接收到用户设备发送的下载请求，根据下载请求，预测出用户期望下载的资源数据，并将预测出的资源数据进行即时下载，以使得在用户期望使用与下载请求相关的资源数据时，即时地为用户提供，提高用户体验度。

如图1所示，该实施例具体包括以下步骤：

步骤110、网关设备接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一统一资源定位符URL。

具体地，用户终端接收用户的操作指令(例如，所述操作指令具体为用户希望访问某一视频网页，并对该视频网页中的视频资源进行下载)，用户终端根据用户的操作指令，生成第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一URL。

网关设备接收用户终端发送的第一下载请求。

步骤120、所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL。

具体地，网关设备在获取第一URL后，根据已存储的预测模板库中的模板信息，获取与第一URL存在对应关系的且用于标识第二待下载资源的第二URL。

进一步地，在一种实现方式中，在网关设备中已存储的预测模板库中还包括至少一个桶节点和至少一个数据节点，如图2所示，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL。

需要说明的是，所述桶节点还可不具有对应的数据节点，当桶节点不具有对应的数据节点时，则网关设备无法获取与第一URL存在对应关系的且用于标识第二待下载资源的第二URL。

在所述数据节点下还包括一些应用数据。

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

网关设备对第一URL进行正规化处理，所述正规化处理也即是将第一URL中携带的字母统一转换为小写字母以及将第一URL的编码格式转换为统一的编码格式。

网关设备对第一URL进行正规化处理后，从第一URL中获得查找节点，所述查找节点的键值为第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为第一URL。

例如，第一URL为www.sina.com.cn/abc/def/ghij/k...，则查找节点的键值为www.sina.com.cn的哈希值。

利用获得的查找节点，网关设备从预测模板库中查找与查找节点的键值匹配的桶节点；如果查找到与查找节点的键值匹配的桶节点，网关设备获取桶节点对应的数据节点，前述已说明，第一桶节点包含第一站点网址信息的哈希值，在本发明实施例中，第一桶节点包含的第一站点网址信息的哈希值与第一URL包含的查找节点的键值相同。

网关设备确认桶节点对应的数据节点中是否存在与查找节点的数据节点对应的数据节点；如果存在查找节点的数据节点对应的数据节点，网关设备从数据节点中获得预测信息，预测信息包含第二URL。

在另一种实现方式中，在网关设备中已存储的预测模板库中还包括至少一个桶节点和至少一个数据节点，如图3所示，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值。

需要说明的是，所述桶节点还可不具有对应的数据节点，当桶节点不具有对应的数据节点时，则网关设备无法获取与第一URL存在对应关系的且用于标识第二待下载资源的第二URL。

在所述数据节点下还包括一些应用数据。

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

网关设备对第一URL进行正规化处理，所述正规化处理也即是将第一URL中携带的字母统一转换为小写字母以及将第一URL的编码格式转换为统一的编码格式。

网关设备对第一URL进行正规化处理后，从第一URL获得查找节点，所述查找节点的键值为第一URL中的站点网址信息，所述查找节点对应的数据节点为网关设备对第一URL进行哈希运算得到的哈希值；

例如，第一待下载资源的URL为www.sina.com.cn/abc/def/ghi j/k...，则查找节点的键值为www.sina.com.cn。

利用获得的查找节点，网关设备从预测模板库中查找与查找节点的键值匹配的桶节点；如果查找到与查找节点的键值匹配的桶节点，网关设备获取桶节点对应的数据节点，前述已说明，第一桶节点包含第一站点网址信息，在本发明实施例中，第一桶节点包含的第一站点网址信息与第一URL包含的查找节点的键值相同。

网关设备确认桶节点对应的数据节点中是否存在与查找节点的数据节点对应的数据节点；如果存在查找节点的数据节点对应的数据节点，网关设备从所述数据节点中获得预测信息，预测信息包含第二URL。

其中，网关设备对第一URL进行哈希运算得到的哈希值，具体包括：

网关设备对第一URL的完整的字符串进行哈希运算得到的哈希值，或者，网关设备对第一URL的中去除站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

在本发明实施例中，所述桶节点对应的数据节点包括：资源数据标识(例如，所述资源数据标识具体为表征资源数据的链接归一化的MD5数据)；资源数据路径信息；同集合关联指针；推荐集合关联指针以及资源数据属性信息。

其中，所述同集合关联指针是指向预测的资源数据节点；预测集合关联指针是指向同域名站点下的同子类的推荐资源数据节点的首节点；所述资源数据属性信息包括资源数据标识、资源数据集合标识、资源数据站点子类标识、资源数据站点域名标识、资源数据站点小类标识、资源数据站点大类标识，如图4所示，资源数据属性信息包括的各标识关系。

所述同集合关联指针可包括最少3个指针，每个指针分别指向一个推荐的资源数据节点；所述推荐集合关联指针可包括最少3个指针，每个指针分别指向一个同域名站点下的同子类的预测资源数据节点的首节点。

更进一步地，在本发明实施例中，所述第一下载请求还携带用户身份信息。

网关设备从第一下载请求中获取用户身份信息，根据用户身份信息对用户身份进行识别，并且，网关设备还根据第一下载请求对与用户终端进行通信的通信协议和应用进行识别，以确定用户终端对应的用户希望访问某一视频网页，并对该视频网页中的视频资源进行下载。

步骤130、所述网关设备下载所述第二URL所标识的资源数据。

具体地，网关设备根据预测模板库中模板信息获取到第二待下载资源的第二URL后，将第二URL所标识的资源数据进行下载，以使得在用户期望使用与第一下载请求相关的资源数据时，即时地为用户提供，提高用户体验度。

进一步地，所述网关设备下载所述第二URL所标识的资源数据，具体包括：

网关设备判断网关设备是否处于空闲状态；如果网关设备处于空闲状态，则网关设备识别当前接收的报文流量是否小于流量阈值；如果当前接收的报文流量小于流量阈值，则网关设备下载所述第二URL所标识的资源数据。

可选地，在本发明实施例步骤130之后，还包括网关设备接收用户终端发送的携带有第二URL的第二下载请求，网关设备根据第二下载请求从已下载的资源数据中获取第二URL所标识资源数据，并将获取的资源数据发送给用户终端的步骤，通过该步骤，网关设备在预测出用户期望下载的资源数据并将预测出的资源数据进行即时下载后，在接收到用户终端再次发送的与第一下载请求相关的第二下载请求时，即时地为用户提供，提高用户体验度，具体步骤如下：

所述网关设备接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL；

所述网关设备从已下载的资源数据中查找到所述第二URL所标识的资源数据；

所述网关设备将查找到的资源数据发送给所述用户终端。

具体地，在一个例子中，用户终端发送的第一下载请求携带的用以标识第一待下载资源的第一URL为某一连续剧中第一部分的URL，网关设备按照前述步骤110-步骤130的描述根据第一URL获取与第一URL存在对应关系的且用于标识第二待下载资源的第二URL，所述第二URL也即是该连续剧中除第一部分外其他部分的URL，网关设备将该连续剧中除第一部分外其他部分进行下载。

当网关设备接收到用户终端发送的第二下载请求(第二下载请求携带该连续剧中其他部分的URL，即第二URL)时，网关设备从已下载的资源数据中查找第二URL所标识的资源数据，并将查找到的资源数据发送给用户终端，使得用户可不再浪费时间等待网关设备对第二URL所标识的资源数据的进行下载缓冲，网关设备即时地为用户提供用户所需的资源数据，提高用户体验度。

可选地，在本发明实施例步骤130之前还包括网关设备向用户终端发送预测通知消息，并根据用户终端反馈的用户下载指令对资源数据进行下载的步骤，通过该步骤，网关设备在获取与第一URL存在对应关系的且用于标识第二待下载资源的第二URL后，根据用户下载指令进行下载，避免过多的浪费本地存储资源。具体步骤如下：

所述网关设备向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述网关设备接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据；

根据所述用户下载指令，所述网关设备下载所述第二URL所标识的资源数据。

具体地，网关设备获取到第二URL后，将第二URL携带在预测通知消息中，并将预测通知消息发送至用户终端。

在本发明实施例中，网关设备可将第二URL通过列表的方式携带在预测通知消息中。

用户终端通过显示屏将网关设备发送的预测通知消息呈现给用户，用户对呈现的第二URL进行选择处理(例如，用户选择出希望下载的URL)，用户终端向网关设备发送用户操作指令。网关设备根据用户操作指令，对用户选择出的第二URL所标识的资源数据进行下载处理。

可选地，在本发明实施例中，网关设备中还存储着缓存列表以及非法列表。在缓存列表中存储着网关设备已下载缓存的URL；在非法列表中存储着网关设备确定的非法的URL。

网关设备根据第一URL，判断缓存列表或者非法列表中是否已存储着与第一URL相同的URL；如果在缓存列表中存储与第一URL相同的URL，则说明网关设备在接收第一下载请求之前，已接收过包括相同第一URL的下载请求，此时，网关设备可将缓存列表中URL所标识的资源数据发送至用户终端。

如果非法列表中存储与第一URL相同的URL，则说明网关设备在接收第一下载请求之前，已接收过包括相同第一URL的下载请求，并将该下载请求包含的URL确认为非法URL，则网关设备根据非法列表中的URL，向用户终端发送告警或者阻断提示，告知用户该下载请求不予执行。

如果缓存列表中以及非法列表中均未存储与第一URL相同的URL，则网关设备判断第一URL的数量是否超过预设的数量阈值；如果第一URL的数量超过数量阈值，则说明用户多次请求获取该第一URL所标识的资源数据，则网关设备执行步骤120和步骤130，将第一URL所标识的资源数据进行下载。

可选地，在本发明实施例步骤130之后还包括网关设备将第一URL存入缓存列表或者非法列表的步骤，通过该步骤，可使网关设备再次接收到具有相同URL的下载请求时，可快速地为用户终端提供资源数据，节省用户时间，同时也提高网关设备的工作效率。

具体地，网关设备根据已下载的第一URL所标识的资源数据，确定该资源数据为非法或者合法数据，当资源数据为合法数据时，网关设备将资源数据对应的第一URL存入缓存列表中；当资源数据为非法数据时，网关设备将资源数据对应的第一URL存入非法列表中。

其中，网关设备确定该资源数据为非法或者合法数据具体包括：网关设备识别资源数据中是否存在暴力、攻击性的内容；如果资源数据中存在暴力、攻击性的内容，则网关设备确定资源数据为非法数据；如果资源数据中未存在暴力、攻击性的内容，则网关设备确定资源数据为合法数据。

因此，通过应用本发明实施例提供的资源下载的方法，网关设备根据存储的预测模板库中模板信息，获取与第一待下载资源的第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并下载第二URL所标识的资源数据。由于网关设备可预测出用户期望下载的资源数据，将预测出的资源数据进行实时下载，即时地为用户提供，提高了用户体验度。避免了现有技术中当产生许多个个性化的访问时，大量的访问处于热点排序后面，从而难于进行缓存，造成Cache互联网缓存解决方案的局限性，以及浪费用户时间等待接入设备从云服务器实时下载资源，降低用户体验度的问题。。

需要说明的是，前述实施例中涉及的资源下载的方法可应用在部署于接入网侧的通信设备中，所述通信设备包括但不限制于网关、路由器、交换机、防火墙等等；或者，前述实施例中涉及的资源下载的方法可应用在现有技术中的Cache互联网缓存解决方案中，也就是，依照现有技术中的组网方式，应用本发明实施例提供的资源下载的方法，进一步地，还可将资源下载的方法在城域网、驻地网中进行部署，其组网方式与现有技术中的组网方式相同。

实施例二

相应地，本发明实施例还提供了一种资源下载的装置，实现结构如图5所示，用于实现本发明前述实施例一中的资源下载的方法。所述装置包括以下单元：接收单元510、获取单元520以及下载单元530。

所述装置包括的接收单元510，用于接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一URL，并将所述第一URL传输至获取单元；

获取单元520，用于接收所述接收单元传输的所述第一URL，根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并将所述第二URL传输至下载单元；

下载单元530，用于接收所述获取单元传输的所述第二URL，下载所述第二URL所标识的资源数据。

所述接收单元510还用于，接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL，并将所述第二URL传输至查找单元；

所述装置还包括：查找单元540，用于接收所述接收单元传输的所述第二URL，从已下载的资源数据中查找到所述第二URL所标识的资源数据，并将查找到的资源数据传输至发送单元；

发送单元550，用于接收所述查找单元传输的查找到的资源数据，将查找到的资源数据发送给所述用户终端。

所述下载单元530包括：判断子单元531，用于判断所述装置是否处于空闲状态，并将判断结果传输至识别子单元；

识别子单元532，用于接收所述判断子单元传输的判断结果，如果所述装置处于空闲状态，则识别当前接收的报文流量是否小于流量阈值，并将识别结果传输至下载子单元；

下载子单元533，用于接收所述识别子单元传输的识别结果，如果所述当前接收的报文流量小于所述流量阈值，则下载所述第二URL所标识的资源数据。

所述装置存储的所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述获取单元520包括：

获取子单元521，用于根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

查找子单元522，用于利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元521还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

确认子单元523，用于确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元521还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

所述装置存储的预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述获取子单元521还用于，根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述装置对所述第一URL进行哈希运算得到的哈希值；

所述查找子单元522还用于，利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元521还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

所述确认子单元523还用于，确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元521还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

所述获取子单元521具体用于，对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

所述发送单元550还用于，向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述接收单元510还用于，接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据，并将所述用户下载指令传输至下载单元；

所述下载单元530还用于，接收所述接收单元510传输的所述用户下载指令，根据所述用户下载指令，下载所述第二URL所标识的资源数据。

因此，通过应用本发明实施例提供的资源下载的装置，网关设备根据存储的预测模板库中模板信息，获取与第一待下载资源的第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并下载第二URL所标识的资源数据。由于网关设备可预测出用户期望下载的资源数据，将预测出的资源数据进行实时下载，即时地为用户提供，提高了用户体验度。避免了现有技术中当产生许多个个性化的访问时，大量的访问处于热点排序后面，从而难于进行缓存，造成Cache互联网缓存解决方案的局限性，以及浪费用户时间等待接入设备从云服务器实时下载资源，降低用户体验度的问题。

实施例三

另外，本发明实施例二提供的资源下载的装置还可以采用的实现方式如下，用以实现前述本发明实施例一中的资源下载的方法。如图6所示，所述资源下载的装置包括：收发器610、处理器620、存储器630、总线640和驱动电路650。

所述存储器630，用于存储指令和数据；

所述收发器610，用于接收用户终端发送下载请求，所述第一下载请求携带用以标识第一待下载资源的第一URL；

所述处理器620，用于读取存储器630中存储的指令和数据，执行：

根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL；

下载所述第二URL所标识的资源数据。

其中，所述处理器620可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。这些指令可以通过其中的处理器以配合实现及控制，用于执行本发明实施例揭示的方法。上述处理器还可以是通用处理器、数字信号处理器(Digital Signal Processing，DSP)、专用集成电路(application specific integrated circuit)、现成可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

其中，上述通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器，解码器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。

其中，驱动电路650，用于为资源下载的装置中的各个硬件提供驱动使得各个硬件能够正常工作。

另外，资源下载的装置的各个硬件组件通过总线系统640耦合在一起，其中总线系统640除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起，在图6中将各种总线都标为总线系统640。

进一步地，所述收发器610还用于，接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL；

所述处理器620还用于，读取存储器630中存储的指令和数据，执行：从已下载的资源数据中查找到所述第二URL所标识的资源数据；

所述收发器610还用于，将查找到的资源数据发送给所述用户终端。

进一步地，所述处理器620用于下载所述第二URL所标识的资源数据，具体包括：

判断所述装置是否处于空闲状态；

如果所述装置处于空闲状态，则识别当前接收的报文流量是否小于流量阈值；

如果所述当前接收的报文流量小于所述流量阈值，则下载所述第二URL所标识的资源数据。

进一步地，所述存储器630中存储的所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述处理器620用于根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

进一步地，所述存储器630中存储的所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述处理器620用于根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述网关设备对所述第一URL进行哈希运算得到的哈希值；

利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

所述处理器620用于对所述第一URL进行哈希运算得到的哈希值，具体包括：

对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

进一步地，所述收发器610还用于，向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述收发器610还用于，接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据；

所述处理器620还用于，根据所述用户下载指令，下载所述第二URL所标识的资源数据。

图6所示装置的实现可以参见图1中的相关描述。

因此，通过应用本发明实施例提供的资源下载的装置，网关设备根据存储的预测模板库中模板信息，获取与第一待下载资源的第一URL存在对应关系的且用于标识第二待预测下载资源的第二URL，并下载第二URL所标识的资源数据。由于网关设备可预测出用户期望下载的资源数据，将预测出的资源数据进行实时下载，即时地为用户提供，提高了用户体验度。避免了现有技术中当产生许多个个性化的访问时，大量的访问处于热点排序后面，从而难于进行缓存，造成Cache互联网缓存解决方案的局限性，以及浪费用户时间等待接入设备从云服务器实时下载资源，降低用户体验度的问题。

专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种资源下载的方法，其特征在于，所述方法包括：

网关设备接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一统一资源定位符URL；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL；

所述网关设备下载所述第二URL所标识的资源数据。

2.根据权利要求1所述的资源下载的方法，其特征在于，所述下载所述预测下载资源的第二URL所标识的资源数据之后，还包括：

所述网关设备接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL；

所述网关设备从已下载的资源数据中查找到所述第二URL所标识的资源数据；

所述网关设备将查找到的资源数据发送给所述用户终端。

3.根据权利要求1所述的资源下载的方法，其特征在于，所述网关设备下载所述第二URL所标识的资源数据，具体包括：

所述网关设备判断所述网关设备是否处于空闲状态；

如果所述网关设备处于空闲状态，则所述网关设备识别当前接收的报文流量是否小于流量阈值；

如果所述当前接收的报文流量小于所述流量阈值，则所述网关设备下载所述第二URL所标识的资源数据。

4.根据权利要求1至3中任一所述的资源下载的方法，其特征在于，所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

所述网关设备根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

利用所述查找节点，所述网关设备从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，所述网关设备获取所述桶节点对应的数据节点；

所述网关设备确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，所述网关设备从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

5.根据权利要求1至3中任一所述的资源下载的方法，其特征在于，所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述网关设备根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，具体包括：

所述网关设备根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述网关设备对所述第一URL进行哈希运算得到的哈希值；

利用所述查找节点，所述网关设备从预测模板库中查找与所述查找节点的键值匹配的桶节点；

如果查找到与所述查找节点的键值匹配的桶节点，所述网关设备获取所述桶节点对应的数据节点；

所述网关设备确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

如果存在所述查找节点的数据节点对应的数据节点，所述网关设备从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

6.根据权利要求5所述的资源下载的方法，其特征在于，所述网关设备对所述第一URL进行哈希运算得到的哈希值，具体包括：

所述网关设备对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

所述网关设备对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

7.根据权利要求1所述的资源下载的方法，其特征在于，所述网关设备下载所述第二URL所标识的资源数据之前还包括：

所述网关设备向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述网关设备接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据；

根据所述用户下载指令，所述网关设备下载所述第二URL所标识的资源数据。

8.一种资源下载的装置，其特征在于，所述装置包括：

接收单元，用于接收用户终端发送的第一下载请求，所述第一下载请求携带用以标识第一待下载资源的第一统一资源定位符URL，并将所述第一URL传输至获取单元；

获取单元，用于接收所述接收单元传输的所述第一URL，根据存储的预测模板库中模板信息，获取与所述第一URL存在对应关系的且用于标识第二待下载资源的第二URL，并将所述第二URL传输至下载单元；

下载单元，用于接收所述获取单元传输的所述第二URL，下载所述第二URL所标识的资源数据。

9.根据权利要求8所述的资源下载的装置，其特征在于，所述装置还包括：查找单元和发送单元，

所述接收单元还用于，接收所述用户终端发送的第二下载请求，所述第二下载请求携带所述第二URL，并将所述第二URL传输至所述查找单元；

所述查找单元，用于接收所述接收单元传输的所述第二URL，从所述下载单元已下载的资源数据中查找到所述第二URL所标识的资源数据，并将查找到的资源数据传输至所述发送单元；

所述发送单元，用于接收所述查找单元传输的查找到的资源数据，将查找到的资源数据发送给所述用户终端。

10.根据权利要求8所述的资源下载的装置，其特征在于，所述下载单元包括：判断子单元，用于判断所述装置是否处于空闲状态，并将判断结果传输至识别子单元；

识别子单元，用于接收所述判断子单元传输的判断结果，如果所述装置处于空闲状态，则识别当前接收的报文流量是否小于流量阈值，并将识别结果传输至下载子单元；

下载子单元，用于接收所述识别子单元传输的识别结果，如果所述当前接收的报文流量小于所述流量阈值，则下载所述第二URL所标识的资源数据。

11.根据权利要求8至10中任一所述的资源下载的装置，其特征在于，所述装置存储的所述预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息的哈希值，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL；

所述获取单元包括：

获取子单元，用于根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息的哈希值，所述查找节点对应的数据节点为所述第一URL；

查找子单元，用于利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

确认子单元，用于确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

12.根据权利要求8至10中任一所述的资源下载的装置，其特征在于，所述装置存储的预测模板库中还包括至少一个桶节点和至少一个数据节点，每个桶节点对应至少一个数据节点，第一桶节点包含第一站点网址信息，第一桶节点对应的第一数据节点包含第一站点信息所标识的站点下的第一页面的URL的哈希值；第一桶节点对应的第二数据节点包含第一站点信息所标识的站点下的第二页面的URL的哈希值；

所述获取子单元还用于，根据所述第一URL获得查找节点，所述查找节点的键值为所述第一URL中的站点网址信息，所述查找节点对应的数据节点为所述装置对所述第一URL进行哈希运算得到的哈希值；

所述查找子单元还用于，利用所述查找节点，从预测模板库中查找与所述查找节点的键值匹配的桶节点；

所述获取子单元还用于，如果查找到与所述查找节点的键值匹配的桶节点，获取所述桶节点对应的数据节点；

所述确认子单元还用于，确认所述桶节点对应的数据节点中是否存在与所述查找节点的数据节点对应的数据节点；

所述获取子单元还用于，如果存在所述查找节点的数据节点对应的数据节点，从所述数据节点中获得预测信息，所述预测信息包含所述第二URL。

13.根据权利要求12所述的资源下载的装置，其特征在于，所述获取子单元具体用于，对所述第一URL的完整的字符串进行哈希运算得到的哈希值，或者

对所述第一URL的中去除所述站点网址信息之后剩余的字符串进行哈希运算得到的哈希值。

14.根据权利要求9所述的资源下载的装置，其特征在于，所述发送单元还用于，向所述用户终端发送预测通知消息，所述预测通知消息包括所述第二URL；

所述接收单元还用于，接收所述用户终端根据所述预测通知消息发送的用户下载指令，所述用户下载指令用于指示用户是否同意下载所述第二URL所标识的资源数据，并将所述用户下载指令传输至所述下载单元；

所述下载单元还用于，接收所述接收单元传输的所述用户下载指令，根据所述用户下载指令，下载所述第二URL所标识的资源数据。