CN103825916A - 一种资源下载方法及系统 - Google Patents

一种资源下载方法及系统 Download PDF

Info

Publication number
CN103825916A
CN103825916A CN201210464659.3A CN201210464659A CN103825916A CN 103825916 A CN103825916 A CN 103825916A CN 201210464659 A CN201210464659 A CN 201210464659A CN 103825916 A CN103825916 A CN 103825916A
Authority
CN
China
Prior art keywords
resource
isp
cache node
area network
local area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201210464659.3A
Other languages
English (en)
Other versions
CN103825916B (zh
Inventor
刘刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201210464659.3A priority Critical patent/CN103825916B/zh
Publication of CN103825916A publication Critical patent/CN103825916A/zh
Application granted granted Critical
Publication of CN103825916B publication Critical patent/CN103825916B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本发明适用于网络通信技术领域,提供了一种资源的下载方法及系统,所述方法包括:将资源缓存到互联网服务提供商ISP缓存节点,所述ISP缓存节点设置于ISP区域网络出口;下载客户端向下载服务器查询需要下载的资源标识和资源统一资源定位符URL,所述资源URL包括具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;下载客户端优先从ISP缓存节点下载所述资源,所述ISP缓存节点为具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点。本发明可以有效降低跨网访问的网间流量和跨区域访问的流量。

Description

一种资源下载方法及系统
技术领域
本发明属于网络通信领域,尤其涉及一种资源下载方法及系统。
背景技术
目前,在网络带宽服务领域,P2SP(Peer to Server and Peer,点对服务器和点)技术可以在网络上的各个终端之间进行资源的传递,P2SP技术包含P2P(Peerto Peer,点对点)技术和P2S(Peer to Server,点对服务器)技术。P2SP能够有效地把原本孤立的服务器和其镜像资源以及P2P资源整合在一起,它在下载稳定性和下载速度上都比传统的P2P或P2S有了非常大的提高,因此在现有的多种下载软件中获得了广泛的应用。
请参阅图1,为现有技术提供的P2SP的结构图,基于该结构的P2SP,其下载流程简述如下:
1、下载客户端需要下载资源时,从互联网或者资源网站获取资源的原始统一资源定位符(Universal Resource Locator,URL);
2、根据资源的原始URL访问资源索引服务器,从资源索引服务器中查询该资源的资源标识(如资源Hash)和所有具有该资源的URL,并将查询到的资源标识和所有具有该资源的URL下发至下载客户端;
3、下载客户端根据具有该资源的URL从网络中下载该资源;
4、下载客户端将资源信息上传到Tracker服务器,使得其他客户端通过Tracker服务器可以查询到已经下载该资源的节点信息和正在下载该资源的节点信息;
5、其它下载客户端开始多源P2P下载,在节点之间相互交换数据;
6、下载完成以后,下载客户端将资源下载信息上报给统计服务器。
但由于国内网络的复杂性和各互联网服务提供商(Internet Service Provider,ISP)的利益点不一样,网络的互联互通一直存在问题,资源通常都在大的ISP上,对于没有足够用户的小ISP,单靠P2P内部用户的节点难以形成有效的P2P规模,所以在这类小ISP内部的网络用户通常需要进行跨网访问。跨网访问将提高运营商的网间结算成本和网间结算复杂度。
而对于大的ISP,虽然其资源比较充足,跨网访问量不是很大,但由于网络分层的原因,使得即使资源在同一个ISP中,也需要进行跨区域访问,即同一个ISP中的节点跨越城市访问另外一个城市或者区域的节点,跨区域方位将造成同一个ISP骨干网的拥挤。
由此可见,随着互联网业务发展的,用户对带宽的需求与日俱增,对网络带宽资源需求也逐步变多,特别是在发布热门文件或者补丁文件时,小ISP跨网流量很多,和大的运营商上结算成本很高,所以会对跨网访问做些限制,结果导致下载速度和成功率无法保证;而对于大ISP运营商,通常在每一个区域比如省或者城市为单位,跨区域的访问流量很大会造成骨干网拥塞,并且下载速度也会变慢。
发明内容
本发明的目的是提供一种资源下载方法及系统,能够有效降低资源下载过程中的跨网访问的网间流量和跨区域访问的流量。
本发明实施例是这样实现的,一种资源的下载方法,所述方法包括:
将资源缓存到互联网服务提供商ISP缓存节点,所述ISP缓存节点设置于ISP区域网络出口;
下载客户端向下载服务器查询需要下载的资源标识和资源统一资源定位符URL,所述资源URL包括具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
下载客户端优先从ISP缓存节点下载所述资源,所述ISP缓存节点为具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点。
本发明实施例的另一目的在于提供一种资源的下载系统,所述系统包括:
ISP缓存节点,用于缓存资源,所述ISP缓存节点设置于互联网服务提供商ISP区域网络出口;
下载服务器,用于查询下载客户端需要下载的资源标识和统一资源定位符URL,所述资源URL包括具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
下载客户端,优先从ISP缓存节点下载所述资源,所述ISP缓存节点为具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点。
在本发明实施例中,通过将下载客户端需要下载的资源预先缓存到设置于ISP区域网络出口的ISP缓存节点上,在下载客户端需要下载资源时,从设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点中下载该资源,从而能够有效降低跨网访问的网间流量和跨区域访问的流量,进而降低网络下载时服务器端的带宽压力和骨干网的带宽压力,而且由于下载客户端直接从设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源,从而提高下载速度和下载成功率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是现有技术提供的P2SP的结构图;
图2是本发明实施例提供的资源下载方法的实现流程图;
图3是本发明实施例提供的图2中的S101的实现流程图;
图4是本发明实施例提供的资源下载的结构框图;
图5是本发明实施例提供的资源下载流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在本发明实施例中,通过将下载客户端需要下载的资源预先缓存到设置于ISP区域网络出口的ISP缓存节点上,在下载客户端需要下载资源时,从设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点中下载该资源,从而能够有效降低跨网访问的网间流量和跨区域访问的流量。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
本发明实施例提供的资源下载方法适用的P2SP系统包括下载客户端、下载服务器和设置于ISP区域网络出口的ISP缓存节点。该P2SP系统的通信原理如下:
将资源预先缓存到ISP缓存节点上;
下载客户端在获取到需要下载的资源的原始URL后,向下载服务器查询该资源的资源标识和资源URL。其中资源标识可以为资源Hash。资源URL是指具有该资源的URL,该资源URL包括具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。
下载客户端优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点中下载资源。
图2示出了本发明实施例提供的资源下载方法的实现流程,详述如下:
S101,将资源缓存到设置于ISP区域网络出口的ISP缓存节点上。
其中需要缓存的资源包括但不限于需要大量带宽的资源,如ISP区域网络中下载的热门资源或者需要发布的游戏,网页游戏素材或者安全漏洞补丁等。其中将资源缓存到设置于ISP区域网络出口的ISP缓存节点上的具体过程可以采用现有技术提供的任意一种方式,也可以采用本发明实施例提供的直接将资源缓存至ISP缓存节点上,或者采用本发明实施例提供的如图3所示的方式。
S102,下载客户端向下载服务器查询需要下载的资源标识和资源URL。其中资源URL包括具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。其具体过程如下:
A、下载客户端在获取到资源的原始URL时,向下载服务器发送多资源获取请求。
在本实施例中,下载客户端从互联网或者资源网站获取到资源的原始URL后,向下载服务器发送多资源获取请求。
B、下载服务器接收到多资源获取请求后,根据资源的原始URL查询资源的资源标识和资源URL。
其中资源URL包括具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。在本发明另一实施例中,该资源URL还包括下载服务器中存储的具有该资源的其他URL。其中根据资源的原始URL查询资源的资源标识和资源URL的具体过程属于现有技术,在此不再赘述。
C、下载服务器将查询到的资源标识和资源URL下发至下载客户端。
S103,下载客户端优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源。
在本实施例中,下载客户端在查询到需要下载的资源标识和资源URL后,优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源,如果从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源失败,则再从其他资源URL中下载资源。
在本实施例中,通过将资源预先缓存在ISP缓存节点中,下载客户端在下载资源时,优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源,由于下载客户端与ISP缓存节点在同一ISP区域网络中,从而可以有效降低跨网访问的网间流量和跨区域访问的流量,进而降低网络下载时服务器端的带宽压力和骨干网的带宽压力,而且由于下载客户端直接从设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源,从而提高下载速度和下载成功率。
为了进一步减少跨网访问的网间流量和跨区域访问的流量,在本发明另一实施例中,该方法还包括:
配置ISP缓存节点的下载响应条件。其中下载响应条件包括但不限于下载客户端所属的ISP区域网络与ISP缓存节点所属的ISP区域网络是否相同等。
在接收到下载客户端的资源下载请求时,依据该下载响应条件响应该资源下载请求。
在本实施例中,当下载响应条件包括为下载客户端所属的ISP区域网络与ISP缓存节点所属的ISP区域网络是否相同时,依据该下载响应条件响应该资源下载请求的具体过程如下:
ISP缓存节点响应其所属的ISP区域网络中的下载客户端的资源下载请求,拒绝响应其所属的ISP区域网络以外的下载客户端的资源下载请求。其具体过程如下:
ISP缓存节点判断该下载客户端是否为其所属的ISP区域网络中的下载客户端,即判断该下载客户端所属的ISP区域网络是否与ISP缓存节点所属的ISP区域网络相同,如果是,则响应该下载客户端的资源下载请求,将资源传输至下载客户端,否则拒绝响应该下载客户端的资源下载请求。
在本发明另一实施例中,该方法还包括:
下载客户端定期向下载服务器上报在线情况和本地存储的资源信息。
这样当该下载客户端中存储有资源时,其他下载客户端通过下载服务器可以获知该下载客户端中存储有该资源,使得其他下载客户端可以从该下载客户端中下载资源。
图3示出了本发明实施例提供的图2中的S101的具体流程,详述如下:
S301,下载服务器获取每个ISP区域网络中需要缓存的资源和该资源的URL。其中需要缓存的资源包括但不限于下载的热门资源。其中下载服务器获取每个ISP区域网络中的热门资源的具体过程如下:
下载客户端将资源下载信息上报至下载服务器。
其中资源下载信息包括但不限于下载时间、下载速度、下载结果、资源大小、从全局节点下载数据量和从局部节点下载数据量等。
下载服务器根据资源下载信息统计每个ISP区域网络中的热门资源,并获取每个ISP区域网络中的热门资源的URL。其具体过程可以采用现有技术提供的任意一种方式实现。
S302,下载服务器将各ISP区域网络中需要下载的资源的URL分发至设置于对应的ISP区域网络出口的ISP缓存节点。
当需要下载的资源为各ISP区域网络中热门资源时,则将各ISP区域网络中热门资源的URL分发至设置于对应的ISP区域网络出口的ISP缓存节点。为了便于理解,举例说明如下:
假设下载服务器获取到的ISP区域网络中的热门资源和每个ISP区域网络中的热门资源的URL如表1所示:
表1
ISP区域网络 热门资源 热门资源的URL
ISP1 热门资源1 URL1
ISP1 热门资源2 URL2
ISP2 热门资源1 URL1
ISP2 热门资源3 URL3
ISP3 热门资源4 URL4
则根据表1的内容可知,ISP1区域网络包含热门资源1和热门资源2共2个热门资源,其中热门资源1的URL为URL1,热门资源2的URL为URL2。ISP2区域网络包括热门资源1和热门资源3共2个热门资源,其中热门资源1的URL为URL1,热门资源3的URL为URL3。ISP3区域网络包含热门资源4共1个热门资源,热门资源4的URL为URL4。
此时,下载服务器将热门资源1的URL(即URL1)和热门资源2的URL(即URL2)发送至设置于ISP1区域网络出口的ISP缓存节点,将将热门资源1的URL(即URL1)和热门资源3的URL(即URL3)发送至设置于ISP2区域网络出口的ISP缓存节点,将热门资源4的URL(即URL4)发送至设置于ISP3区域网络出口的ISP缓存节点。
S303,ISP缓存节点根据接收到的资源的URL将资源从网络下载并缓存在本地。当接收到的资源的URL为热门资源的URL时,则根据接收到的热门资源的URL将资源从网络下载并缓存在本地。
其中ISP缓存节点从网络下载资源的方式可以采用现有技术提供的任意一种方式,如P2SP,P2P,P2S等。
S304,ISP缓存节点向下载服务器上报其缓存的资源信息。其中资源信息包括但不限于资源URL,资源所属的ISP区域网络,资源标识,资源大小等。其中资源URL是指该资源在ISP缓存节点中的位置,其具体的生成方法可以为该ISP缓存节点的域名加上该资源的Hash或者资源名称。
为了节省ISP缓存节点的空间,在本发明另一实施例中,该方法还包括:
下载服务器获取各ISP缓存节点中需要删除的资源,并向ISP缓存节点发送资源删除指令,该资源删除指令包含需要删除的资源标识。其具体过程如下:
下载客户端将资源下载信息上报至下载服务器。
下载服务器根据资源下载信息统计各ISP缓存节点中需要删除的资源。其具体过程属于现有技术,在此简述如下:
当下载服务器根据资源下载信息统计出某ISP缓存节点中缓存的资源在一段时间内的下载次数低于预设值时,则确定该资源为要删除的资源。可以理解,还可以采用其他方式统计出各ISP缓存节点中需要删除的资源,在此不再一一举例说明。
ISP缓存节点接收到删除指令时,删除该删除指令包含的资源标识所对应的资源。
图4示出了本发明实施例提供的资源下载系统的结构,为了便于说明仅示出了与本发明实施例相关的部分。
该系统可以用于P2SP网络,可以是运行于P2SP网络内的软件单元、硬件单元或者软硬件相结合的单元,也可以运行于P2SP网络的应用系统中。该资源下载系统包括ISP缓存节点1,下载服务器2和若干下载客户端3,其中:
ISP缓存节点1缓存资源,该ISP缓存节点1设置于ISP区域网络出口。
其中需要缓存的资源包括但不限于需要大量带宽的资源,如ISP区域网络中下载的热门资源或者需要发布的游戏,网页游戏素材或者安全漏洞补丁等。
下载服务器2查询下载客户端3需要下载的资源标识和资源URL。其中资源URL包括具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。
该下载服务器2包括资源索引服务器组21和ISP缓存管理服务器22。其中:
资源索引服务器组21接收下载客户端发送的多资源获取请求,从自身获取资源标识和资源URL,同时向ISP缓存管理服务器22查询具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。
ISP缓存管理服务器22查询资源索引服务器组21请求的具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。
其中资源索引服务器组21接收下载客户端发送的多资源获取请求,从自身获取资源标识和资源URL的具体过程属于现有技术,在此不再赘述。
资源索引服务器组21接收下载客户端发送的多资源获取请求,向ISP缓存管理服务器22查询具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL的具体过程如下:
资源索引服务器组21接收下载客户端发送的多资源获取请求后,将该多资源获取请求转发至ISP缓存管理服务器22;
ISP缓存管理服务器22在接收到多资源获取请求时,查询其自身存储的各ISP缓存节点的资源信息,获取具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL,并将具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL返回资源索引服务器组21。
下载客户端3优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源。
在本实施例中,下载客户端3在查询到需要下载的资源标识和资源URL后,优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源,如果从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源失败,则再从其他资源URL中下载资源。
在本发明另一实施例中,下载服务器2还包括统计服务器23和ISP缓存分发服务器24,ISP缓存节点包括资源下载代理11、资源上报代理12和加速节点服务器13。其中:
统计服务器23获取每个ISP区域网络中需要缓存的资源和该资源的URL。其中需要缓存的资源包括但不限于下载的热门资源。其中下载服务器获取每个ISP区域网络中的热门资源的具体过程如下:
下载客户端将资源下载信息上报至统计服务器23。
其中资源下载信息包括但不限于下载时间、下载速度、下载结果、资源大小、从全局节点下载数据量和从局部节点下载数据量等。
统计服务器23根据资源下载信息统计每个ISP区域网络中的热门资源,并获取每个ISP区域网络中的热门资源的URL。其具体过程可以采用现有技术提供的任意一种方式实现。
ISP缓存分发服务器24将各ISP区域网络中需要下载的资源的URL分发至对应的资源下载代理11。
当需要下载的资源为各ISP区域网络中热门资源时,则将各ISP区域网络中热门资源的URL分发至对应的资源下载代理11。其具体过程如上,在此不再赘述。
资源下载代理11根据接收到的资源的URL将资源从网络下载并缓存在本地。当接收到的资源的URL为热门资源的URL时,则根据接收到的热门资源的URL将资源从网络下载并缓存在本地。
资源上报代理12向ISP缓存管理服务器22上报本地缓存的资源信息。其中资源信息包括但不限于资源URL,资源所属的ISP区域网络,资源标识,资源大小等。其中资源URL是指该资源在ISP缓存节点中的位置,其具体的生成方法可以为该ISP缓存节点的域名加上该资源的Hash或者资源名称。
在本发明另一实施例中,该ISP缓存分发服务器24还用于获取各ISP缓存节点中需要删除的资源,并向资源下载代理11发送资源删除指令,该资源删除指令包含需要删除的资源标识。其具体过程如下:
下载客户端将资源下载信息上报至统计服务器。
统计服务器根据资源下载信息统计各ISP缓存节点中需要删除的资源,并将各ISP缓存节点中需要删除的资源同步到ISP缓存分发服务器24。其具体过程属于现有技术,在此简述如下:
当统计服务器根据资源下载信息统计出某ISP缓存节点中缓存的资源在一段时间内的下载次数低于预设值时,则确定该资源为要删除的资源。可以理解,还可以采用其他方式统计出各ISP缓存节点中需要删除的资源,在此不再一一举例说明。
该资源下载代理11接收到删除指令时,删除该删除指令包含的资源标识所对应的资源。
在本发明另一实施例中,该ISP缓存节点1还包括加速节点服务器13。该加速节点服务器13将ISP缓存节点缓存的资源传输至下载客户端3。
在本实施例中,该加速节点服务器13在接收到下载客户端3的资源下载请求时,将ISP缓存节点缓存的资源传输至下载客户端3。
在本发明另一实施例中,该加速节点服务器13还用于在接收到下载客户端的资源下载请求时,依据配置的下载响应条件响应该资源下载请求。其中下载响应条件包括但不限于下载客户端所属的ISP区域网络与ISP缓存节点所属的ISP区域网络是否相同等。
当下载响应条件包括为下载客户端所属的ISP区域网络与ISP缓存节点所属的ISP区域网络是否相同时,加速节点服务器13具体用于响应其所属的ISP区域网络中的下载客户端的资源下载请求,拒绝响应其所属的ISP区域网络以外的下载客户端的资源下载请求。其具体过程如下:
加速节点服务器13判断该下载客户端是否为其所属的ISP区域网络中的下载客户端,即判断该下载客户端所属的ISP区域网络是否与ISP缓存节点所属的ISP区域网络相同,如果是,则响应该下载客户端的资源下载请求,将资源传输至下载客户端,否则拒绝响应该下载客户端的资源下载请求。
在本发明另一实施例中,该系统还包括Track服务器组25。该Track服务器组25接收下载客户端3上报的在线情况和本地存储的资源信息。
为了使本发明实施例提供的资源下载系统和资源下载方法更清楚,易于理解,以下以一个具体示例说明资源下载过程,请参阅图5:
1、统计服务器将统计信息同步到ISP缓存分发服务器。其包括:统计服务器根据下载客户端上报的资源下载信息获取每个ISP区域网络中下载的热门资源和该热门资源的URL,并将每个ISP区域网络中下载的热门资源和该热门资源的URL同步到ISP缓存分发服务器;
2、ISP缓存分发服务器将各ISP区域网络中热门资源的URL分发至设置于对应的ISP区域网络出口的ISP缓存节点分发给资源下载代理;
3、资源下载代理从网络下载需要缓存的资源在本地磁盘上,通过资源上报代理将本地缓存的资源上报至ISP缓存管理服务器,如上报该依据资源构造的资源URL,资源所属的ISP区域网络及资源标识,如资源Hash,资源大小等;
4、下载客户端从网络获取资源的原始URL;
5、下载客户端从资源索引服务器组查询资源标识和资源URL;
6、资源索引服务器组从ISP缓存管理服务器中查询ISP具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
7、下载客户端通过加速节点服务器优先从具有该资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点下载资源;
8、下载客户端向统计服务器上报资源下载信息;
9、下载客户端定时向Tracker服务器组上传在线情况和本地存储的资源信息。
值得注意的是,上述系统,所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本领域普通技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,如ROM/RAM、磁盘、光盘等。
在本发明实施例中,通过将下载客户端需要下载的资源预先缓存到设置于ISP区域网络出口的ISP缓存节点上,在下载客户端需要下载资源时,优先从设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点中下载该资源,从而能够有效降低跨网访问的网间流量和跨区域访问的流量。通过配置ISP缓存节点的下载响应条件,使得ISP缓存节点仅响应其所属的ISP区域网络中的下载客户端的资源下载请求,从而进一步减少跨网访问的网间流量和跨区域访问的流量。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (11)

1.一种资源的下载方法,其特征在于,所述方法包括:
将资源缓存到互联网服务提供商ISP缓存节点,所述ISP缓存节点设置于ISP区域网络出口;
下载客户端向下载服务器查询需要下载的资源标识和资源统一资源定位符URL,所述资源URL包括具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
下载客户端优先从ISP缓存节点下载所述资源,所述ISP缓存节点为具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点。
2.如权利要求1所述的方法,其特征在于,将资源缓存到ISP缓存节点具体包括:
下载服务器获取每个ISP区域网络中需要缓存的资源和所述资源的URL;
下载服务器将各ISP区域网络中需要下载的资源的URL分发至设置于对应ISP区域网络出口的ISP缓存节点;
ISP缓存节点根据接收到的资源的URL将资源从网络下载并缓存在本地;
ISP缓存节点向下载服务器上报其缓存的资源信息。
3.如权利要求2所述的方法,其特征在于,所述每个ISP区域网络中需要缓存的资源包括每个ISP区域网络中下载的热门资源。
4.如权利要求2所述的方法,其特征在于,所述方法还包括:
下载服务器获取各ISP缓存节点中需要删除的资源,并向ISP缓存节点发送资源删除指令,所述资源删除指令包含需要删除的资源标识;
ISP缓存节点接收到删除指令时,删除所述删除指令包含的资源标识所对应的资源。
5.如权利要求1至4任一项所述的方法,其特征在于,所述方法还包括:
ISP缓存节点响应其所属的ISP区域网络中的下载客户端的资源下载请求,拒绝响应其所属的ISP区域网络以外的下载客户端的资源下载请求。
6.一种资源的下载系统,其特征在于,所述系统包括:
ISP缓存节点,用于缓存资源,所述ISP缓存节点设置于互联网服务提供商ISP区域网络出口;
下载服务器,用于查询下载客户端需要下载的资源标识和统一资源定位符URL,所述资源URL包括具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
下载客户端,优先从ISP缓存节点下载所述资源,所述ISP缓存节点为具有所述资源的设置于所述下载客户端所属的ISP区域网络出口的ISP缓存节点。
7.如权利要求6所述的系统,其特征在于,所述下载服务器包括:
资源索引服务器组,用于接收下载客户端发送的多资源获取请求,从自身获取资源标识和资源URL,同时向ISP缓存管理服务器查询具有所述资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL;
ISP缓存管理服务器,用于查询所述资源索引服务器组请求的具有所述资源的设置于该下载客户端所属的ISP区域网络出口的ISP缓存节点的URL。
8.如权利要求6所述的装置,其特征在于,所述下载服务器还包括:
统计服务器,用于获取每个ISP区域网络中需要缓存的资源和该资源的URL;
ISP缓存分发服务器,用于将各ISP区域网络中需要下载的资源的URL分发至对应的资源下载代理;
所述ISP缓存节点包括:
资源下载代理,用于根据接收到的资源的URL将资源从网络下载并缓存在本地;
资源上报代理,用于向所述ISP缓存管理服务器上报本地缓存的资源信息。
9.如权利要求8所述的系统,其特征在于,所述ISP缓存节点还包括:
加速节点服务器,用于将ISP缓存节点缓存的资源传输至下载客户端。
10.如权利要求9所述的系统,其特征在于,所述加速节点服务器还用于响应其所属的ISP区域网络中的下载客户端的资源下载请求,拒绝响应其所属的ISP区域网络以外的下载客户端的资源下载请求。
11.如权利要求8至10任一项所述的系统,其特征在于,所述ISP缓存分发服务器还用于获取各ISP缓存节点中需要删除的资源,并向所述资源下载代理发送资源删除指令,所述资源删除指令包含需要删除的资源标识;
所述资源下载代理接收到所述删除指令时,删除所述删除指令包含的资源标识所对应的资源。
CN201210464659.3A 2012-11-16 2012-11-16 一种资源下载方法及系统 Active CN103825916B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210464659.3A CN103825916B (zh) 2012-11-16 2012-11-16 一种资源下载方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210464659.3A CN103825916B (zh) 2012-11-16 2012-11-16 一种资源下载方法及系统

Publications (2)

Publication Number Publication Date
CN103825916A true CN103825916A (zh) 2014-05-28
CN103825916B CN103825916B (zh) 2018-07-10

Family

ID=50760743

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210464659.3A Active CN103825916B (zh) 2012-11-16 2012-11-16 一种资源下载方法及系统

Country Status (1)

Country Link
CN (1) CN103825916B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104618430A (zh) * 2014-12-25 2015-05-13 华为技术有限公司 一种实现互联网缓存系统资源回源的方法和系统
CN104980482A (zh) * 2014-12-24 2015-10-14 深圳市腾讯计算机系统有限公司 文件发送方法及装置、文件接收方法及装置
CN105243078A (zh) * 2015-08-28 2016-01-13 北京奇艺世纪科技有限公司 一种文件资源的分发方法、系统和装置
CN106302722A (zh) * 2016-08-13 2017-01-04 上海新时达电气股份有限公司 电梯物联网网关及电梯物联网的数据传输方法
CN109474696A (zh) * 2018-12-10 2019-03-15 北京邮电大学 一种网络服务方法、装置、电子设备及可读存储介质
CN112788126A (zh) * 2020-12-31 2021-05-11 北京达佳互联信息技术有限公司 资源下载方法、装置、服务器和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1552024A (zh) * 2001-08-03 2004-12-01 ��˹��ŵ�� 具有分布式高速缓存的数据网络所用的方法、系统和终端
CN1937554A (zh) * 2006-09-30 2007-03-28 南京信风软件有限公司 一种使p2p文件下载流量本地化的方法
CN101232464A (zh) * 2008-02-28 2008-07-30 清华大学 基于时间权参数的p2p实时流媒体缓存替换方法
WO2010048774A1 (zh) * 2008-10-27 2010-05-06 中国移动通信集团公司 一种流媒体分发系统、方法及装置
CN102739712A (zh) * 2011-04-08 2012-10-17 中国移动通信集团贵州有限公司 一种网络缓存数据分发的方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1552024A (zh) * 2001-08-03 2004-12-01 ��˹��ŵ�� 具有分布式高速缓存的数据网络所用的方法、系统和终端
CN1937554A (zh) * 2006-09-30 2007-03-28 南京信风软件有限公司 一种使p2p文件下载流量本地化的方法
CN101232464A (zh) * 2008-02-28 2008-07-30 清华大学 基于时间权参数的p2p实时流媒体缓存替换方法
WO2010048774A1 (zh) * 2008-10-27 2010-05-06 中国移动通信集团公司 一种流媒体分发系统、方法及装置
CN102739712A (zh) * 2011-04-08 2012-10-17 中国移动通信集团贵州有限公司 一种网络缓存数据分发的方法和系统

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104980482A (zh) * 2014-12-24 2015-10-14 深圳市腾讯计算机系统有限公司 文件发送方法及装置、文件接收方法及装置
CN104980482B (zh) * 2014-12-24 2019-09-13 深圳市腾讯计算机系统有限公司 文件发送方法及装置、文件接收方法及装置
CN104618430A (zh) * 2014-12-25 2015-05-13 华为技术有限公司 一种实现互联网缓存系统资源回源的方法和系统
CN105243078A (zh) * 2015-08-28 2016-01-13 北京奇艺世纪科技有限公司 一种文件资源的分发方法、系统和装置
CN105243078B (zh) * 2015-08-28 2018-09-28 北京奇艺世纪科技有限公司 一种文件资源的分发方法、系统和装置
CN106302722A (zh) * 2016-08-13 2017-01-04 上海新时达电气股份有限公司 电梯物联网网关及电梯物联网的数据传输方法
CN109474696A (zh) * 2018-12-10 2019-03-15 北京邮电大学 一种网络服务方法、装置、电子设备及可读存储介质
CN109474696B (zh) * 2018-12-10 2020-05-08 北京邮电大学 一种网络服务方法、装置、电子设备及可读存储介质
CN112788126A (zh) * 2020-12-31 2021-05-11 北京达佳互联信息技术有限公司 资源下载方法、装置、服务器和存储介质
CN112788126B (zh) * 2020-12-31 2023-05-09 北京达佳互联信息技术有限公司 资源下载方法、装置、服务器和存储介质

Also Published As

Publication number Publication date
CN103825916B (zh) 2018-07-10

Similar Documents

Publication Publication Date Title
Xu et al. Saving energy on the edge: In-memory caching for multi-tier heterogeneous networks
CN104618506B (zh) 一种众包的内容分发网络系统、方法与装置
JP4938074B2 (ja) リソースの位置情報の要求方法、当該方法のためのユーザノードおよびサーバ
CN103825916A (zh) 一种资源下载方法及系统
CN102647357B (zh) 一种处理内容路由方法及装置
CN102833293A (zh) P2sp网络中资源下载的方法及客户端
CN105450780A (zh) 一种cdn系统及其回源方法
CN103581245A (zh) 一种内容分发网络内容分发的方法及系统
CN104253838A (zh) 一种cdn节点与cdn服务系统
CN103166991A (zh) 一种基于p2p和云存储实现跨节点存储的方法和装置
CN104284201A (zh) 一种视频内容的处理方法和装置
CN101237429A (zh) 基于内容分发网络的流媒体直播系统、方法及装置
JP5259835B2 (ja) データノード装置、ピア情報取得方法およびシステム
JP2002318720A (ja) コンテンツ配信管理システム
JPWO2009001416A1 (ja) コンテンツ配信装置、コンテンツ配信方法、及びコンテンツ配信プログラム
CA2837811A1 (en) Cloud subscription download method and system, and computer storage medium
CN103107944B (zh) 一种内容定位方法和路由设备
CN101635741A (zh) 分布式网络中查询资源的方法及其系统
CN101895550B (zh) 一种应用于互联网网站的兼容动静态内容的缓冲加速方法
CN115883657A (zh) 一种云盘服务加速调度的方法及系统
KR20130033252A (ko) 서비스 오버레이 네트워크에서 종단간 QoS 보장형 콘텐츠 전달 방법 및 그 시스템
CN102497402B (zh) 一种内容注入方法及系统、内容分发方法及系统
Tang et al. Minimal cost replication of dynamic web contents under flat update delivery
CN101848156A (zh) Flv流量本地化的方法
KR20150011087A (ko) 컨텐츠 전송 서비스를 위한 분산 캐싱 관리 방법 및 이를 위한 중앙 관리 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant