CN101645928B - 内容资源缓存方法、装置及系统 - Google Patents

内容资源缓存方法、装置及系统 Download PDF

Info

Publication number
CN101645928B
CN101645928B CN2009100915885A CN200910091588A CN101645928B CN 101645928 B CN101645928 B CN 101645928B CN 2009100915885 A CN2009100915885 A CN 2009100915885A CN 200910091588 A CN200910091588 A CN 200910091588A CN 101645928 B CN101645928 B CN 101645928B
Authority
CN
China
Prior art keywords
server
content resource
caching
minimum load
caching server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2009100915885A
Other languages
English (en)
Other versions
CN101645928A (zh
Inventor
兰刚
公晨
王瑞
周树国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Huawei Technology Co Ltd
Original Assignee
Huawei Symantec Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Symantec Technologies Co Ltd filed Critical Huawei Symantec Technologies Co Ltd
Priority to CN2009100915885A priority Critical patent/CN101645928B/zh
Publication of CN101645928A publication Critical patent/CN101645928A/zh
Application granted granted Critical
Publication of CN101645928B publication Critical patent/CN101645928B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明实施例公开了一种内容资源缓存方法、装置及系统,其中该内容资源缓存方法包括:获得内容资源的访问热度值;当所述访问热度值达到阈值时,获得最小负载缓存服务器的标识;根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器下载所述内容资源至共享存储设备中。本发明实施例的内容资源缓存方法、装置及系统,提供了一种内容资源缓存方式,通过将内容资源存储于一共享存储设备中,并使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,对内容资源的并发访问可由多个缓存服务器分担、缓存服务器资源得到充分利用、缓存服务器故障对业务透明、以及缓存服务器故障不影响存储的缓存资源的目的。

Description

内容资源缓存方法、装置及系统
技术领域
本发明涉及网络共享存储和缓存技术,特别涉及一种内容资源缓存方法、装置及系统。 
背景技术
随着网络技术的不断发展,P2P(Peer-to-Peer,点对点)技术被广泛应用于数据下载、流媒体等领域。与此同时,基于P2P技术的P2P缓存系统也随网络的发展而日趋成熟。 
现有P2P缓存系统中的某一内容资源只存在于单独一台缓存服务器上,不会有多份该内容资源存在于其他缓存服务器上,造成了各个缓存服务器间不能共享内容资源,当用户访问该内容资源时只有一台缓存服务器可以为其提供下载服务,其他服务器上由于没有这一内容资源,所以不能为用户提供下载服务。 
由于P2P缓存系统中各个缓存服务器间不能共享内容资源,一旦某一缓存服务器上的内容资源成为热点时,随着用户的访问量持续增长,将导致该缓存服务器负载过重。进一步地,由于内容资源不能共享,各个缓存服务器不能共同承担负载,致使缓存服务器的利用率低,业务相对空闲的缓存服务器无法为繁忙的缓存服务器分担负载;同时也会造成缓存服务器不支持多机备份,进而存在单点故障的问题。 
发明内容
本发明实施例的目的是提供一种内容资源缓存方法、装置及系统,以解决现有技术中各个缓存服务器间不能共享内容资源的技术问题,实现了各 个缓存服务器间内容资源共享的问题。 
为实现上述目的,本发明实施例一方面,提供了一种内容资源缓存方法,包括: 
获得用户所要下载的内容资源的访问热度值; 
当所述访问热度值达到阈值,获得内网中最小负载缓存服务器的标识; 
根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源。 
本发明实施例另一方面,提供了一种内容资源访问方法,其中包括: 
发送内容资源查询请求消息至数据库服务器; 
接收所述数据库服务器返回的内容资源查询响应消息; 
当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识; 
根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将对所述内容资源的下载请求重定向至所述最小负载缓存服务器。 
本发明实施例另一方面,提供了一种内容资源缓存装置,其中包括: 
第一获得模块,用于获得用户所要下载的内容资源的访问热度值; 
第二获得模块,用于当所述访问热度值达到阈值时,获得内网中最小负载缓存服务器的标识; 
授权模块,用于根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源。 
本发明实施例另一方面,提供了一种内容资源访问装置,其中包括: 
接收模块,用于接收内容资源查询响应消息; 
第三获得模块,用于当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识; 
发送模块,用于根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将用户的下载请求重定向至所述最小负载缓存服务器。 
本发明实施例另一方面,提供了一种内容资源缓存系统,其中包括: 
调度服务器,用于获得用户所要下载的内容资源的访问热度值;当所述访问热度值达到阈值时,获得内网中最小负载缓存服务器的标识;根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源; 
数据库服务器,用于向所述调度服务器返回访问热度查询响应消息,所述访问热度查询响应消息中包括所述访问热度值;向所述调度服务器返回负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识; 
最小负载缓存服务器,用于接收所述调度服务器发送的指定下载消息,以向外网的源站服务器下载所述内容资源至共享存储设备中。 
本发明实施例另一方面,提供了一种内容资源访问系统,其中包括: 
调度服务器,用于发送内容资源查询请求消息至数据库服务器;接收所述数据库服务器返回的内容资源查询响应消息;当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将对所述内容资源的下载请求重定向至所述最小负载缓存服务器; 
数据库服务器,用于向所述调度服务器返回的负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识; 
最小负载缓存服务器,用于提供内容资源以供用户访问。 
由上述技术方案可知,本发明实施例的内容资源缓存方法、装置及系统,提供了一种内容资源缓存方式,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担, 使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
附图说明
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明实施例一部分实施例,而不是全部的实施例。基于本发明实施例中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明实施例保护的范围。 
图1为本发明实施例内容资源缓存方法的流程图; 
图2为本发明实施例内容资源访问方法的流程图; 
图3为本发明实施例内容资源缓存方法的信令图; 
图4为本发明实施例内容资源访问方法的信令图; 
图5为本发明实施例内容资源缓存装置的结构示意图; 
图6为本发明实施例内容资源访问装置的结构示意图; 
图7为本发明实施例内容资源缓存系统的结构示意图; 
图8为本发明实施例内容资源访问系统的结构示意图。 
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。 
图1为本发明实施例内容资源缓存方法的流程图。图1所示,针对用户所在内网没有缓存用户所需下载内容资源的情况,本实施例的内容资源 缓存方法包括: 
步骤101、获得内容资源的访问热度值; 
向数据库服务器发送访问热度查询消息,以查询对应用户所要下载内容资源的访问热度值;接收数据库服务器返回的访问热度查询响应消息,访问热度查询响应消息中包括访问热度值;访问热度值可以是不同或相同的用户每次点击链接而要下载内容资源的数量,每次点击链接过后,都会在数据库服务器中有所记录,且每点击一次在原有访问热度值上加一。 
步骤102、当访问热度值达到阈值时,获得最小负载缓存服务器的标识; 
随着对某一内容资源下载的需求量越来越大,用户会不断的点击以获得内容资源,且其所对应的访问热度值也在不断地增加;当访问热度值达到阈值时,本实施例中可把与该访问热度值对应的内容资源称为热点内容资源,由于用户的大量访问热点内容资源会产生很大的流量,这会对内网端口将会造成巨大的压力。 
此时,可利用内网的某一缓存服务器将热点内容资源先下载到内网的共享存储设备上,需要下载该热点内容资源的用户再到该共享存储设备下载,从而降低对内网端口的压力。但是在内网的众多缓存服务器中,有的处于繁忙状态、有的处于空闲状态,为了不使处于繁忙状态的缓存服务器更加繁忙,可以在众多缓存服务器中选择处于空闲状态的缓存服务器作为最小负载缓存服务器,利用该最小负载缓存服务器把热点内容资源下载到共享存储设备上。 
在指定最小负载缓存服务器之前,需获得最小负载缓存服务器的标识,具体地,发送负载查询消息至数据库服务器以查询最小负载缓存服务器的标识,其中各个缓存服务器的负载信息会每5秒钟写入数据库服务器一次,以让数据库服务器获知当前各个缓存服务器的负载情况,进一步,接收数据库服务器返回的负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识,从而获知哪台缓存服务器正处于相对空闲的状态。 
步骤103、根据最小负载缓存服务器的标识,授权最小负载缓存服务器下载内容资源至共享存储设备中。 
根据最小负载缓存服务器的标识,指定并授权最小负载缓存服务器去外网的源站服务器下载用户需求量较大的热点内容资源,并将该热点内容资源存储在内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从内网的共享存储设备中就可以下载到,降低了对内网端口的压力; 
进一步地,可使用阵列作为共享存储设备,将阵列划分为若干个空间,由于SAN(Storage Area Network,存储域网络)的结构允许任何服务器连接到任何存储阵列,所以无论数据置放在那里,服务器都可直接存取所需的数据,而在高带宽需求的场景下可以采用光纤接口的SAN来满足需求,因此可通过SAN将阵列上的若干个空间映射给若干台缓存服务器,使各个缓存服务器可共同访问在阵列上分配的若干个空间。 
调度服务器根据既定的调度算法来选择由哪一台缓存服务器进行热点内容资源的下载。在缓存服务器下载完成后,通过通告数据库服务器的方式告知调度服务器,同时通告调度服务器哪些缓存服务器可为用户提供该热点内容资源。此后,调度服务器便可根据调度算法调度访问此热点内容资源的缓存服务器来为用户提供服务。 
再进一步地,由于NAS(Network Attached Storage,网络附属存储)可应用于多平台的系统,并且可直接挂在网络的专用文件服务器上,具备快速,简单,可靠的性能,可以支持Unix和Window NT多种网络环境。因此可使用NAS作为共享存储设备,在NAS上配置若干个文件系统,并将其分配给若干台缓存服务器,使它们可以同时访问这些文件系统。缓存服务器间的调度同样通过调度服务器进行,各服务器共享缓存资源,共同分担负载,提高系统的利用率和可靠性。 
又进一步地,可使用分布式文件系统作为共享存储设备,在分布式文件系统上配置若干个文件系统,并将其分配给若干台缓存服务器,使若干 台缓存服务器可以同时访问若干个文件系统。缓存服务器间的调度同样通过调度服务器进行,各服务器共享缓存资源,共同分担负载,提高系统的利用率和可靠性。使用分布式文件系统可以满足廉价、大容量存储的需求。分布式文件系统提供的共享存储设备可以保证文件系统在各种意外场景下健康持续的服务。 
本实施例所提供的内容资源缓存方法,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
在上述实施例基础上的获得内容资源的访问热度值之前,由于内网没有缓存用户所需下载的内容资源,同时内容资源所对应的访问热度值还没有达到阈值,即内容资源还没有变成热点内容资源,用户需自行到外网的源站服务器上下载其所需的内容资源,具体地,内容资源缓存方法还包括: 
步骤001、获得内容资源检测消息; 
当内网用户向外网源站服务器发送下载请求时,内网的检测服务器根据下载请求,向调度服务器发送内容资源检测消息,以检查用户所需下载的内容资源是否作为热点内容资源被缓存在内网中,同时调度服务器获得内容资源检测消息。 
步骤002、根据内容资源检测消息,发送内容资源查询消息至数据库服务器,以查询内容资源是否已经被缓存在共享存储设备中; 
调度服务器根据内容资源检测消息,发送内容资源查询消息至数据库服务器,以向数据库服务器查询内容资源是否已经被缓存在共享存储设备中,与此同时,该内容资源所对应的访问热度值被加一而保存在数据库服务器中,当访问热度值达到阈值时可执行上述步骤101~103,由于内网中各个缓存服务 器的缓存状态每隔5秒钟就会向数据库服务器写入一次,因此数据库服务器记载了内中所有缓存服务器的当前状态。 
步骤003、获得数据库服务器返回的内容资源查询响应消息; 
调度服务器从数据库服务器获得对应于内容资源查询消息的内容资源查询响应消息,其中内容资源查询响应消息将会携带有关内容资源有没有被缓存在内网各个缓存服务器所共同使用的共享存储设备中的信息。 
步骤004、当从数据库服务器所获得的内容资源查询响应消息指示内容资源没有被缓存在共享存储设备中,发送非重定向通知消息至重定向服务器,以使重定向服务器对用户的下载请求不进行任何重定向操作。 
当从数据库服务器所获得的内容资源查询响应消息指示内容资源没有被缓存在共享存储设备中,调度服务器发送非重定向通知消息至重定向服务器,以使重定向服务器对用户的下载请求不进行任何重定向操作,这时,外网的源站服务器响应内网用户向外网源站服务器所发送的下载请求,并将用户所需下载的内容资源发送给用户。 
图2为本发明实施例内容资源访问方法的流程图。如图2所示,针对用户所在内网已缓存用户所需下载内容资源的情况,本实施例的内容资源访问方法包括: 
201、发送内容资源查询请求消息至数据库服务器; 
调度服务器发送内容资源查询请求消息至数据库服务器,以查询用户需下载的内容资源是否已成为热点内容资源被缓存在内网中的共享存储设备; 
202、接收所述数据库服务器返回的内容资源查询响应消息; 
调度服务器从数据库服务器获得到相对应内容资源查询消息的内容资源查询响应消息,其中内容资源查询响应消息将会携带有关内容资源有没有被缓存在内网各个缓存服务器所共同使用的共享存储设备中的信息。 
203、当内容资源查询响应消息指示内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识; 
当从数据库服务器所获得的内容资源查询响应消息指示内容资源已被缓存在共享存储设备中时,调度服务器需指定一个缓存服务器为用户提供服务,由于内网的众多缓存服务器中有的处于繁忙状态的、有的处于空闲状态的,为了不使处于繁忙状态的缓存服务器更加繁忙,可以在众多缓存服务器中选择处于空闲状态的缓存服务器来提供服务,该缓存服务器称为最小负载缓存服务器,具体地,由于内网中个缓存服务器的缓存状态每隔5秒钟就会向数据库服务器写入一次,因此数据库服务器记载了内中所有缓存服务器的当前状态,调度服务器发送负载查询消息至数据库服务器查询最小负载缓存服务器的标识,指定最小负载缓存服务器为用户提供服务,并接收数据库服务器返回的负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识。 
204、根据最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使重定向服务器将对所述内容资源的下载请求重定向至最小负载缓存服务器。 
调度服务器根据最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,重定向服务器根据重定向通知消息将最小负载缓存服务器作为下载目的,并重定向用户对所述内容资源的下载请求至最小负载缓存服务器,以实现用户利用最小负载缓存服务器从共享存储设备中下载所需热点内容资源的目的。 
进一步地,可使用阵列作为共享存储设备,将阵列划分为若干个空间,由于SAN(Storage Area Network,存储域网络)的结构允许任何服务器连接到任何存储阵列,所以无论数据置放在那里,服务器都可直接存取所需的数据,而在高带宽需求的场景下可以高采用光纤接口的SAN来满足需求,因此可通过SAN将阵列上的若干个空间映射给若干台缓存服务器,使各个缓存服务器可共同访问在阵列上分配的若干个空间。 
调度服务器根据既定的调度算法来选择由哪一台缓存服务器进行热 点内容资源的下载。在缓存服务器下载完成后,通过通告数据库服务器的方式告知调度服务器,同时通告调度服务器哪些缓存服务器可为用户提供该热点内容资源。此后,调度服务器便可根据调度算法调度访问此热点内容资源的缓存服务器来为用户提供服务。 
再进一步地,由于NAS(Network Attached Storage,网络附属存储)可应用于多平台的系统,并且NAS可直接挂在网络的专用文件服务器上,具备快速,简单,可靠的性能,可以支持Unix和Window NT多种网络环境。因此可使用NAS作为共享存储设备,在NAS上配置若干个文件系统,并将其分配给若干台缓存服务器,使它们可以同时访问这些文件系统。缓存服务器间的调度同样通过调度服务器进行,各服务器共享缓存资源,共同分担负载,提高系统的利用率和可靠性。 
又进一步地,可使用分布式文件系统作为共享存储设备,在分布式文件系统上配置若干个文件系统,并将其分配给若干台缓存服务器,使若干台缓存服务器可以同时访问若干个文件系统。缓存服务器间的调度同样通过调度服务器进行,各服务器共享缓存资源,共同分担负载,提高系统的利用率和可靠性。使用分布式文件系统可以满足廉价、大容量存储的需求。分布式文件系统提供的共享存储设备可以保证文件系统在各种意外场景下健康持续的服务。 
本实施例所提供的内容资源访问方法,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
图3为本发明实施例内容资源缓存方法的信令图。如图3所示,针对用户所在内网没有缓存用户所需下载内容资源的情况,在本实施例中,除 源站服务器属于外网,其余网络实体都属于内网,内容资源原本是保存在外网源站服务器上的,其中本实施例的内容资源缓存方法的信令步骤包括: 
301、内网用户与外网源站服务器建立连接,并向外网源站服务器发送下载请求,以下载用户所需的内容资源; 
302、检测服务器根据内网用户向外网源站服务器发送的下载请求,向调度服务器发送内容资源检测消息,以检查用户所需下载的内容资源是否作为热点内容资源已经被缓存在内网中; 
303、调度服务器获得内容资源检测消息,并根据内容资源检测消息,发送内容资源查询消息至数据库服务器,以向数据库服务器查询内容资源是否已经被缓存在内网中各个缓存服务器所共用的共享存储设备中,与此同时,该内容资源所对应的访问热度值被加一进而被保存在数据库服务器中; 
304、数据库服务器根据内容资源查询消息返回内容资源查询响应消息,其中内容资源查询响应消息将会携带有关内容资源有没有被缓存在内网各个缓存服务器所共同使用的共享存储设备中的信息; 
305、调度服务器获得内容资源查询响应消息,当从数据库服务器所获得的内容资源查询响应消息指示内容资源没有被作为热点内容资源时,即没有缓存在内网各个缓存服务器所共同使用的共享存储设备中时,则发送非重定向通知消息至重定向服务器; 
306、重定向服务器根据非重定向通知消息,对用户的下载请求不进行任何重定向操作; 
307、由于事先和外网的源站服务器建立了连接,外网的源站服务器响应内网用户向外网源站服务器所发送的下载请求,并将用户所需下载的内容资源发送给用户; 
308、在不同或相同的用户下载同一内容资源时,内容资源所对应的访问热度值则不断的增加,与此同时,调度服务器在每次执行完步骤307后,都 会向数据库服务器发送访问热度查询消息以查询对应用户所要下载内容资源的访问热度值; 
309、数据库服务器获得调度服务器发送的访问热度查询消息后,返回访问热度查询响应消息,访问热度查询响应消息中携带有内容资源的访问热度值; 
310、调度服务器接收数据库服务器返回的访问热度查询响应消息,访问热度查询响应消息中所携带的内容资源的访问热度值,访问热度值可以是不同或相同的用户每次点击链接而要下载内容资源的数量,每次点击链接过后,都会在数据库服务器中有所记录,且每点击一次在原有访问热度值上加一;再者,当内容资源的访问热度值大于阈值时,说明用户所需下载的内容资源已变为热点内容资源,需要指定一相对空闲的缓存服务器,称为最小负载缓存服务器,而从外网的源站服务器下载热点内容资源,由此调度服务器发送负载查询消息至数据库服务器以查询最小负载缓存服务器的标识; 
311、由于内网中各个缓存服务器的负载信息会每5秒钟写入数据库服务器一次,因此数据库服务器保存有当前各个缓存服务器的负载状态,数据库服务器获得调度服务器所发送的访问热度查询消息,并返回访问热度查询响应消息; 
312、调度服务器获得数据库服务器返回的访问热度查询响应消息,负载查询响应消息中所携带的最小负载缓存服务器的标识,从而获知哪台缓存服务器正处于相对空闲的状态,进而根据最小负载缓存服务器的标识发送指定下载消息至最小负载缓存服务器; 
313~314、最小负载缓存服务器根据调度服务器发送来的指定下载消息,向外网的源站服务器发送热点内容资源下载请求消息,并将从外网的源站服务器下载热点内容资源以保存在内网的共享存储设备中; 
315、最小负载缓存服务器发送通告消息至数据库服务器,接着数据库服务器根据通告消息通知内网中所有缓存服务器被用户下载的热点内容资源已 经被缓存在内网中的共享存储设备中,其中内网中所有缓存服务器都可提供下载服务,且内网用户可优先通过最小负载缓存服务器进行下载。 
本实施例所提供的内容资源缓存方法,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明以及缓存服务器故障不影响存储的缓存资源的目的。 
图4为本发明实施例内容资源访问方法的信令图。如图4所示,针对用户所在内网已经缓存用户所需下载内容资源的情况,在本实施例中,除源站服务器属于外网,其余网络实体都属于内网,其中本实施例的内容资源访问方法的信令步骤包括: 
401、在上述实施例执行完308~315后,热点内容资源已经被缓存在内网各个缓存服务器所共用的共享存储设备中,内网用户与外网源站服务器建立连接,并向外网源站服务器发送下载请求,以下载用户所需的内容资源; 
402、检测服务器根据内网用户向外网源站服务器发送的下载请求,向调度服务器发送内容资源检测消息,以检查用户所需下载的内容资源是否作为热点内容资源已经被缓存在内网中 
403、调度服务器获得内容资源检测消息,并根据内容资源检测消息,发送内容资源查询消息至数据库服务器,以向数据库服务器查询内容资源是否已经被缓存在内网中各个缓存服务器所共用的共享存储设备中,与此同时,该内容资源所对应的访问热度值被加一进而被保存在数据库服务器中 
404、数据库服务器根据内容资源查询消息返回内容资源查询响应消息,其中内容资源查询响应消息将会携带有关内容资源有没有被缓存在内网各个缓存服务器所共同使用的共享存储设备中的消息; 
405、调度服务器获得内容资源查询响应消息,当从数据库服务器所获得的内容资源查询响应消息指示内容资源已经被作为热点内容资源,进而缓存在 内网各个缓存服务器所共同使用的共享存储设备中时,发送负载查询消息至数据库服务器查询最小负载缓存服务器的标识,以指定最小负载缓存服务器为用户提供服务; 
406、由于内网中个缓存服务器的缓存状态每隔5秒钟就会向数据库服务器写入一次,因此数据库服务器记载了内中所有缓存服务器的当前状态,数据库服务器接收调度服务器所发送的负载查询消息,并返回负载查询响应消息; 
407、调度服务器接收数据库服务器返回的负载查询响应消息,负载查询响应消息中所携带的最小负载缓存服务器的标识,并根据最小负载缓存服务器的标识发送重定向通知消息至重定向服务器; 
408、重定向服务器根据重定向通知消息,将用户向外网源站服务器发送的下载请求重定向至最小负载缓存服务器,生成重定向下载请求并发送给用户; 
409~410、用户获得重定向下载请求,根据重定向下载请求向最小负载缓存服务器发送重定向后的下载请求,最小负载缓存服务器则传送热点内容资源给所需下载的用户。 
本实施例所提供的内容资源访问方法,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
图5为本发明实施例内容资源缓存装置的结构示意图。如图5所示,本实施例的内容资源缓存装置包括第一获得模块501、第二获得模块502和授权模块503,其中第一获得模块501用于获得内容资源的访问热度值;第二获得模块502用于当访问热度值达到阈值时,获得最小负载缓存服务器的 标识;授权模块503根据最小负载缓存服务器的标识,授权最小负载缓存服务器下载内容资源至共享存储设备中。 
在该内容资源缓存装置中第一获得模块501还可以包括第一发送单元5011和第一处理单元5012,其中第一发送单元5011用于发送访问热度查询消息至数据库服务器以查询访问热度值;第一处理单元5012用于接收数据库服务器返回的访问热度查询响应消息,访问热度查询响应消息中包括访问热度值。 
在该内容资源缓存装置中第二获得模块502还可以包括第二发送单元5021和第二处理单元5022,其中第二发送单元5021用于发送负载查询消息至数据库服务器以查询最小负载缓存服务器的标识;第二处理单元5022用于接收数据库服务器返回的负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识。 
本实施例所提供的的内容资源缓存装置,通过授权模块503根据最小负载缓存服务器的标识,授权最小负载缓存服务器下载内容资源至共享存储设备中,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
图6为本发明实施例内容资源访问装置的结构示意图。如图6所示,本实施例的内容资源访问装置包括第一发送模块601、接收模块602、第三获得模块603和第二发送模块604,其中第一发送模块601用于发送内容资源查询请求消息至数据库服务器;接收模块602用于接收内容资源查询响应消息;第三获得模块603用于当内容资源查询响应消息指示内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;第二发送模块604用于根据最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使重定向服务器将用户的下载请求重定向至最小负载缓 存服务器。 
该内容资源访问装置的第三获得模块603还可以包括第三发送单元6031和第三处理单元6032,其中第三发送单元6031发送访问热度查询消息至数据库服务器以查询最小负载缓存服务器的标识;第三处理单元6032收数据库服务器返回的负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识。 
本实施例所提供的内容资源访问装置,通过第二发送模块根据最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使重定向服务器将用户的下载请求重定向至最小负载缓存服务器,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
图7为本发明实施例内容资源缓存系统的结构示意图。本实施例的内容资源缓存系统包括调度服务器701、数据库服务器702和最小负载缓存服务器703,其中,调度服务器701获得内容资源的访问热度值;当访问热度值达到阈值时,获得最小负载缓存服务器的标识;根据最小负载缓存服务器的标识,授权最小负载缓存服务器下载内容资源至共享存储设备中;数据库服务器702向调度服务器返回访问热度查询响应消息,访问热度查询响应消息中包括访问热度值;向调度服务器返回负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识;最小负载缓存服务器703接收调度服务器701发送的指定下载消息,以向外网的源站服务器下载内容资源至共享存储设备中。 
本发明实施例的内容资源缓存系统,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器 分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
图8为本发明实施例内容资源访问系统的结构示意图。本实施例的内容资源访问系统包括调度服务器801、数据库服务器802和最小负载缓存服务器803,其中,调度服务器801发送内容资源查询请求消息至数据库服务器;接收数据库服务器返回的内容资源查询响应消息;当内容资源查询响应消息指示内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;根据最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使重定向服务器将用户对内容资源的下载请求重定向至最小负载缓存服务器;数据库服务器802向调度服务器返回的负载查询响应消息,负载查询响应消息中包括最小负载缓存服务器的标识;最小负载缓存服务器803根据调度服务器801所发送的重定向后的用户对内容资源的下载请求,为用户提供下载内容资源的服务。 
本发明实施例的内容资源访问系统,通过将内容资源存储于一共享存储设备中,使各个缓存服务器都可访问该共享存储设备,实现了各个缓存服务器间能共享内容资源,并且,对内容资源的并发访问可由多个缓存服务器分担,使得缓存服务器资源得到充分利用,实现了缓存服务器故障对业务透明、以及即使某一缓存服务器发生故障也不影响为用户提供下载服务的目的。 
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可获取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。 
最后应说明的是:以上实施例仅用以说明本发明实施例的技术方案而非对其进行限制,尽管参照较佳实施例对本发明实施例进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对本发明实施例的技术方案进行修改或者等同替换,而这些修改或者等同替换亦不能使修改后的技术方案脱离本发明实施例技术方案的精神和范围。 

Claims (11)

1.一种内容资源缓存方法,其特征在于,包括:
获得内容资源的访问热度值;
当所述访问热度值达到阈值时,获得内网中最小负载缓存服务器的标识;
根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源。
2.根据权利要求1所述的内容资源缓存方法,其特征在于,所述获得最小负载缓存服务器的标识包括:
发送负载查询消息至数据库服务器以查询所述最小负载缓存服务器的标识;
接收所述数据库服务器返回的负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识。
3.根据权利要求1所述的内容资源缓存方法,其特征在于,所述授权所述最小负载缓存服务器下载所述内容资源至共享存储设备中包括:
根据所述最小负载缓存服务器的标识,发送指定下载消息至所述最小负载缓存服务器,以授权所述最小负载缓存服务器下载所述内容资源至共享存储设备中。
4.一种内容资源缓存装置,其特征在于,包括:
第一获得模块,用于获得内容资源的访问热度值;
第二获得模块,用于当所述访问热度值达到阈值时,获得内网中最小负载缓存服务器的标识;
授权模块,用于根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源。
5.根据权利要求4所述的内容资源缓存装置,其特征在于,所述第二获得模块包括: 
第二发送单元,用于发送负载查询消息至数据库服务器以查询所述最小负载缓存服务器的标识;
第二处理单元,用于接收所述数据库服务器返回的负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识。
6.一种内容资源缓存系统,其特征在于,包括:
调度服务器,用于获得内容资源的访问热度值;当所述访问热度值达到阈值时,获得内网中最小负载缓存服务器的标识;根据所述最小负载缓存服务器的标识,授权所述最小负载缓存服务器从外网的源站服务器下载所述内容资源至内网的共享存储设备中,以备需要下载该热点内容资源的用户直接从共享存储设备中下载所述内容资源;
数据库服务器,用于向所述调度服务器返回访问热度查询响应消息,所述访问热度查询响应消息中包括所述访问热度值;向所述调度服务器返回负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识;
最小负载缓存服务器,用于接收所述调度服务器发送的指定下载消息,以向外网的源站服务器下载所述内容资源至共享存储设备中。
7.一种内容资源访问方法,其特征在于,包括:
发送内容资源查询请求消息至数据库服务器;
接收所述数据库服务器返回的内容资源查询响应消息;
当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;
根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将对所述内容资源的下载请求重定向至所述最小负载缓存服务器。
8.根据权利要求7所述的内容资源访问方法,其特征在于,所述获得最小负载缓存服务器的标识包括:
发送负载查询消息至数据库服务器以查询所述最小负载缓存服务器的标识;
接收所述数据库服务器返回的负载查询响应消息,所述负载查询响应消息 中包括所述最小负载缓存服务器的标识。
9.一种内容资源访问装置,其特征在于,包括:
发送模块,用于发送内容资源查询请求消息至数据库服务器;
接收模块,用于接收所述数据库服务器返回的内容资源查询响应消息;
第三获得模块,用于当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;
发送模块,用于根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将对所述内容资源的下载请求重定向至所述最小负载缓存服务器。
10.根据权利要求9所述的内容资源访问装置,其特征在于,所述第三获得模块,包括:
第三发送单元,用于发送负载查询消息至数据库服务器以查询所述最小负载缓存服务器的标识;
第三处理单元,用于接收所述数据库服务器返回的负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识。
11.一种内容资源访问系统,其特征在于,包括:
调度服务器,用于发送内容资源查询请求消息至数据库服务器;接收所述数据库服务器返回的内容资源查询响应消息;当所述内容资源查询响应消息指示所述内容资源已被缓存在内网中的共享存储设备中时,获得最小负载缓存服务器的标识;根据所述最小负载缓存服务器的标识,发送重定向通知消息至重定向服务器,以使所述重定向服务器将对所述内容资源的下载请求重定向至所述最小负载缓存服务器;
数据库服务器,用于向所述调度服务器返回负载查询响应消息,所述负载查询响应消息中包括所述最小负载缓存服务器的标识;
最小负载缓存服务器,用于提供内容资源以供用户访问。 
CN2009100915885A 2009-08-26 2009-08-26 内容资源缓存方法、装置及系统 Active CN101645928B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100915885A CN101645928B (zh) 2009-08-26 2009-08-26 内容资源缓存方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100915885A CN101645928B (zh) 2009-08-26 2009-08-26 内容资源缓存方法、装置及系统

Publications (2)

Publication Number Publication Date
CN101645928A CN101645928A (zh) 2010-02-10
CN101645928B true CN101645928B (zh) 2012-07-25

Family

ID=41657648

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100915885A Active CN101645928B (zh) 2009-08-26 2009-08-26 内容资源缓存方法、装置及系统

Country Status (1)

Country Link
CN (1) CN101645928B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3989495A4 (en) * 2019-07-31 2022-08-24 Shanghai Hode Information Technology Co., Ltd. BURST TRAFFIC PROCESSING METHOD, COMPUTER DEVICE AND READABLE STORAGE MEDIA

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101867526A (zh) * 2010-06-28 2010-10-20 中兴通讯股份有限公司 一种实现重定向的方法和系统
CN102006330B (zh) * 2010-12-01 2013-06-12 北京瑞信在线系统技术有限公司 分布式缓存系统、数据的缓存方法及缓存数据的查询方法
CN102096556B (zh) * 2010-12-03 2013-11-06 华为数字技术(成都)有限公司 拷贝数据的方法、读取数据的方法和装置及系统
CN102081580B (zh) * 2011-02-24 2012-07-04 华中科技大学 一种磁盘数据保护方法
CN102955764B (zh) * 2011-08-23 2015-01-14 北京中文在线数字出版股份有限公司 一种数字图书提供方法及装置
CN103380611B (zh) * 2011-12-26 2017-02-01 华为技术有限公司 一种缓存管理方法及设备
CN102546623A (zh) * 2011-12-30 2012-07-04 成都市华为赛门铁克科技有限公司 加速提供互联网应用资源的方法、资源管理服务器及系统
CN104168299A (zh) * 2013-05-16 2014-11-26 方正宽带网络服务股份有限公司 资源处理系统和资源处理方法
CN104683253A (zh) * 2013-11-27 2015-06-03 北京大唐高鸿数据网络技术有限公司 用于统一通信系统的动态负载均衡方法
CN104283981A (zh) * 2014-10-14 2015-01-14 无锡云捷科技有限公司 一种基于热点机制的cdn透明缓存方法
CN105763585A (zh) * 2014-12-17 2016-07-13 中兴通讯股份有限公司 一种实现数据推送的方法和gslb
CN105868045A (zh) * 2015-01-21 2016-08-17 中国移动通信集团陕西有限公司 一种数据缓存方法及装置
CN106878276A (zh) * 2017-01-06 2017-06-20 郑州云海信息技术有限公司 一种内部网络集群资料管理方法
CN108322495B (zh) * 2017-01-18 2021-07-06 阿里巴巴集团控股有限公司 资源访问请求的处理方法、装置和系统
CN108683695A (zh) * 2018-03-23 2018-10-19 阿里巴巴集团控股有限公司 热点访问处理方法、缓存访问代理设备及分布式缓存系统
CN109151061B (zh) * 2018-09-28 2021-08-03 视联动力信息技术股份有限公司 一种数据存储方法和装置
CN112019451B (zh) * 2019-05-29 2023-11-21 中国移动通信集团安徽有限公司 带宽分配方法、调试网元、本地缓存服务器及计算设备
CN112311689B (zh) * 2019-07-31 2024-03-05 上海幻电信息科技有限公司 突发流量的分流方法、计算机设备及可读存储介质
CN110535977B (zh) * 2019-09-29 2022-04-01 深圳市网心科技有限公司 文件分发方法及装置、计算机装置及存储介质
CN110769072A (zh) * 2019-10-31 2020-02-07 北京达佳互联信息技术有限公司 一种多媒体资源获取方法、装置和存储介质
CN114079668B (zh) * 2022-01-20 2022-04-08 檀沐信息科技(深圳)有限公司 基于互联网大数据的信息采集整理方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1703889A (zh) * 2002-01-22 2005-11-30 通用仪器公司 用于多媒体内容预加密的加密、验证和密钥管理
CN101051980A (zh) * 2007-05-21 2007-10-10 华为技术有限公司 一种文件数据分发方法及相关设备
JP2007300566A (ja) * 2006-05-08 2007-11-15 Nec Engineering Ltd データ取得システム
CN101187931A (zh) * 2007-12-12 2008-05-28 浙江大学 分布式文件系统多文件副本的管理方法
CN101322385A (zh) * 2005-12-12 2008-12-10 国际商业机器公司 对媒体服务器中的分布式媒体资源进行负载平衡和切换

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1703889A (zh) * 2002-01-22 2005-11-30 通用仪器公司 用于多媒体内容预加密的加密、验证和密钥管理
CN101322385A (zh) * 2005-12-12 2008-12-10 国际商业机器公司 对媒体服务器中的分布式媒体资源进行负载平衡和切换
JP2007300566A (ja) * 2006-05-08 2007-11-15 Nec Engineering Ltd データ取得システム
CN101051980A (zh) * 2007-05-21 2007-10-10 华为技术有限公司 一种文件数据分发方法及相关设备
CN101187931A (zh) * 2007-12-12 2008-05-28 浙江大学 分布式文件系统多文件副本的管理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3989495A4 (en) * 2019-07-31 2022-08-24 Shanghai Hode Information Technology Co., Ltd. BURST TRAFFIC PROCESSING METHOD, COMPUTER DEVICE AND READABLE STORAGE MEDIA

Also Published As

Publication number Publication date
CN101645928A (zh) 2010-02-10

Similar Documents

Publication Publication Date Title
CN101645928B (zh) 内容资源缓存方法、装置及系统
US11349940B2 (en) Server side data cache system
CN106130882B (zh) 用于传输消息的方法和装置
CN101668046B (zh) 资源缓存方法及其装置、系统
CN108023953B (zh) Ftp服务的高可用实现方法和装置
US20100235409A1 (en) System and method for managing data stored in a data network
CN101136911B (zh) 一种采用p2p技术下载文件的方法和p2p下载系统
US8250171B2 (en) Content delivery apparatus, content delivery method, and content delivery program
CN103188574A (zh) 传输网络视频的方法及系统
CN103607428A (zh) 一种访问共享内存的方法和装置
CN103475682A (zh) 文件迁移方法及设备
WO2017181890A1 (zh) 基于服务器集群的数据处理系统及方法
CN102158518B (zh) 一种cdn网络中的数据传输方法、网络节点及系统
CN109407980A (zh) 基于Redis集群的数据存储系统
CN109982152A (zh) P2p cdn业务处理方法、智能网关以及cdn平台
CN101783802B (zh) 一种分布式流媒体发布系统和方法
CN105791381A (zh) 访问控制的方法及装置
CN109873855A (zh) 一种基于区块链网络的资源获取方法和系统
CN104602035B (zh) 流媒体点播方法和流媒体点播系统
CN110392119A (zh) 一种数据传输方法及基站
CN110012050A (zh) 消息处理、存储方法、装置及系统
CN113301079A (zh) 一种数据的获取方法、系统、计算设备及存储介质
CN111107039A (zh) 一种基于tcp连接的通信方法、装置及系统
CN101610289A (zh) 下载数据的方法、装置和系统及节点
CN104580276A (zh) 信息推送方法、装置、系统及信息接入装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: HUAWEI DIGITAL TECHNOLOGY (CHENGDU) CO., LTD.

Free format text: FORMER NAME: CHENGDU HUAWEI SYMANTEC TECHNOLOGIES CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Patentee after: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.

Address before: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Patentee before: CHENGDU HUAWEI SYMANTEC TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220907

Address after: No. 1899 Xiyuan Avenue, high tech Zone (West District), Chengdu, Sichuan 610041

Patentee after: Chengdu Huawei Technologies Co.,Ltd.

Address before: 611731 Qingshui River District, Chengdu hi tech Zone, Sichuan, China

Patentee before: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.