CN105959358A - Cdn服务器及其缓存数据的方法 - Google Patents
Cdn服务器及其缓存数据的方法 Download PDFInfo
- Publication number
- CN105959358A CN105959358A CN201610262858.4A CN201610262858A CN105959358A CN 105959358 A CN105959358 A CN 105959358A CN 201610262858 A CN201610262858 A CN 201610262858A CN 105959358 A CN105959358 A CN 105959358A
- Authority
- CN
- China
- Prior art keywords
- file
- data
- cdn server
- cdn
- target data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 74
- 230000001143 conditioned effect Effects 0.000 claims description 15
- 238000001514 detection method Methods 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 11
- 238000012545 processing Methods 0.000 abstract description 10
- 206010063385 Intellectualisation Diseases 0.000 abstract 1
- 238000012546 transfer Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 238000010297 mechanical methods and process Methods 0.000 description 5
- 230000005226 mechanical processes and functions Effects 0.000 description 5
- 239000002699 waste material Substances 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例提供一种CDN服务器缓存数据的方法及CDN服务器,在所述CDN服务器接收到一条请求信息,并基于该请求信息获取并缓存某一文件的过程中接收到了另一请求信息时,系统则会检测所述另一请求信息所对应请求的目标数据所在的文件是否是正在缓存中的文件,如果是,则会进一步判断当前的系统条件是否满足可将文件交由缓存于CDN服务器进行处理的预设条件,由此可以使得系统将不影响用户体验的文件交由CDN服务器进行处理,以此节省CDN源站的处理资源,具有提高CDN服务器的智能化水平和节省CDN源站的处理资源的技术效果。
Description
技术领域
本发明实施例涉及网络通信领域,尤其涉及一种CDN服务器及其缓存数据的方法。
背景技术
内容分发网络(Content Delivery Network,CDN)依靠部署在各地的边缘服务器,通过中心平台的负载均衡、内容分发、调度等功能模块,使用户就近获取所需内容,降低网络拥塞,提高用户访问响应速度和命中率。CDN的关键技术主要有内容存储和分发技术。
CDN网络中的一个节点即为一个CDN服务器,这些CDN服务器分布到用户访问相对集中的地区或网络中。在用户访问网站时,利用全局负载技术将用户的访问指向距离最近的工作正常的CDN服务器上,在CDN服务器缓存有用户访问的数据时,该CDN服务器可以直接响应用户请求,在CDN服务器未缓存有用户访问的数据时,该CDN服务器才向CDN源站请求数据,降低了CDN源站的负载,所述CDN源站是指发布内容的原始站点。
现有技术中,CDN服务器接收到超文本传输协议(HyperText TransferProtocol,HTTP)请求消息时,若该HTTP请求消息中包括用于指示读取范围的range信息,则该CDN服务器可以从CDN源站或缓存于该CDN服务器的文件中获取到该range信息指示的目标数据。并且,CDN服务器会对获取到的文件采用一缓存索引的方式进行管理,该索引中包括文件标识,以及标识每个文件处于已缓存状态或处于缓存中状态的缓存状态码。此外,CDN服务器还会针对一处理进度表进行维护管理,该处理进度表包括每个请求消息的标识以及每个请求消息的处理进度,例如,每个请求消息的处理进度可以包括处于未处理状态、处理中状态及已处理状态。
然而,当CDN服务器先后接收到两条或两条以上的超文本传输协议请求消息时,CDN服务器会在处理第一个请求消息时向CDN源站索取数据,而当继续接收到第二个请求消息时,CDN服务器会先根据缓存索引中的文件标识,确定第二个请求消息对应所需的文件的缓存状态,若请求的文件状态处于缓存过程中,则CDN服务器会开始计时,超时该文件还未缓存完则会将该第二请求消息发送到CDN源站进行处理。
由此可见,现有技术中存在着当CDN服务器先后接收到两条或两条以上的超文本传输协议请求消息时,如果第一个请求消息和第二个请求消息对应请求的文件一致,且接收到第二个请求的时刻为CDN服务器正在缓存该对应请求的文件过程中时,只要缓存该文件的时间剩余时间超出预设时间则第二个请求就要发送到CDN源站进行处理,因此造成CDN源站处理资源浪费的技术问题。
发明内容
本发明实施例提供一种CDN服务器及其缓存数据的方法,用以解决现有CDN服务器对HTTP请求消息的处理浪费了CDN源站的处理资源的缺陷,实现CDN服务器针对连续接收到请求同一文件的请求消息时采用更加智能化和高效化的处理方式。
本发明实施例提供一种CDN服务器缓存数据的方法,包括:
CDN服务器接收第一请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据;
所述CDN服务器基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
所述CDN服务器在所述第一时间段内接收第二请求信息,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据;
检测所述第二目标数据是否为所述第一文件中的部分数据;
若是,则在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
本发明实施例提供一种CDN服务器,包括:
第一接收单元,用以接收第一请求信息和第二请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据;
缓存单元,用以基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
检测单元,用以当所述CDN服务器在所述第一时间段内接收到所述第二请求信息时,检测所述第二目标数据是否为所述第一文件中的部分数据;
响应单元,用以在所述第二目标数据为所述第一文件中的部分数据,且在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
本申请实施例中的技术方案可以在CDN服务器接收到一条请求信息,并基于该请求信息获取并缓存某一文件的过程中接收到了另一请求信息时,系统则会检测所述另一请求信息所对应请求的目标数据所在的文件是否是正在缓存中的文件,如果是,则会进一步判断当前的系统条件是否满足可将文件交由缓存于CDN服务器进行处理的预设条件,由此可以使得系统将不影响用户体验的文件交由CDN服务器进行处理,以此节省CDN源站的处理资源,具有提高CDN服务器的智能化水平和节省CDN源站的处理资源的技术效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的CDN服务器缓存数据的方法的流程示意图;
图2为本发明实施例提供的CDN服务器的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,并不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了使本领域的技术人员更容易理解本发明实施例提供的技术方案,下面首先对本发明实施例涉及到的相关技术进行简单介绍。
HTTP是一套计算机通过网络进行通信的规则,使用HTTP客户端通过发送HTTP请求消息能够向HTTP服务器请求信息和服务,所述HTTP客户端可以为Web浏览器,所述HTTP服务器可以为Web服务器。
HTTP请求消息由三个部分组成:请求行(Request Line)、消息头(MessageHeaders)和消息体(Entity Body),其中,消息头与消息体之间通过空行来分隔。
具体地,请求行由三个标记组成:请求方法、统一资源标识符(UniformResource Identifier,URI)和HTTP版本,例如:GET/news.asp HTTP/1.1。以上代码中“GET”代表请求方法,“/news.asp”表示URI,“HTTP/1.1”代表协议版本。值得说明的是,URI完整地指定了要访问的HTTP服务器中的网络资源,通常只要给出相对于服务器的根目录的相对目录即可。
消息头允许HTTP客户端向HTTP服务器传递关于请求或者关于客户端的附加信息。消息头包括Host头域,Referer头域等字段,其中,Host头域表示请求资源的主机和端口号,Referer头域允许客户端指定请求URI的源资源地址。值得说明的是,Range是在HTTP/1.1里新增的一个头域,range头域允许客户端请求实体的一个或者多个子范围。
消息体用于携带与请求相关联的数据,例如一些请求需要的参数等。由消息头中的内容长度Content-Type和内容类型Content-Length来指示。
CDN服务器作为CDN源站(即HTTP服务器)的代理服务器,客户端发送的HTTP请求消息需先经过CDN服务器,由上述介绍可知,CDN服务器接收到HTTP请求消息后,根据该HTTP请求消息中的统一资源标识符以及range信息即可确定客户端请求的目标数据。但是,现有CDN服务器先后接收到两条或两条以上的超文本传输协议请求消息时,如果第一个请求消息和第二个请求消息对应请求的文件一致,且接收到第二个请求的时刻为CDN服务器正在缓存该对应请求的文件过程中时,只要缓存该文件的时间剩余时间超出预设时间则第二个请求就要发送到CDN源站进行处理,因此造成CDN源站处理资源浪费的技术问题。
本发明实施例提供一种CDN服务器缓存数据的方法,如图1所示,该方法包括:
步骤100:CDN服务器接收第一请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据。
值得说明的是,所述CDN服务器可以是接收到HTTP客户端发送的HTTP请求消息,该HTTP客户端可以是Web浏览器,也可以是具有浏览器功能的应用程序。
具体地,该HTTP请求消息的请求行中包括所述第一文件在CDN源站中的统一资源标识符,该HTTP请求消息的消息头中包括用于指示所述第一文件中的部分数据的range信息,所述第一文件的部分数据即为该HTTP请求消息请求的目标数据;另一方面,所述第一HTTP请求消息也可以不包括range信息,此时,所述目标范围即为所述第一文件中的完整数据的范围。
步骤101:所述CDN服务器基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
值的说明的是,现有的技术方案中,CDN源站在接收到不包括range信息的HTTP请求消息后,根据该HTTP请求消息中的统一资源标识符,将包括对应该统一资源标识符的文件的完整数据以及响应码200发送至CDN服务器,现有的CDN服务器在确定HTTP响应消息中包括响应码200时,对接收到的数据进行缓存,若CDN源站接收到包括range信息的HTTP请求消息,则该CDN源站返回的HTTP请求消息中携带的响应码为206,现有的CDN在确定HTTP响应消息中的响应码为206时,对接收到的数据不进行缓存。
而在本发明实施例的一种可能的实现方式中,该CDN服务器接收到包括第一文件的完整数据的HTTP响应消息后,直接对该第一文件的完整数据进行缓存。
在本发明实施例的另一种可能的实现方式中,该CDN服务器接收到包括第一文件的完整数据的HTTP响应消息后,根据响应码200缓存所述第一文件的完整数据。
采用上述方法,在CDN服务器接收到包括range信息的HTTP请求消息时,所述CDN服务器能够删除所述HTTP请求消息中的range信息,并将删除后的所述HTTP请求消息发送至CDN源站,所述CDN源站在接收到不包括range信息的HTTP请求消息的情况下,将所述HTTP请求消息请求的第一文件的完整数据发送至所述CDN服务器,所述CDN服务器在接收到所述CDN源站发送的包括所述第一文件的完整数据的HTTP响应消息后,对所述第一文件的完整数据进行缓存,实现了CDN服务器对CDN源站发送的数据的缓存,这样,由于CDN服务器缓存有第一文件的完整数据,因此,所述CDN服务器后续接收到的所有请求的所述第一文件的数据的HTTP请求消息,所述CDN服务器均可以从自身缓存中获取数据进行响应,无需再从所述CDN源站请求所述第一文件的数据,从而避免了对所述CDN源站的处理资源浪费,进而减轻了CDN源站的负载。
也就是说,在本步骤的执行过程中,若CDN服务器在第一时刻接收到包括第一range信息的第一请求信息,并基于所述第一range信息确定出所述第一请求信息所请求的目标数据为第一文件中的部分数据时,所述CDN服务器可以直接由CDN源站获取所述第一文件的完整数据,或在检测得到所述CDN服务器中不存在所述第一文件的完整数据之后,再由所述CDN源站获取所述第一文件的完整数据。
值得说明的是,所述CDN服务器可以通过现有技术中的多种方式确定出从CDN源站获取到所述第一文件的完整数据所需花费的时长,而该段时长则为所述第一时间段。在实际操作过程中,所述第一时间段可以通过多种方式来表征,例如,可以采用3点45分到5点36分的时刻方式来表征所述第一时间段,也可以采用所需时长为10分钟或3小时的时长方式来表征所述第一时间段,还可以采用倒计时为80单位时间的倒计时方式来表征所述第一时间段,等等。在实际操作过程中可以根据需要而自行设置。
步骤102:所述CDN服务器在所述第一时间段内接收第二请求信息,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据。
步骤103:检测所述第二目标数据是否为所述第一文件中的部分数据。
也就是说,只要是所述CDN服务器正处于缓存某一文件的过程中接收到了另一请求信息,则系统就会检测所述另一请求信息所对应请求的目标数据所在的文件是否是正在缓存中的文件。
步骤104:若是,则在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
如果所述另一请求信息所对应请求的目标数据所在的文件正是处于缓存中的文件,则系统会在满足一预设条件时,从缓存于所述CDN服务器上的该请求信息所对应的目标数据进行响应处理。
在实际操作过程中,所述预设条件可以为多种,只要是可以判断可否将文件交由CDN服务器进行缓存后处理,由此节省CDN源站的处理资源,并且能满足用户的使用体验的条件则都可以作为所述预设条件。
例如,可以将所述第一文件的数据量大小是否符合预设大小作为所述预设条件,由此可以将一些小型文件均采用缓存于CDN服务器的方式进行响应处理;还可以将所述第一文件的文件类型是否符合预设类型作为所述预设条件,由此可以将一些优先级别较低的文件采用缓存于CDN服务器的方式进行响应处理,等等。
另一方面,在本申请实施例技术方案的实际操作过程中,响应请求消息的方式可以为多种,例如,可以向发出请求消息的客户端发出通知信息的方式以响应,可以向所述发出请求消息的客户端传输所需文件的方式以响应,还可以将所述发出的请求消息转发到其它服务器进行处理的方式以响应,等等,在本申请实施例的技术方案中并不加限制。
可见,本申请实施例中的技术方案可以在CDN服务器接收到一条请求信息,并基于该请求信息获取并缓存某一文件的过程中接收到了另一请求信息时,所述CDN服务器会检测所述另一请求信息所对应请求的目标数据所在的文件是否是正在缓存中的文件,如果是,则会进一步判断当前的系统条件是否满足可将文件交由缓存于CDN服务器进行处理的预设条件,由此可以使得系统将不影响用户体验的文件交由CDN服务器进行处理,以此节省CDN源站的处理资源,具有提高CDN服务器的智能化水平和节省CDN源站的处理资源的技术效果。
可选地,所述CDN服务器基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,包括:
在所述CDN服务器处于缓存所述第一文件的过程中时,所述CDN服务器建立与所述第一文件对应的第一缓存索引,所述第一缓存索引包括所述第一文件的第一来源位置信息;
所述检测所述第二目标数据是否为所述第一文件中的部分数据,包括:
在所述第二请求信息中包括所述第二目标数据所在的文件的第二来源位置信息时,检测所述第二来源位置信息是否与所述第一来源位置信息一致;
其中,当所述第二来源位置信息与所述第一来源位置信息一致时,表征所述第二目标数据为所述第一文件中的部分数据,当所述第二来源位置信息与所述第一来源位置信息不一致时,则表征所述第二目标数据不为所述第一文件中的部分数据。
也就是说,在步骤103的执行过程中,可以通过判断第一请求信息所对应请求的文件来源位置,是否与第二请求信息所对应请求的文件来源位置为一致的方式,来判断所述第二目标数据是否为所述第一文件中的部分数据。由于在CDN系统中,请求信息所对应请求的数据原始来源均为CDN源站,因此,如果两条或两条以上的请求信息对应请求的文件在CDN源站中所存放的文件位置一致时,则表征两条或两条以上的请求信息所对应请求的文件为一致。
可见,本申请实施例中的技术方案利用了CDN系统中文件的来源均为同一源站的特性,可以通过判断第一请求信息所对应请求的文件来源位置,是否与第二请求信息所对应请求的文件来源位置为一致的方式,来判断所述第二目标数据是否为所述第一文件中的部分数据,因此具有提高文件一致性判断准确性的技术效果。
可选地,所述在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述第二目标数据响应所述第二请求消息,包括:
检测所述第二目标数据是否与所述第一目标数据一致;
若是,则在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
也就是说,如果根据第二请求消息所携带的第二range信息所指示请求的目标数据,与第一请求消息所携带的第一range信息所指示请求的目标数据完全一致,那么系统则会不论缓存所述第一文件的剩余时间为多少,一律会在CDN服务器缓存了所述第一文件的完整数据之后,再从缓存在所述CDN服务器上的第一文件中的数据来响应所述第二请求消息,因此可以避免CDN服务器向CDN源站重复请求完全一致的数据。
可见,在本申请实施例的技术方案中,还可以通过在第二请求消息所对应请求的目标数据与第一请求消息对应请求的目标数据完全一致的情况下,只由缓存于CDN服务器上的文件数据进行响应处理,因此还具有进一步节省CDN源站的处理资源的技术效果。
在所述检测所述第二目标数据是否与所述第一目标数据一致之后,所述方法包括:
若否,则检测缓存时长是否大于等于预设时长,所述缓存时长为从当前时刻到所述第一时间段中的最后时刻的时长;
若否,则在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN服务器将所述第二目标数据发送到发出所述第二请求消息的客户端。
可选地,在所述检测缓存时长是否大于等于预设时长之后,所述方法还包括:
若是,则从所述CDN源站上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN源站将所述第二目标数据发送到发出所述第二请求消息的客户端。
需要指出的是,所述当前时刻可以为接收到所述第二请求消息的时刻,也可以是CDN服务器接收到所述第二请求消息并作出判断其所请求的文件的处理状态后的某一时刻,在实际操作过程中可以根据需要而自行设置。
也就是说,当第一请求消息对应请求的第一目标数据所在的文件,与第二请求消息对应请求的第二目标数据所在的文件相同(也就是所述第一请求消息与所述第二请求消息对应请求的目标数据均属于第一文件),然而所述第一目标数据与所述第二目标数据不同(也就是所述第一目标数据和所述第二目标数据为所述第一文件的不同部分数据)时,CDN服务器可以在所述当前时刻距离缓存完毕所述第一文件的时刻这段时长小于一预设时长,也就是所述缓存时长小于所述预设时长时,而等候CDN服务器缓存完毕第一文件后,由缓存在所述CDN服务器上的第一文件的完整数据来响应所述第二请求消息;还可以在所述当前时刻距离缓存完毕所述第一文件的时刻这段时长大于等于所述预设时长,也就是所述缓存时长大于等于所述预设时长时,将所述第二请求信息转发到CDN源站,并基于所述CDN源站上的文件数据响应所述第二请求信息,例如,可以通过CDN源站将所述第二请求消息对应请求的第二目标数据发往请求客户端的方式进行响应。由此实现了另一种不影响用户使用体验,而采用CDN服务器对请求信息进行处理的方法。
可见,本申请实施例中的技术方案还可以通过检测所述缓存时长是否大于等于预设时长,从而确定是否由所述CDN服务器缓存的所述第一文件的数据来响应所述第二请求消息,或者通过CDN源站将所述第二请求消息对应请求的第二目标数据发往请求客户端的方式进行响应。因此,本申请实施例中的技术方案实现了另一种不影响用户使用体验,而采用CDN服务器对请求信息进行处理的方法,具有进一步节省CDN源站处理资源且提高了CDN服务器的利用率的技术效果。
另外,对于上述方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,例如,该CDN服务器也可以先根据range信息将目标数据发送至客户端,再缓存该第一文件的完整数据。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明所必须的。
实施例二
本发明实施例还提供一种CDN服务器20,用于实施上述方法实施例提供一种CDN服务器缓存数据的方法,如图2所示,该CDN服务器20包括:
第一接收单元200,用以接收第一请求信息和第二请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据;
缓存单元201,用以基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
检测单元202,用以当所述CDN服务器在所述第一时间段内接收到所述第二请求信息时,检测所述第二目标数据是否为所述第一文件中的部分数据;
响应单元203,用以在所述第二目标数据为所述第一文件中的部分数据,且在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
可选地,所述缓存单元201,还用以在处于缓存所述第一文件的过程中时,建立与所述第一文件对应的第一缓存索引,所述第一缓存索引包括所述第一文件的第一来源位置信息;
所述检测单元202,用以在所述第二请求信息中包括所述第二目标数据所在的文件的第二来源位置信息时,检测所述第二来源位置信息是否与所述第一来源位置信息一致,其中,当所述第二来源位置信息与所述第一来源位置信息一致时,表征所述第二目标数据为所述第一文件中的部分数据,当所述第二来源位置信息与所述第一来源位置信息不一致时,则表征所述第二目标数据不为所述第一文件中的部分数据。
可选地,所述检测单元202,还用以检测所述第二目标数据是否与所述第一目标数据一致;
所述响应单元203,用以在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
可选地,所述检测单元202,还用以在所述第二目标数据与所述第一目标数据不一致时,检测缓存时长是否大于等于预设时长,所述缓存时长为从当前时刻到所述第一时间段中的最后时刻的时长;
所述响应单元203,用以在所述缓存时长小于预设时长时,在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN服务器将所述第二目标数据发送到发出所述第二请求消息的客户端。
可选地,所述响应单元203,还用以在所述缓存时长大于等于所述预设时长时,发出响应指令以通知从所述CDN源站上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN源站将所述第二目标数据发送到发出所述第二请求消息的客户端。
由此可见,本申请实施例中的技术方案可以在CDN服务器接收到一条请求信息,并基于该请求信息获取并缓存某一文件的过程中接收到了另一请求信息时,系统则会检测所述另一请求信息所对应请求的目标数据所在的文件是否是正在缓存中的文件,如果是,则会进一步判断当前的系统条件是否满足可将文件交由缓存于CDN服务器进行处理的预设条件,由此可以使得系统将不影响用户体验的文件交由CDN服务器进行处理,以此节省CDN源站的处理资源,具有提高CDN服务器的智能化水平和节省CDN源站的处理资源的技术效果。
本申请实施例中的技术方案还具有如下技术效果:
进一步地,本申请实施例中的技术方案利用了CDN系统中文件的来源均为同一源站的特性,可以通过判断第一请求信息所对应请求的文件来源位置,是否与第二请求信息所对应请求的文件来源位置为一致的方式,来判断所述第二目标数据是否为所述第一文件中的部分数据,因此具有提高文件一致性判断准确性的技术效果。
进一步地,在本申请实施例的技术方案中,还可以通过在第二请求消息所对应请求的目标数据与第一请求消息对应请求的目标数据完全一致的情况下,只由缓存于CDN服务器上的文件数据进行响应处理,因此还具有进一步节省CDN源站的处理资源的技术效果。
进一步地,本申请实施例中的技术方案还可以通过检测所述缓存时长是否大于等于预设时长,从而确定是否由所述CDN服务器缓存的所述第一文件的数据来响应所述第二请求消息,或者通过CDN源站将所述第二请求消息对应请求的第二目标数据发往请求客户端的方式进行响应。因此,本申请实施例中的技术方案实现了另一种不影响用户使用体验,而采用CDN服务器对请求信息进行处理的方法,具有进一步节省CDN源站处理资源且提高了CDN服务器的利用率的技术效果。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种CDN服务器缓存数据的方法,其特征在于,包括:
CDN服务器接收第一请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据;
所述CDN服务器基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
所述CDN服务器在所述第一时间段内接收第二请求信息,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据;
检测所述第二目标数据是否为所述第一文件中的部分数据;
若是,则在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
2.如权利要求1所述的方法,其特征在于,所述CDN服务器基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,包括:
在所述CDN服务器处于缓存所述第一文件的过程中时,所述CDN服务器建立与所述第一文件对应的第一缓存索引,所述第一缓存索引包括所述第一文件的第一来源位置信息;
所述检测所述第二目标数据是否为所述第一文件中的部分数据,包括:
在所述第二请求信息中包括所述第二目标数据所在的文件的第二来源位置信息时,检测所述第二来源位置信息是否与所述第一来源位置信息一致;
其中,当所述第二来源位置信息与所述第一来源位置信息一致时,表征所述第二目标数据为所述第一文件中的部分数据,当所述第二来源位置信息与所述第一来源位置信息不一致时,则表征所述第二目标数据不为所述第一文件中的部分数据。
3.如权利要求1所述的方法,其特征在于,所述在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述第二目标数据响应所述第二请求消息,包括:
检测所述第二目标数据是否与所述第一目标数据一致;
若是,则在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
4.如权利要求3所述的方法,其特征在于,在所述检测所述第二目标数据是否与所述第一目标数据一致之后,所述方法包括:
若否,则检测缓存时长是否大于等于预设时长,所述缓存时长为从当前时刻到所述第一时间段中的最后时刻的时长;
若否,则在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN服务器将所述第二目标数据发送到发出所述第二请求消息的客户端。
5.如权利要求4所述的方法,其特征在于,在所述检测缓存时长是否大于等于预设时长之后,所述方法还包括:
若是,则从所述CDN源站上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN源站将所述第二目标数据发送到发出所述第二请求消息的客户端。
6.一种CDN服务器,其特征在于,包括:
第一接收单元,用以接收第一请求信息和第二请求信息,所述第一请求信息为包括请求范围第一range信息的超文本传输协议HTTP请求信息,所述第一请求消息用于请求第一文件中的与所述第一range信息指示的第一目标数据,所述第二请求信息为包括请求范围第二range信息的超文本传输协议HTTP请求信息,所述第二请求消息用于请求所述第二range信息指示的第二目标数据;
缓存单元,用以基于所述第一请求信息在第一时间段内接收并缓存从CDN源站发送的所述第一文件的完整数据,所述CDN源站是指发布内容的原始站点;
检测单元,用以当所述CDN服务器在所述第一时间段内接收到所述第二请求信息时,检测所述第二目标数据是否为所述第一文件中的部分数据;
响应单元,用以在所述第二目标数据为所述第一文件中的部分数据,且在满足一预设条件时,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
7.如权利要求6所述的CDN服务器,其特征在于,所述缓存单元,还用以在处于缓存所述第一文件的过程中时,建立与所述第一文件对应的第一缓存索引,所述第一缓存索引包括所述第一文件的第一来源位置信息;
所述检测单元,用以在所述第二请求信息中包括所述第二目标数据所在的文件的第二来源位置信息时,检测所述第二来源位置信息是否与所述第一来源位置信息一致,其中,当所述第二来源位置信息与所述第一来源位置信息一致时,表征所述第二目标数据为所述第一文件中的部分数据,当所述第二来源位置信息与所述第一来源位置信息不一致时,则表征所述第二目标数据不为所述第一文件中的部分数据。
8.如权利要求6所述的CDN服务器,其特征在于,所述检测单元,还用以检测所述第二目标数据是否与所述第一目标数据一致;
所述响应单元,用以在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并根据所述CDN服务器上的所述第二目标数据响应所述第二请求消息。
9.如权利要求8所述的CDN服务器,其特征在于,所述检测单元,还用以在所述第二目标数据与所述第一目标数据不一致时,检测缓存时长是否大于等于预设时长,所述缓存时长为从当前时刻到所述第一时间段中的最后时刻的时长;
所述响应单元,用以在所述缓存时长小于预设时长时,在所述CDN服务器接收并缓存所述第一文件的完整数据之后,从缓存于所述CDN服务器上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN服务器将所述第二目标数据发送到发出所述第二请求消息的客户端。
10.如权利要求9所述的CDN服务器,其特征在于,所述响应单元,还用以在所述缓存时长大于等于所述预设时长时,发出响应指令以通知从所述CDN源站上的所述第一文件的完整数据中确定所述第二目标数据,并通过所述CDN源站将所述第二目标数据发送到发出所述第二请求消息的客户端。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610262858.4A CN105959358A (zh) | 2016-04-25 | 2016-04-25 | Cdn服务器及其缓存数据的方法 |
PCT/CN2016/100422 WO2017185633A1 (zh) | 2016-04-25 | 2016-09-27 | Cdn服务器及其缓存数据的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610262858.4A CN105959358A (zh) | 2016-04-25 | 2016-04-25 | Cdn服务器及其缓存数据的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105959358A true CN105959358A (zh) | 2016-09-21 |
Family
ID=56915562
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610262858.4A Pending CN105959358A (zh) | 2016-04-25 | 2016-04-25 | Cdn服务器及其缓存数据的方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105959358A (zh) |
WO (1) | WO2017185633A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107241398A (zh) * | 2017-05-24 | 2017-10-10 | 中广热点云科技有限公司 | 一种基于内容分发网络的视频下载方法 |
WO2017185633A1 (zh) * | 2016-04-25 | 2017-11-02 | 乐视控股(北京)有限公司 | Cdn服务器及其缓存数据的方法 |
CN110855786A (zh) * | 2019-11-18 | 2020-02-28 | 天津联想协同科技有限公司 | 针对网络数据请求的处理方法、设备及计算机存储介质 |
CN111314414A (zh) * | 2019-12-17 | 2020-06-19 | 聚好看科技股份有限公司 | 数据传输方法、装置及系统 |
CN111385157A (zh) * | 2018-12-27 | 2020-07-07 | 厦门白山耘科技有限公司 | 一种服务器异常检测方法及装置 |
CN113590915A (zh) * | 2021-06-30 | 2021-11-02 | 影石创新科技股份有限公司 | 一种分片数据的缓存、访问方法、装置、终端及存储介质 |
CN113849125A (zh) * | 2021-08-30 | 2021-12-28 | 北京东方网信科技股份有限公司 | 一种cdn服务器磁盘读取的方法、装置及系统 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113515545B (zh) * | 2021-06-30 | 2024-05-14 | 北京百度网讯科技有限公司 | 数据查询方法、装置、系统、电子设备以及存储介质 |
CN114172945B (zh) * | 2021-11-26 | 2023-05-26 | 武汉烽火技术服务有限公司 | 一种模拟实现全双工即时通信方法与设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110276623A1 (en) * | 2010-05-06 | 2011-11-10 | Cdnetworks Co., Ltd. | File bundling for cache servers of content delivery networks |
CN103535011A (zh) * | 2011-12-14 | 2014-01-22 | 华为技术有限公司 | 内容分发网络cdn路由方法、设备和系统 |
CN103747112A (zh) * | 2013-12-24 | 2014-04-23 | 乐视网信息技术(北京)股份有限公司 | 一种cdn回源的方法、第一服务器及系统 |
CN104185036A (zh) * | 2014-09-10 | 2014-12-03 | 北京奇艺世纪科技有限公司 | 一种视频文件回源方法及装置 |
CN104935648A (zh) * | 2015-06-03 | 2015-09-23 | 北京快网科技有限公司 | 一种高性价比的cdn系统及文件预推、分片缓存的方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101662483A (zh) * | 2008-08-28 | 2010-03-03 | 盛大计算机(上海)有限公司 | 云计算网络的缓存系统及其方法 |
US8412823B1 (en) * | 2009-03-27 | 2013-04-02 | Amazon Technologies, Inc. | Managing tracking information entries in resource cache components |
CN103475679B (zh) * | 2012-06-06 | 2017-09-26 | 百度在线网络技术(北京)有限公司 | 对分片请求进行定长对齐的缓存方法、系统及装置 |
CN104967677B (zh) * | 2015-06-05 | 2019-07-19 | 无锡量子云数字新媒体科技有限公司 | 一种基于ndn缓存优化的文件传输方法以及装置 |
CN105959358A (zh) * | 2016-04-25 | 2016-09-21 | 乐视控股(北京)有限公司 | Cdn服务器及其缓存数据的方法 |
-
2016
- 2016-04-25 CN CN201610262858.4A patent/CN105959358A/zh active Pending
- 2016-09-27 WO PCT/CN2016/100422 patent/WO2017185633A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110276623A1 (en) * | 2010-05-06 | 2011-11-10 | Cdnetworks Co., Ltd. | File bundling for cache servers of content delivery networks |
CN103535011A (zh) * | 2011-12-14 | 2014-01-22 | 华为技术有限公司 | 内容分发网络cdn路由方法、设备和系统 |
CN103747112A (zh) * | 2013-12-24 | 2014-04-23 | 乐视网信息技术(北京)股份有限公司 | 一种cdn回源的方法、第一服务器及系统 |
CN104185036A (zh) * | 2014-09-10 | 2014-12-03 | 北京奇艺世纪科技有限公司 | 一种视频文件回源方法及装置 |
CN104935648A (zh) * | 2015-06-03 | 2015-09-23 | 北京快网科技有限公司 | 一种高性价比的cdn系统及文件预推、分片缓存的方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017185633A1 (zh) * | 2016-04-25 | 2017-11-02 | 乐视控股(北京)有限公司 | Cdn服务器及其缓存数据的方法 |
CN107241398A (zh) * | 2017-05-24 | 2017-10-10 | 中广热点云科技有限公司 | 一种基于内容分发网络的视频下载方法 |
CN107241398B (zh) * | 2017-05-24 | 2019-09-03 | 中广热点云科技有限公司 | 一种基于内容分发网络的视频下载方法 |
CN111385157A (zh) * | 2018-12-27 | 2020-07-07 | 厦门白山耘科技有限公司 | 一种服务器异常检测方法及装置 |
CN110855786A (zh) * | 2019-11-18 | 2020-02-28 | 天津联想协同科技有限公司 | 针对网络数据请求的处理方法、设备及计算机存储介质 |
CN110855786B (zh) * | 2019-11-18 | 2022-07-29 | 天津联想协同科技有限公司 | 针对网络数据请求的处理方法、设备及计算机存储介质 |
CN111314414A (zh) * | 2019-12-17 | 2020-06-19 | 聚好看科技股份有限公司 | 数据传输方法、装置及系统 |
CN113590915A (zh) * | 2021-06-30 | 2021-11-02 | 影石创新科技股份有限公司 | 一种分片数据的缓存、访问方法、装置、终端及存储介质 |
CN113849125A (zh) * | 2021-08-30 | 2021-12-28 | 北京东方网信科技股份有限公司 | 一种cdn服务器磁盘读取的方法、装置及系统 |
CN113849125B (zh) * | 2021-08-30 | 2024-01-09 | 北京东方网信科技股份有限公司 | 一种cdn服务器磁盘读取的方法、装置及系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2017185633A1 (zh) | 2017-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105959358A (zh) | Cdn服务器及其缓存数据的方法 | |
US10812358B2 (en) | Performance-based content delivery | |
US10027739B1 (en) | Performance-based content delivery | |
CN105281981B (zh) | 网络服务的数据流量监控方法和装置 | |
CN111614736A (zh) | 网络内容资源调度方法、域名调度服务器及电子设备 | |
CN106888270B (zh) | 回源选路调度的方法和系统 | |
US20040044731A1 (en) | System and method for optimizing internet applications | |
TW201824047A (zh) | 攻擊請求的確定方法、裝置及伺服器 | |
CN108156038B (zh) | 请求分发方法、装置、接入网关及存储介质 | |
CN107026758B (zh) | 用于cdn业务更新的信息处理方法、信息处理系统及服务器 | |
CN106462589A (zh) | 动态缓存器分配和网络管理 | |
US11204971B1 (en) | Token-based authentication for a proxy web scraping service | |
CN102833111B (zh) | 一种可视化http数据监管方法及装置 | |
CN105978936A (zh) | Cdn服务器及其缓存数据的方法 | |
CN102025595A (zh) | 流量优化方法及系统 | |
CN109672757A (zh) | 文件访问方法及文件访问处理装置 | |
CN108881516A (zh) | 一种调度多cdn服务系统的方法和装置 | |
CN111770119B (zh) | 网站资源获取方法、系统、装置及计算机存储介质 | |
CN106850572A (zh) | 目标资源的访问方法和装置 | |
CN106331172A (zh) | 一种应用于内容分发网络的资源检测方法及装置 | |
CN107992416A (zh) | 一种网页时延的确定方法及装置 | |
CN106411819A (zh) | 一种识别代理互联网协议地址的方法及装置 | |
CN106874371A (zh) | 一种数据处理方法及装置 | |
CN106856456A (zh) | 缓存集群服务的处理方法及系统 | |
CN103731396B (zh) | 资源访问方法、系统及缓存资源信息推送装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160921 |
|
WD01 | Invention patent application deemed withdrawn after publication |