CN111104376A - 资源文件查询方法及装置 - Google Patents

资源文件查询方法及装置 Download PDF

Info

Publication number
CN111104376A
CN111104376A CN201911314753.9A CN201911314753A CN111104376A CN 111104376 A CN111104376 A CN 111104376A CN 201911314753 A CN201911314753 A CN 201911314753A CN 111104376 A CN111104376 A CN 111104376A
Authority
CN
China
Prior art keywords
server
resource file
target
resource
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911314753.9A
Other languages
English (en)
Other versions
CN111104376B (zh
Inventor
盛骥斌
唐文滔
曾迅迅
曹问
刘维
邵灿
李兴平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Original Assignee
Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Happly Sunshine Interactive Entertainment Media Co Ltd filed Critical Hunan Happly Sunshine Interactive Entertainment Media Co Ltd
Priority to CN201911314753.9A priority Critical patent/CN111104376B/zh
Publication of CN111104376A publication Critical patent/CN111104376A/zh
Application granted granted Critical
Publication of CN111104376B publication Critical patent/CN111104376B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • G06F16/148File search processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及互联网技术领域,具体提供了一种资源文件查询方法及装置,该方法包括:响应于资源查询请求;检测当前服务器是否存储该资源查询请求对应的资源文件;若未存储则确定唯一标识符,并生成资源回源请求。确定第一目标服务器,向第一目标服务器发送资源回源请求。若该第一目标服务器未返回资源文件,确定各个第二目标服务器,由第一目标服务器向第二目标服务器发送资源回源请求;当接收到任意的第二目标服务器经由第一目标服务器返回资源文件时,将资源文件发送至客户端。应用该方法,可以通过CDN系统中的任意的服务器查询资源文件,并在该服务器所在的节点集群中不存在用户所需的资源文件时,能够从其他服务器中成功回源,提高用户体验。

Description

资源文件查询方法及装置
技术领域
本发明涉及计算机技术领域,特别是涉及一种资源文件查询方法及装置。
背景技术
随着计算机技术的快速发展,用户对各种各样资源文件的需求也越来越高。当用户需要对任意一个资源文件进行查找时,可通过内容分发网络(Content DeliveryNetwork,CDN)系统进行查找,以获取用户所需的资源文件,满足用户的需求。
在现有技术中,CDN系统中的各个资源文件一般存储于该CDN系统的各个服务器当中,但由于CDN系统中资源文件的数量过于庞大,因此为了使用户能够快速查找到其所需的资源文件,CDN系统中一般部署了中心节点,通过中心节点对服务器中的各个资源文件进行管理,用户只需向中心节点发送查询请求,该中心节点则根据用户发送的查询请求,查询该中心节点下各个服务器中存储资源文件的情况,并向用户反馈其所需的资源文件。利用中心节点进行查找资源文件的方式虽然简便,但当中心节点一旦出现异常,例如网络断网,机房断电等就很可能无法有效服务于用户,或一些低热度资源文件一旦被删除,则无法进行回源,使得用户无法查找到其所需的资源文件,给用户带来了不好的体验。
发明内容
有鉴于此,本发明提供了一种资源文件查询方法,通过该方法,可以通过CDN系统中的任意一个服务器查询资源文件,并能保证在该服务器所在的节点集群中不存在所请求查询的资源文件时,能够从其他服务器中成功回源,并向用户所在的客户端发送资源文件,提高用户体验。
本发明还提供了一种资源文件查询装置,用以保证上述方法在实际中的实现及应用。
一种资源文件查询方法,包括:
响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
检测所述当前服务器所在的IDC中是否存储有所述资源文件;
若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
上述的方法,可选的,所述确定所述资源文件对应的唯一标识符,包括:
获取所述资源查询请求中包含的资源地址;
调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
上述的方法,可选的,所述确定与所述唯一标识符对应的第一目标服务器,包括:
确定所述当前服务器所在的节点分组中各个服务器为第一服务器,并获取每个所述第一服务器的第一服务器信息;
调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
上述的方法,可选的,所述在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应第二目标服务器,包括:
在所述CDN系统中,将除所述当前服务器所在节点分组以外的各个节点分组中的各个服务器确定为第二服务器,并获取每个所述第二服务器的第二服务器信息;
调用预先设置的第三算法,对所述唯一标识符及各个所述第二服务器信息进行计算,获得在所述CDN系统中除所述当前服务器所在节点分组以外的每个节点分组中,分别与所述唯一标识符对应第二服务器地址;
确定每个所述第二服务器地址对应的第二目标服务器。
上述的方法,可选的,还包括:
若所述第一目标服务器返回所述资源文件,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
上述的方法,可选的,还包括:
当接收到扫描触发指令时,对所述当前服务器中已存储的各个目标资源文件进行扫描,获得每个所述目标资源文件对应的资源地址;
对于每个所述目标资源文件,依据所述目标资源文件对应的资源地址,确定所述目标资源文件对应的唯一标识符,并获取所述当前服务器的服务器信息;
依据所述当前服务器的服务器信息,及所述目标资源文件对应的唯一标识符,验证所述目标资源文件是否属于所述当前服务器;
当所述目标资源文件不属于所述当前服务器时,确定所述目标资源文件的查询频率,若所述目标资源文件的查询频率低于预设的查询阈值,将所述目标资源文件删除;
当所述目标资源文件属于所述当前服务器时,确定所述当前服务器的当前存储容量,并依据所述当前存储容量,对所述目标资源文件进行文件处理。
上述的方法,可选的,所述依据所述当前存储容量,对所述目标资源文件进行文件处理,包括:
判断所述当前服务器的当前存储容量是否大于预先设置的存储阈值;
若所述当前服务器的当前存储容量大于预先设置的存储阈值,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述目标资源文件对应的唯一标识符对应的第三目标服务器,并向每个所述第三目标服务器发送所述目标资源文件对应的文件查询请求;
当接收到至少两个所述目标服务器返回的,确定该第三服务器已存储所述目标资源文件的第一查询结果时,将所述目标资源文件删除。
一种资源文件查询装置,包括:
第一确定单元,用于响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
检测单元,用于检测所述当前服务器所在的IDC中是否存储有所述资源文件;
第二确定单元,用于若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
第一发送单元,用于确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
第三确定单元,用于若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
第二发送单元,用于当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
上述的装置,可选的,所述第二确定单元,包括:
第一获取子单元,用于获取所述资源查询请求中包含的资源地址;
第一计算子单元,用于调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
上述的装置,可选的,所述第一发送单元,包括:
第二获取子单元,用于获取所述当前服务器所在的节点分组中各个服务器的第一服务器信息;
第二计算子单元,用于调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
确定子单元,用于确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
与现有技术相比,本发明包括以下优点:
本发明提供了一种资源文件查询方法,包括:响应于当前服务器接收到的资源查询请求,确定与资源查询请求对应的资源文件;检测该当前服务器是否存储该资源文件,若未存储则确定该资源文件对应的唯一标识符,生成资源回源请求。确定与该唯一标识符对应的第一目标服务器,并向该第一目标服务器发送资源回源请求。若该第一目标服务器未返回该资源文件时,在CDN系统除该当前服务器所在的节点分组之外的各个节点分组中,确定与该唯一标识符对应的第二目标服务器,通过第一目标服务器向每个第二目标服务器发送资源回源请求;当接收到任意一个第二目标服务器经由第一目标服务器返回资源文件时,将该资源文件发送至客户端。应用本发明实施例提供的方法,可以通过CDN系统中的任意的服务器查询资源文件,并在该服务器所在的节点集群中不存在用户所需的资源文件时,能够从其他服务器中成功回源,提高用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种资源文件查询方法的方法流程图;
图2为本发明实施例提供的一种资源文件查询方法的方法示意图;
图3为本发明实施例提供的一种资源文件查询方法的又一方法流程图;
图4为本发明实施例提供的一种资源文件查询方法的又一方法流程图;
图5为本发明实施例提供的一种资源文件查询装置的装置结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本申请中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本发明可用于众多通用或专用的计算装置环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器装置、包括以上任何装置或设备的分布式计算环境等等。
本发明实施例提供了一种资源文件查询方法,该方法可以应用在多种系统平台,其执行主体可以为计算机终端或各种移动设备的处理器、内容分发网络CDN系统或该CDN系统中任意一个服务器等,所述方法的方法流程图如图1所示,具体包括:
S101:响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
在本发明实施例中,当用户需要查询CDN系统中任意的资源文件时,可以通过客户端访问该CDN系统中的任意一个服务器进行查询资源文件。当CDN系统中任意一个服务器接收到的资源查询请求时,确定接收到资源查询请求的服务器为当前服务器。对该资源查询请求进行响应,并确定与该资源查询请求对应的资源文件。
其中,该CDN系统包含多个节点分组,每个节点分组中均有多个节点集群IDC组成,每个节点集群具体可以为节点机房,每个IDC中包含多个服务器。
S102:检测所述当前服务器所在的IDC中是否存储有所述资源文件;
在本发明实施例中,该CDN系统的每个服务器中均存储多个资源文件。在当前服务器接收到资源查询请求后,可以检测该当前服务器及其所在的节点集群IDC中是否存储该资源文件。
需要说明的是,本发明实施例中的节点集群IDC实际可以是节点机房。同一个IDC中的各个服务器之间相互连接,且IDC中所有服务器均同时保存数据并对外服务。
S103:若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
在本发明实施例中,若当前服务器所在的IDC中并未存储该资源文件,则需要从其他存储有该资源文件的服务器中获取。由于CDN系统中每个服务器对应存储的资源文件不一定相同,因此需要确定对应存储该资源文件的服务器。其中,先确定该资源文件对应的唯一标识符,并生成与资源查询请求对应的资源回源请求。该资源回源请求用于对该资源文件进行回源,即,从其他服务器中获取用户所请求查询的资源文件。
需要说明的是,本发明实施例中的唯一标识符可以是32位识别码UUID,CDN系统中所存储的每个资源文件均对应一个唯一的唯一标识符。
S104:确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
在本发明实施例中,在当前服务器所在的节点分组当中,确定与该唯一标识符对应的第一目标服务器。其中,该第一目标服务器为该当前服务器所在的节点分组中,对应存储该资源文件的服务器。在确定该唯一标识符对应的第一目标服务器后,向该第一目标服务器发送资源回源请求,以触发该第一目标服务器根据该资源回源请求返回资源文件,其中,该资源回源请求中包含所述资源查询请求对应的所有信息。
需要说明的是,CDN系统中每个服务器都有对应保存的资源文件,即,每个资源文件在CDN系统的各个节点分组中都有对应存储的应存服务器,但每个应存服务器在保存资源文件的过程中,可能会将资源文件误删或由于内存不足等原因将文件删除。本发明实施例中所述的第一目标服务器则为该当前服务器所在的节点分组中,与该资源文件对应的应存服务器。虽然该第一目标服务器为该资源文件对应保存的服务器,但在存储过程中可能将该资源文件误删,通过向该第一目标服务器发送资源回源请求,以确定该第一目标服务器是否响应该资源回源请求返回该资源文件。
S105:若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
在本发明实施例中,若该第一目标服务器未向该当前服务器返回该资源文件,可以确定该第一目标服务器未存储该资源文件。确定该CDN系统中除了当前服务器所在的节点分组外的其他各个节点分组中,与该唯一标识符对应的第二目标服务器,该第二目标服务器为其他节点分组中对应保存该资源文件的应存服务器。在确定各个第二目标服务器后,由该第一目标服务器向各个第二目标服务器发送资源回源请求,以触发各个第二目标服务器在接收到资源回源请求后,确定是否存储有该资源文件;若第二目标服务器存储有该资源文件,会将该资源文件返回至第一目标服务器。
需要说明的是,在本发明实施例中,CDN系统中的每个节点分组中均有一个对应保存该资源文件的应存服务器。确定与该唯一标识符对应的第二服务器的过程,可以是由CDN系统中的处理器进行确定,也可以是由用户所请求的服务器进行确定,也可以是由该第一目标服务器进行确定。
S107:当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
在本发明实施例中,当任意一个第二目标服务器返回资源文件时,按照原先请求的路径将资源文件先发送至第一目标服务器,再由第一目标服务器将该资源文件转发给当前服务器。当前服务器将该资源文件存储在该服务器中,并将该资源文件发送给其对应的客户端。
需要说明的是,该当前服务器在接收到第一目标服务器发送的资源文件后,将该资源文件进行保存,以满足用户通过客户端下一次请求查询该资源文件时,可以快速响应用户的请求。同理,第一目标服务器在接收到第二目标服务器返回资源文件时,也可以将该资源文件进行保存,以保证CDN系统中任意一个服务器未存储该资源文件,并向第一目标服务器发送资源回源请求时,第一目标服务器能够快速响应该资源回源请求返回该资源文件。
本发明实施例提供的资源文件查询方法中,用户可以通过客户端在CDN系统中任意一个服务器查询资源文件,在服务器接收到的查询请求,并确定需要进行查询的资源文件后,先检测该当前服务器所在的IDC是否存储该资源文件。若该服务器所在的IDC中未存储该资源文件,则确定该资源文件对应的唯一标识符后,再确定该当前服务器所在的节点分组中,与该唯一标识符对应的第一目标服务器。向第一目标服务器发送资源回源请求,以触发该第一目标服务器返回该资源文件。若该第一目标服务器中没有存储该资源文件,则再确定CDN系统中除该当前所在的节点分组的其他节点分组中,与该唯一标识符对应的第二目标服务器,由第一目标服务器向各个第二目标服务器发送资源回源请求。当接收到任意一个第二目标服务器返回资源文件时,将该资源文件发送给当前服务器对应的客户端。
需要说明的是,在响应当前服务器接收到的资源查询请求时,并不能确定对应保存该资源文件的服务器,因此,通过资源文件对应的唯一标识符,才能确定该资源文件在各个节点分组中的应存服务器,即,本发明实施例所提及的第一目标服务器和各个第二目标服务器。但第一目标服务器和第二目标服务器不一定都存储了该资源文件,因此需要通过发送资源回源请求,获取任意一个第一目标服务器或第二目标服务器返回的资源文件。
还需要说明的是,若当前服务器所在的IDC中未存储用户所请求查询的资源文件,需确定该当前服务器所在节点分组中与该唯一标识符对应的第一目标服务器。若该第一目标服务器为当前服务器所在的IDC中任意一个服务器,可直接确定该第一目标服务器也未存储该资源文件。
应用本发明实施例提供的方法,用户可以通过CDN系统中的任意一个服务器查询资源文件,保证在该服务器所在的节点集群中不存在用户所需的资源文件时,能够从其他服务器中成功回源,并向用户发送资源文件,提高用户体验。
需要说明的是,本发明实施例中,CDN系统为去中心化系统,该CDN系统不存在设置为中心节点的服务器,用户可以根据就近原则选择任意一个服务器查询资源文件。CDN系统的每个IDC中的所有服务器同时保存多个资源文件并对外服务,各个IDC在该CDN系统中划分为不同的逻辑组,即,划分为多个节点分组,具体划分方式如图2所示。每个节点分组中,IDC的数量可以一致,也可以不一致。节点分组的划分方式可以是以地区进行划分,例如:湖南省内的各个IDC划分为一组,北京市内的各个IDC划分为一组;或华东地区的各个IDC划分为一组,华南地区的各个IDC划分为一组。
本发明实施例提供的方法中,基于上述步骤S103中的内容,在当前服务器所在的IDC未存储在资源文件时,需确定该资源文件对应的唯一标识符,具体可以包括:
获取所述资源查询请求中包含的资源地址;
调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
本发明实施例提供的资源文件查询方法中,资源查询请求中包含了各种资源信息,具体可以包括资源地址、资源名称、资源文件的文件类型、文件格式等信息,具体可以根据资源名称和资源类型等信息,确定与该资源查询请求对应的需要获取的资源文件。获取该资源查询请求中包含的资源地址,并调用第一算法计算该资源地址,其中,该第一算法具体可以是哈希算法MD5。在计算后,获得该资源文件对应的唯一标识符。
需要说明的是,每个资源文件仅有一个唯一对应的唯一标识符,一个唯一标识符也仅对应的一个资源文件。该资源地址为存储该资源文件的具体位置地址。
应用本发明实施例提供的方法,可以根据该资源查询请求中的资源地址,计算获得该资源文件对应的唯一标识符,以通过该唯一标识符确定该CDN系统中应该存储的资源文件的第一目标服务器及各个第二目标服务器。
本发明实施例提供的方法中,若当前服务器所在的IDC中未存储该资源文件时,需确定该当前服务器所在的节点分组中与所述唯一标识符对应的第一目标服务器的过程如图3所示,具体包括:
S301:确定所述当前服务器所在的节点分组中各个服务器为第一服务器,并获取每个所述第一服务器的第一服务器信息;
在本发明实施例中,获取该当前服务器所在的节点分组中各个第一服务器的第一服务器信息。
可选的,当前服务器所在的节点分组中的各个第一服务器,可以是除所述当前服务器所在的IDC中各个服务器之外的所有服务器;因此,第一服务器信息还可以是该节点分组中,除了当前服务器所在的IDC中各个服务器之外的所有服务器的服务器信息。
需要说明的是,各个第一服务器信息已保存在该当前服务器中。CDN系统中每个服务器中均保存自身服务器信息,同时也保存各个节点分组中各个IDC的信息及每个IDC中各个服务器的服务器信息。
还需要说明的是,CDN系统中的每个服务器会实时更新其保存的各个服务器信息。具体的,CDN系统中若存在任意服务器发生故障或服务器信息变更时,会上报给CDN系统。CDN系统会将各个服务器的更新信息保存到更新列表中,同一节点分组的IDC会接收到CDN系统推送更新消息,消息包含更新列表,更新列表中有信息更新生效时间,在生效时间到达后统一更新各个服务器信息,且各个服务器的时间都是同步的。
S302:调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
在本发明实施例中,在获取各个第一服务器信息后,通过第二算法计算该唯一标识符与各个第一服务器信息,获得第一服务器地址,该第一服务器地址可以是服务器的IP地址。
可选的,也可以依据唯一标识符、各个第一服务器信息及该当前服务器所在的IDC的IDC信息,确定该IDC内与该唯一标识符对应的第一服务器地址。
S303:确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
在本发明实施例中,根据该第一服务器地址,可以确定与该第一服务器地址对应的服务器,且该第一服务器地址对应的服务器为该当前服务器所在的节点分组中与该唯一标识符对应的第一目标服务器。
本发明实施例提供的资源文件查询方法中,当需要确定当前服务器所在的节点分组中对应保存该资源文件的第一目标服务器时,先获取该节点分组中各个服务器的第一服务器信息,由于CDN系统中每个服务器中都存储了所有服务器的服务器信息,可以通过当前服务器中存储的各个服务器信息,获取该当前服务器所在的节点分组中各个服务器的第一服务器信息。调用第二算法,将预先计算获得的该资源文件对应的唯一标识符与各个第一服务器信息计算获得第一服务器地址。该第一服务器地址对应的第一服务器则为与该唯一标识符对应的第一目标服务器。
具体的,由于CDN系统中各个IDC内服务器数量与属性可能会改变,所以通过第二算法确定第一服务地址之前,可以先获取各个当前服务器所在节点分组中各个IDC的IDC信息,确定该节点分组中存储该资源文件的IDC,再在存储有该资源文件的IDC中计算具体的服务器地址。
需要说明的是,该第二算法可以是哈希算法MD5,以唯一标识符为密钥key通过一致性哈希算法在该节点分组内定位具体的IDC以及第一目标服务器,即,根据该第一服务器地址确定节点分组内第一目标服务器所在的IDC,并在该IDC中定位该第一目标服务器。该第二算法可以与上述实施例步骤S103中的第一算法一致。
应用本发明实施例提供的方法,根据唯一标识符及各个第一服务器信息获得第一服务器地址,通过该第一服务器地址确定当前服务器所在的节点分组内应该存储该资源文件的第一目标服务器,并通过该第一目标服务器请求对该资源文件的回源。
本发明实施例提供的方法中,若该第一目标服务器未返回与资源回源请求对应的资源文件,再在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应第二目标服务器,具体包括:
在所述CDN系统中,将除所述当前服务器所在节点分组以外的各个节点分组中的各个服务器确定为第二服务器,并获取每个所述第二服务器的第二服务器信息;
调用预先设置的第三算法,对所述唯一标识符及各个所述第二服务器信息进行计算,获得在所述CDN系统中除所述当前服务器所在节点分组以外的每个节点分组中,分别与所述唯一标识符对应第二服务器地址;
确定每个所述第二服务器地址对应的第二目标服务器。
本发明实施例提供的方法中,确定该CDN系统中与该唯一标识符对应的各个第二目标服务器的过程与确定第一目标服务器过程基本相似。由于当前服务器中存储CDN系统中所有IDC的信息及所有服务器的服务器信息。当第一目标服务器未返回与资源回源请求对应的资源文件时,获取CDN系统中各个第二服务器的服务器信息。该第二服务器是CDN系统中除当前服务器所在的节点分组之外的各个节点分组中的所有服务器,每个第二服务器对应一个第二服务器信息。调用预先设置的第三算法,将唯一标识符与各个第二服务器信息计算,获得CDN系统中与每个节点分组对应第二服务器地址。该每个第二服务器地址对应的第二服务器则为第二目标服务器。其中,该第三算法可以是上述实施例步骤S302中的第二算法,应用第三算法计算各个第二服务器地址的过程,与应用第二算法计算第一服务器地址的过程相似。
需要说明的是,在确定各个第二目标服务器后,可以经由第一目标服务器同时向各个第二目标服务器发送资源回源请求,以使各个第二目标服务器在接收到资源回源请求,并确定其内部存储有与该唯一标识符对应的资源文件时,将该资源文件经由该第一目标服务器发送至当前服务器。
可选的,本发明实施例提供的方法中,在确定该第一目标服务器,将预先生成的资源回源请求发送到该第一目标服务器后,若该第一目标服务器中未存储该资源文件,该第一目标服务器可以不向当前服务器返回任何消息。第一目标服务器可以根据自身已存储的各个服务器信息,确定CDN系统中各个第二目标服务器,并向各个第二目标服务器发送资源回源请求,以触发各个第二目标服务器依据该资源回源请求返回的资源文件。若第一目标服务器存储有该资源文件,并将该资源文件发送至当前服务器,则将该资源文件存储在当前服务器中,并通过当前服务器将该资源文件发送至其对应的客户端,用户可以通过该客户端获取该资源文件。此时,无需再确定各个第二目标服务器,结束资源文件的查询过程。
应用本发明实施例提供的方法中,当第一目标服务器未存储有该资源文件时,再通过唯一标识符及各个第二服务器信息确定每个节点分组中的第二目标服务器,保证能够成功回源该资源文件,提高用户的使用体验。
本发明实施例提供的方法中,由于CDN系统的每个服务器中均存储着多个资源文件,但每个服务器中存储容量都是有限的,因此,为了保证各个服务器有富余的存储空间,需要经常对各个服务器进行清理,以使服务器中有更多富余的存储空间保存资源文件,用户请求查询资源文件时,也能尽快响应用户的请求。对于该CDN系统中的各个服务器,每个服务器的扫描过程如图4所示,具体包括:
S401:当接收到扫描触发指令时,对所述当前服务器中已存储的各个目标资源文件进行扫描,获得每个所述目标资源文件对应的资源地址;
在本发明实施例中,对于上述实施例步骤S101中接收到资源查询请求的当前服务器,当接收到对该当前服务器的扫描触发指令时,确定每个需要进行扫描的资源文件为目标资源文件,并在对各个目标资源文件扫描后,获得每个目标资源文件对应的资源地址。
需要说明的是,该扫描触发指令可以是按照周期进行触发,按照预先设置的扫描周期,自动触发对该当前服务器进行扫描的扫描触发指令;也可以是当前服务器中当前的存储空间达到一定的阈值时,自动触发扫描触发指令。该扫描周期可以是一小时一次,也可以是一天一次。该CDN系统中每个服务器的扫描周期可以一致,也可以不同,当前服务器与其他服务器可以同时扫描,也可以是CDN系统中的每个服务器分别在不同的时间段扫描。
S402:对于每个所述目标资源文件,依据所述目标资源文件对应的资源地址,确定所述资源文件对应的唯一标识符,并获取所述当前服务器的服务器信息;
在本发明实施例中,对于该服务器中每个已存储的目标资源文件,可以调用上述实施例中的第一算法,即哈希算法MD5,计算每个目标资源文件对应的资源地址,获得每个目标资源文件对应的唯一标识符。在确定每个目标资源文件的唯一标识符后,获取当前进行扫描的所述当前服务器的服务器信息。
S403:依据所述当前服务器的服务器信息,及所述目标资源文件对应的唯一标识符,验证所述目标资源文件是否属于所述当前服务器;
在本发明实施例中,将该服务器信息一一与各个已存储的资源文件对应的唯一标识进行验证,其中,验证过程可以为:调用上述实施例中提及的第二算法,对该目标资源文件的唯一标识符与当前服务器的服务器信息进行计算,获得该目标资源文件对应的服务器地址;验证该服务器地址是否为当前服务器的服务器地址,以确定目标资源文件是否属于该当前服务器。
S404:当所述目标资源文件不属于所述当前服务器时,确定所述目标资源文件的查询频率,若所述目标资源文件的查询频率低于预设的查询阈值,将所述目标资源文件删除;
在本发明实施例中,若任意的目标资源文件不属于该服务器,即当前服务器并非对应保存该目标资源文件的服务器,则确定该目标资源文件的查询频率,其中,该查询频率为在预设时间段内的查询次数。若该目标资源文件的查询频率较低,将该目标资源文件删除。
可选的,若该资源文件的查询频率较高,且该服务器的存储容量在富余的情况下,可以不用将该资源文件删除。
S405:当所述目标资源文件属于所述当前服务器时,确定所述当前服务器的当前存储容量,并依据所述当前存储容量,对所述目标资源文件进行文件处理。
在本发明实施例中,若任意的已存储的目标资源文件属于该当前服务器,则根据该服务器的当前存储容量对该目标资源文件进行文件处理。其中,该文件处理可以包括文件删除和文件保存。
基于步骤S405中根据当前存储容量对目标资源文件进行文件处理的过程,包括:
判断所述当前服务器的当前存储容量是否大于预先设置的存储阈值;
若所述当前服务器的当前存储容量大于预先设置的存储阈值,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述目标资源文件对应的唯一标识符对应的第三目标服务器,并向每个所述第三目标服务器发送所述目标资源文件对应的文件查询请求;
当接收到至少两个所述目标服务器返回的,确定该第三服务器已存储所述目标资源文件的第一查询结果时,将所述目标资源文件删除。
本发明实施例提供的文件查询方法中,该CDN系统中的各个服务器均存储了多个资源文件,且每个服务器可能时时刻刻都要接收用户通过各个客户端发送的资源查询请求,因此,对于用户查询频率高的资源文件,服务器都会对高频率查询的资源文件进行存储。但部分资源文件并不属于当前查询的服务器,在查询频率较低时,若各个资源文件均长期存储在该服务器中,会造成服务器容量不足。为了保证当前服务器的存储空间的富余,可以定期对当前服务器各个已存储的资源文件进行清理。在该当前服务器中,在达到预设的扫描周期后,可以触发当前服务器扫描各个已存储的目标资源文件,扫描完成后获得每个进行扫描的目标资源文件对应的资源地址。并按照第一算法计算目标资源地址获得每个目标资源文件对应的唯一标识符。将该当前服务器的服务器信息与每个唯一标识符进行验证,以确定每个唯一标识符对应的目标资源文件是否属于该当前服务器。若任意的目标资源文件不属于该当前服务器且查询频率低于预设查询阈值,则可以将其删除。当再次响应于该目标资源文件对应的资源查询请求时,再执行上述步骤S101~S107的过程,此处不复赘述。若目标资源文件属于该当前服务器,则判断服务器当前存储容量是否大于存储阈值。若大于,则继续将目标资源文件保存在服务器内部的存储空间中。若不大于,向该目标资源文件对应的各个第三目标服务器发送文件查询请求,以确定该CDN系统中是否有超过两个第三目标服务器存储该目标资源文件。若有超过两个第三目标服务器存储该目标资源文件,可以将当前服务器中的目标资源文件删除,若没有超过两个第三目标服务器存储该目标资源文件,则可以不删除当前服务器的目标资源文件。
需要说明的是,本发明实施例中的各个第三目标服务器可以是,CDN系统的各个节点分组中,每个节点分组对应存储该目标资源文件的服务器。
本发明实施例中,可选的,当CDN系统中任意的服务器接收对某一资源文件的删除指令时,可以根据该删除指令将该资源文件进行删除。
具体的,当服务器内的存储容量不足时,也可以通过确定该服务器中各个已存储的资源文件的查询频率,选择删除查询频率低、长期无用户进行访问查询的资源文件。例如资源文件A长期无用户进行查询,则确定其他服务器中已存储该资源文件A的情况下,将该资源文件A删除。
应用本发明实施例提供的方法,定期对当前服务器中的各个资源文件进行处理,并且保证CDN系统中其他服务器存储该当前服务器将要删除的资源文件的前提下,再将资源文件进行删除,以保证用户请求该资源文件时,可以从其他服务器成功回源,提高用户的体验感。
上述各个实施例的具体实施过程及其衍生方式,均在本发明的保护范围之内。
与图1所述的方法相对应,本发明实施例还提供了一种资源文件查询装置,用于对图1中方法的具体实现,本发明实施例提供的资源文件查询装置可以应用计算机终端或各种移动设备中,其结构示意图如图5所示,具体包括:
第一确定单元501,用于响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
检测单元502,用于检测所述当前服务器所在的IDC中是否存储有所述资源文件;
第二确定单元503,用于若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
第一发送单元504,用于确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
第三确定单元505,用于若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
第二发送单元506,用于当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
本发明实施例提供的装置中,在响应于当前服务器接收到的资源查询请求后,由第一确定单元确定该资源查询请求对应的资源文件,再由检测单元检测该当前服务器所在的节点集群IDC是否存储了该资源文件。在该节点集群IDC未存储该资源文件时,由第二确定单元确定该资源文件对应的唯一标识符,通过该唯一标识符确定当前服务器所在分组内的第一目标服务器。再由第一发送单元向第一目标服务器发送资源回源请求。若该第一目标服务器未返回该资源文件,则由第三确定单元确定CDN系统中除当前服务器所在的节点分组之外每个节点分组中的第二目标服务器,经过第一目标服务器向第二目标服务器发送资源回源请求。当第二目标服务器返回资源文件时,最终由第二发送单元通过当前服务器将该资源文件发送至客户端。通过该实施例提供的装置,通过资源回源的方式快速获得资源查询请求对应的资源文件,提高用户的体验感。
本发明实施例提供的装置中,所述第二确定单元,包括:
第一获取子单元,用于获取所述资源查询请求中包含的资源地址;
第一计算子单元,用于调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
本发明实施例提供的装置中,所述第一发送单元,包括:
第二获取子单元,用于获取所述当前服务器所在的节点分组中各个服务器的第一服务器信息;
第二计算子单元,用于调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
确定子单元,用于确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
本发明实施例提供的装置中,所述第三确定单元,包括:
第三获取子单元,用于在所述CDN系统中,将除所述当前服务器所在节点分组以外的各个节点分组中的各个服务器确定为第二服务器,并获取每个所述第二服务器的第二服务器信息;
第三计算子单元,用于调用预先设置的第三算法,对所述唯一标识符及各个所述第二服务器信息进行计算,获得在所述CDN系统中除所述当前服务器所在节点分组以外的每个节点分组中,分别与所述唯一标识符对应第二服务器地址;确定每个所述第二服务器地址对应的第二目标服务器。
本发明实施例提供的装置中,还包括:
存储单元,用于若所述第一目标服务器返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
本发明实施例提供的装置中,还包括:
扫描单元,用于当接收到扫描触发指令时,对所述当前服务器中已存储的各个目标资源文件进行扫描,获得每个所述目标资源文件对应的资源地址;
处理单元,用于对于每个所述目标资源文件,依据所述目标资源文件对应的资源地址,确定所述目标资源文件对应的唯一标识符,并获取所述当前服务器的服务器信息;依据所述当前服务器的服务器信息,及所述目标资源文件对应的唯一标识符,验证所述目标资源文件是否属于所述当前服务器;当所述目标资源文件不属于所述当前服务器时,确定所述目标资源文件的查询频率,若所述目标资源文件的查询频率低于预设的查询阈值,将所述目标资源文件删除;当所述目标资源文件属于所述当前服务器时,确定所述当前服务器的当前存储容量,并依据所述当前存储容量,对所述目标资源文件进行文件处理。
本发明实施例提供的装置中,所述处理单元,包括:
判断子单元,用于判断所述当前服务器的当前存储容量是否大于预先设置的存储阈值;
发送子单元,用于若所述当前服务器的当前存储容量大于预先设置的存储阈值,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述目标资源文件对应的唯一标识符对应的第三目标服务器,并向每个所述第三目标服务器发送所述目标资源文件对应的文件查询请求;
删除子单元,用于当接收到至少两个所述目标服务器返回的,确定该第三服务器已存储所述目标资源文件的第一查询结果时,将所述目标资源文件删除。
以上本发明实施例公开的资源文件查询装置中的具体工作过程,可参见本发明上述实施例公开的资源文件查询方法中的对应内容,这里不再进行赘述。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现。
为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种资源文件查询方法,其特征在于,包括:
响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
检测所述当前服务器所在的IDC中是否存储有所述资源文件;
若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
2.根据权利要求1所述的方法,其特征在于,所述确定所述资源文件对应的唯一标识符,包括:
获取所述资源查询请求中包含的资源地址;
调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
3.根据权利要求1所述的方法,其特征在于,所述确定与所述唯一标识符对应的第一目标服务器,包括:
确定所述当前服务器所在的节点分组中各个服务器为第一服务器,并获取每个所述第一服务器的第一服务器信息;
调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
4.根据权利要求1所述的方法,其特征在于,所述在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应第二目标服务器,包括:
在所述CDN系统中,将除所述当前服务器所在节点分组以外的各个节点分组中的各个服务器确定为第二服务器,并获取每个所述第二服务器的第二服务器信息;
调用预先设置的第三算法,对所述唯一标识符及各个所述第二服务器信息进行计算,获得在所述CDN系统中除所述当前服务器所在节点分组以外的每个节点分组中,分别与所述唯一标识符对应第二服务器地址;
确定每个所述第二服务器地址对应的第二目标服务器。
5.根据权利要求1所述的方法,其特征在于,还包括:
若所述第一目标服务器返回所述资源文件,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
6.根据权利要求1所述的方法,其特征在于,还包括:
当接收到扫描触发指令时,对所述当前服务器中已存储的各个目标资源文件进行扫描,获得每个所述目标资源文件对应的资源地址;
对于每个所述目标资源文件,依据所述目标资源文件对应的资源地址,确定所述目标资源文件对应的唯一标识符,并获取所述当前服务器的服务器信息;
依据所述当前服务器的服务器信息,及所述目标资源文件对应的唯一标识符,验证所述目标资源文件是否属于所述当前服务器;
当所述目标资源文件不属于所述当前服务器时,确定所述目标资源文件的查询频率,若所述目标资源文件的查询频率低于预设的查询阈值,将所述目标资源文件删除;
当所述目标资源文件属于所述当前服务器时,确定所述当前服务器的当前存储容量,并依据所述当前存储容量,对所述目标资源文件进行文件处理。
7.根据权利要求6所述的方法,其特征在于,所述依据所述当前存储容量,对所述目标资源文件进行文件处理,包括:
判断所述当前服务器的当前存储容量是否大于预先设置的存储阈值;
若所述当前服务器的当前存储容量大于预先设置的存储阈值,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述目标资源文件对应的唯一标识符对应的第三目标服务器,并向每个所述第三目标服务器发送所述目标资源文件对应的文件查询请求;
当接收到至少两个所述目标服务器返回的,确定该第三服务器已存储所述目标资源文件的第一查询结果时,将所述目标资源文件删除。
8.一种资源文件查询装置,其特征在于,包括:
第一确定单元,用于响应于当前服务器接收到的资源查询请求,确定与所述资源查询请求对应的资源文件,所述当前服务器为内容分发网络CDN系统中的任意一个服务器,所述CDN系统中包含多个节点分组,每个所述节点分组中包含多个节点集群IDC,每个所述IDC中包含多个服务器;
检测单元,用于检测所述当前服务器所在的IDC中是否存储有所述资源文件;
第二确定单元,用于若所述当前服务器所在的IDC中未存储有所述资源文件,则确定所述资源文件对应的唯一标识符,并生成与所述资源查询请求对应的资源回源请求;
第一发送单元,用于确定与所述唯一标识符对应的第一目标服务器,并向所述第一目标服务器发送所述资源回源请求,以触发所述第一目标服务器返回所述资源文件,所述第一目标服务器与所述当前服务器属于同一节点分组;
第三确定单元,用于若所述第一目标服务器未返回所述资源文件,则在所述CDN系统中除所述当前服务器所在节点分组以外的各个节点分组中,分别确定与所述唯一标识符对应的第二目标服务器,并通过所述第一目标服务器向每个所述第二目标服务器发送所述资源回源请求,以触发每个所述第二目标服务器返回所述资源文件;
第二发送单元,用于当接收到任意一个所述第二目标服务器经由所述第一目标服务器,返回所述资源文件时,将所述资源文件存储在所述当前服务器中,并通过所述当前服务器向其对应的客户端发送所述资源文件。
9.根据权利要求8所述的装置,其特征在于,所述第二确定单元,包括:
第一获取子单元,用于获取所述资源查询请求中包含的资源地址;
第一计算子单元,用于调用预先设置的第一算法对所述资源地址进行计算,获得所述资源文件对应的唯一标识符。
10.根据权利要求8所述的装置,其特征在于,所述第一发送单元,包括:
第二获取子单元,用于获取所述当前服务器所在的节点分组中各个服务器的第一服务器信息;
第二计算子单元,用于调用预先设置的第二算法,对所述唯一标识符与各个所述第一服务器信息进行计算,获得所述当前服务器所在的节点分组中与所述唯一标识符对应的第一服务器地址;
确定子单元,用于确定所述当前服务器所在的节点分组中,所述第一服务器地址对应的第一目标服务器。
CN201911314753.9A 2019-12-19 2019-12-19 资源文件查询方法及装置 Active CN111104376B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911314753.9A CN111104376B (zh) 2019-12-19 2019-12-19 资源文件查询方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911314753.9A CN111104376B (zh) 2019-12-19 2019-12-19 资源文件查询方法及装置

Publications (2)

Publication Number Publication Date
CN111104376A true CN111104376A (zh) 2020-05-05
CN111104376B CN111104376B (zh) 2023-04-07

Family

ID=70421991

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911314753.9A Active CN111104376B (zh) 2019-12-19 2019-12-19 资源文件查询方法及装置

Country Status (1)

Country Link
CN (1) CN111104376B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116405563A (zh) * 2023-06-08 2023-07-07 湖南快乐阳光互动娱乐传媒有限公司 一种基于点对点内容分发网络的资源获取方法及系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100088405A1 (en) * 2008-10-08 2010-04-08 Microsoft Corporation Determining Network Delay and CDN Deployment
CN103634410A (zh) * 2013-12-12 2014-03-12 北京奇虎科技有限公司 基于内容分发网络cdn的数据同步方法,客户端及服务器
CN104754073A (zh) * 2015-03-25 2015-07-01 百度在线网络技术(北京)有限公司 一种资源访问方法及装置
CN105049531A (zh) * 2015-08-24 2015-11-11 湖南快乐阳光互动娱乐传媒有限公司 一种消息推送系统及方法
CN105450780A (zh) * 2015-12-31 2016-03-30 深圳市网心科技有限公司 一种cdn系统及其回源方法
CN109151079A (zh) * 2018-10-31 2019-01-04 珠海迈科智能科技股份有限公司 跨区域服务器资源注入方法、访问方法及传输系统
CN109510875A (zh) * 2018-12-14 2019-03-22 北京奇艺世纪科技有限公司 资源分配方法、装置及电子设备
CN109963162A (zh) * 2017-12-25 2019-07-02 阿里巴巴集团控股有限公司 一种云导播系统及直播处理方法、装置
US20190208021A1 (en) * 2016-12-19 2019-07-04 Tencent Technology (Shenzhen) Company Limited Content delivery network (cdn) management system, method, and apparatus

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100088405A1 (en) * 2008-10-08 2010-04-08 Microsoft Corporation Determining Network Delay and CDN Deployment
CN103634410A (zh) * 2013-12-12 2014-03-12 北京奇虎科技有限公司 基于内容分发网络cdn的数据同步方法,客户端及服务器
CN104754073A (zh) * 2015-03-25 2015-07-01 百度在线网络技术(北京)有限公司 一种资源访问方法及装置
CN105049531A (zh) * 2015-08-24 2015-11-11 湖南快乐阳光互动娱乐传媒有限公司 一种消息推送系统及方法
CN105450780A (zh) * 2015-12-31 2016-03-30 深圳市网心科技有限公司 一种cdn系统及其回源方法
US20190208021A1 (en) * 2016-12-19 2019-07-04 Tencent Technology (Shenzhen) Company Limited Content delivery network (cdn) management system, method, and apparatus
CN109963162A (zh) * 2017-12-25 2019-07-02 阿里巴巴集团控股有限公司 一种云导播系统及直播处理方法、装置
CN109151079A (zh) * 2018-10-31 2019-01-04 珠海迈科智能科技股份有限公司 跨区域服务器资源注入方法、访问方法及传输系统
CN109510875A (zh) * 2018-12-14 2019-03-22 北京奇艺世纪科技有限公司 资源分配方法、装置及电子设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116405563A (zh) * 2023-06-08 2023-07-07 湖南快乐阳光互动娱乐传媒有限公司 一种基于点对点内容分发网络的资源获取方法及系统
CN116405563B (zh) * 2023-06-08 2023-08-18 湖南快乐阳光互动娱乐传媒有限公司 一种基于点对点内容分发网络的资源获取方法及系统

Also Published As

Publication number Publication date
CN111104376B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
CN109660607B (zh) 一种业务请求分发方法、接收方法、装置及服务器集群
AU2016382908B2 (en) Short link processing method, device and server
KR20210057149A (ko) 스마트 계약 기반 데이터 처리 방법, 기기 및 저장 매체
CN110737658A (zh) 数据分片存储方法、装置、终端及可读存储介质
US10313452B2 (en) Migrating a chat message service provided by a chat server to a new chat server
CN110519409B (zh) 域名动态配置方法、装置、设备及存储介质
CN108293181B (zh) 一种通信标识绑定的处理方法及终端
CN111327647B (zh) 一种容器对外提供服务的方法、装置及电子设备
CN109587258B (zh) 一种服务探活方法及装置
CN111885216B (zh) Dns查询方法、装置、设备和存储介质
WO2012103920A1 (en) Distributed database
CN108683668A (zh) 内容分发网络中的资源校验方法、装置、存储介质及设备
CN108111325B (zh) 一种资源分配方法及装置
CN111708743A (zh) 文件存储管理方法、文件管理客户端及文件存储管理系统
CN112732756B (zh) 数据查询方法、装置、设备及存储介质
CN110704376A (zh) 日志文件保存方法及装置
CN113660168B (zh) 一种多中心研究数据的处理方法、装置和服务器
CN111104376B (zh) 资源文件查询方法及装置
CN111767297A (zh) 大数据处理方法、装置、设备及介质
CN112039993B (zh) 一种长连接地址处理方法和装置
CN110798358B (zh) 分布式服务标识方法、装置、计算机可读介质及电子设备
CN115297085A (zh) 一种域名解析的更新方法、装置、电子设备及存储介质
CN111586438B (zh) 一种业务数据的处理方法、装置及系统
CN113746909A (zh) 网络连接方法、装置、电子设备和计算机可读存储介质
CN107704557B (zh) 操作互斥数据的处理方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant