CN107645386A - 一种获取数据资源的方法和装置 - Google Patents

一种获取数据资源的方法和装置 Download PDF

Info

Publication number
CN107645386A
CN107645386A CN201710876685.XA CN201710876685A CN107645386A CN 107645386 A CN107645386 A CN 107645386A CN 201710876685 A CN201710876685 A CN 201710876685A CN 107645386 A CN107645386 A CN 107645386A
Authority
CN
China
Prior art keywords
server
data resource
target data
resource
multicast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710876685.XA
Other languages
English (en)
Other versions
CN107645386B (zh
Inventor
郑建文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wangsu Science and Technology Co Ltd
Original Assignee
Wangsu Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wangsu Science and Technology Co Ltd filed Critical Wangsu Science and Technology Co Ltd
Priority to CN201710876685.XA priority Critical patent/CN107645386B/zh
Publication of CN107645386A publication Critical patent/CN107645386A/zh
Application granted granted Critical
Publication of CN107645386B publication Critical patent/CN107645386B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Abstract

本发明公开了一种获取数据资源的方法,属于数据传输技术领域。所述方法包括:第一服务器接收目标数据资源的获取请求;第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源;如果存在,第一服务器则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。采用本发明,可以减少获取数据资源的过程中所消耗的网络资源。

Description

一种获取数据资源的方法和装置
技术领域
本发明涉及数据传输技术领域,特别涉及一种获取数据资源的方法和装置。
背景技术
随着互联网技术的不断开发,CDN(内容分发网络,Content Delivery Network)服务也随之快速发展。CDN的网络架构中包括用于存储数据的大量网络节点,用户可以以较短的时间,通过这些网络节点中就近获取到其中存储的数据。
由于单台服务器性能有限,故而每个网络节点中通常包含多台服务器,每台服务器可以与用户设备以及资源服务器建立通信连接。当服务器接收到用户设备发送的对于某个数据资源的获取请求后,可以从该数据资源所在的资源服务器处获取相应的数据资源,并将数据资源反馈给用户设备。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
一个网络节点中各服务器缺少有效的交互,当一个网络节点的多台服务器同时向多个用户设备提供同一数据资源时,需要分别进行数据资源的拉流和转发处理,这样,会造成网络节点的中转内耗带宽增加,消耗的网络资源较多。
而且,目前,同个网络节点中多台服务器之间的通信,需要人为选定一台服务器来当主服务器,当有新数据资源时,都汇报给主服务器,当需要查询数据资源时,也都需要向主服务器查询。一旦主服务器发生故障或者下架,就无法进行资源查询,所以需要人工维护运营,费时费力。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种获取数据资源的方法和系统。所述技术方案如下:
第一方面,提供了一种获取数据资源的方法,所述方法包括:
第一服务器接收目标数据资源的获取请求;
第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源;
如果存在,第一服务器则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。
可选的,所述方法还包括:
如果所述同组服务器中不存在所述目标数据资源,第一服务器则从所述目标数据资源的源服务器处获取所述目标数据资源。
可选的,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
第一服务器周期性向预设的组播IP地址发送携带有所述目标数据资源的URL的资源新增通知,以使所述同组服务器通过所述组播IP地址获取到所述资源新增通知后,将所述目标数据资源的URL记录在各自的组播资源列表中。
可选的,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
如果将所述目标数据资源从本地删除,第一服务器则向预设的组播IP地址发送携带有所述目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送所述资源新增通知,以使所述同组服务器将所述目标数据资源的URL从各自的组播资源列表中删除。
可选的,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
第一服务器接收第三服务器发送的所述目标数据资源的获取请求;
第一服务器获取所述获取请求中携带的访问标识;
如果所述访问标识和本地存储的所述第三服务器对应的访问标识相同,第一服务器则向所述第三服务器发送所述目标数据资源。
第二方面,提供了一种获取数据资源的装置,所述装置包括:
接收模块,用于接收目标数据资源的获取请求;
判断模块,用于根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源;
获取模块,用于如果存在,则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。
可选的,所述获取模块还用于:
如果所述同组服务器中不存在所述目标数据资源,则从所述目标数据资源的源服务器处获取所述目标数据资源。
可选的,所述装置还包括:
发送模块,用于周期性向预设的组播IP地址发送携带有所述目标数据资源的URL的资源新增通知,以使所述同组服务器通过所述组播IP地址获取到所述资源新增通知后,将所述目标数据资源的URL记录在各自的组播资源列表中。
可选的,所述发送模块还用于:
如果将所述目标数据资源从本地删除,则向预设的组播IP地址发送携带有所述目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送所述资源新增通知,以使所述同组服务器将所述目标数据资源的URL从各自的组播资源列表中删除。
可选的,所述接收模块,还用于接收第三服务器发送的所述目标数据资源的获取请求;
所述获取模块,还用于获取所述获取请求中携带的访问标识;
所述发送模块,还用于如果所述访问标识和本地存储的所述第三服务器对应的访问标识相同,则向所述第三服务器发送所述目标数据资源。
第三方面,提供了一种服务器,所述服务器包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如第一方面所述的获取数据资源的方法。
第四方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如第一方面所述的获取数据资源的方法。
本发明实施例提供的技术方案带来的有益效果是:
本发明实施例中,第一服务器接收目标数据资源的获取请求,第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源,如果存在,第一服务器则在同组服务器中确定目标数据资源对应的第二服务器,并从第二服务器处获取目标数据资源。这样,当某台服务器需要向用户设备提供某数据资源时,如果其所在的组播组内存在该数据资源,则可以直接从组播组中获取该数据资源,无需从数据资源的源服务器处进行拉流,从而可以减少获取数据资源的过程中所消耗的网络资源,减少CDN运营成本;且同组内网络效果比跨组效果好,不会随着节点、服务器的增加而增大维护工作量。本发明实施例能够使组播组内的资源互知,无需外部组件,无需设置主服务器,也无需人工配置干预。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种CDN系统的框架示意图;
图2是本发明实施例提供的一种获取数据资源的方法流程图;
图3是本发明实施例提供的一种获取数据资源的处理流程图;
图4是本发明实施例提供的一种获取数据资源的装置结构示意图;
图5是本发明实施例提供的一种获取数据资源的装置结构示意图;
图6是本发明实施例提供的一种服务器的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
本发明实施例提供了一种获取数据资源的方法,该方法可以由网络设备实现,网络设备可以是CDN系统中网络节点内的服务器,每个网络节点中包括至少一个服务器,同节点内的多个服务器可以通过多层交换机来建立通信链接。网络节点可以分为中间节点和边沿节点,中间节点与资源服务器相连,用于将资源服务器中的数据资源传输至边沿节点或者其他中间节点处,边沿节点与用户设备相连,用于将接收到的数据资源发送个用户设备,具体框架可如图1所示。中间节点和边沿节点同时支持数据存储功能,其中可以存储有一定数量的数据资源,当存在对这些数据资源的需求时,可以直接发送已存储的数据资源。服务器可以包括处理器、存储器、收发器,处理器可以用于进行下述流程中的获取数据资源的处理,存储器可以用于存储下述处理过程中需要的数据以及产生的数据,收发器可以用于接收和发送下述处理过程中的相关数据。本实施例中以服务器为边沿节点中的服务器为例进行说明,中间节点中的服务器与之类似,必要处将会进行补充说明。
下面将结合具体实施方式,对图2所示的处理流程进行详细的说明,内容可以如下:
步骤201,第一服务器接收目标数据资源的获取请求。
在实施中,当用户想要获取某个数据资源(即目标数据资源)时,可以通过用户设备向CDN系统中发送目标数据资源的获取请求。这时,服务于该用户所在的区域,且与用户设备建立通信连接的服务器(可称为第一服务器)可以接收到目标数据资源的获取请求,该获取请求中可以携带有目标数据资源的标识信息和/或目标数据资源的URL(统一资源定位符,Uniform Resource Locator)。
步骤202,第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源。
在实施中,服务方的技术人员可以预先将属于同一机房内的服务器添加至同一组播组中,一个机房中可以包含一个或多个网络节点的服务器,具体的,可以通过开通网络节点内的核心交换机的IGMP snooping(互联网组管理协议窥探,Internet GroupManagement Protocol Snooping)功能来实现加入组播组的处理,需要说明的是,所有交换机都具备上述功能,且交换机都由CDN厂家完全可控,故而可以保证上述处理的可行性。进一步的,服务器在加入某个组播组之后,可以在本地存储一个组播资源列表,该组播资源列表中可以记录有组播组内其它服务器中存在的数据资源。
这样,在第一服务器接收到目标数据资源的获取请求后,可以访问本地存储的组播资源列表,并在该组播资源列表中查找是否存在目标数据资源的对应项,具体可以通过目标数据资源的标识信息和URL进行查找。进而,第一服务器可以判断出当前组播组内的同组服务器中是否存在目标数据资源。
步骤203,如果存在,第一服务器则在同组服务器中确定目标数据资源对应的第二服务器,并从第二服务器处获取目标数据资源。
在实施中,如果第一服务器所在组播组内的同组服务器中存在目标数据资源,第一服务器则可以确定目标数据资源对应的服务器,即确定出目标数据资源所在的第二服务器,进而可以向第二服务器发送目标数据资源的获取请求。这样,第二服务器接收到该获取请求后,可以将目标数据资源通过组内的交换机发送给第一服务器。进一步的,第一服务器可以将从第二服务器处获取的目标数据资源发送给用户设备。
可选的,如果同组服务器中不存在目标数据资源,则可以从源服务器处进行获取,相应的处理可以如下:如果同组服务器中不存在目标数据资源,第一服务器则从目标数据资源的源服务器处获取目标数据资源。
在实施中,第一服务器接收到目标数据资源的获取请求之后,如果发现同组服务器中不存在目标数据资源,则可以确定目标数据资源的源服务器,然后从该源服务器处获取目标数据资源。具体的,第一服务器可以由目标数据资源的URL确定相应的源服务器的IP(网络协议,Internet Protocol)地址以及端口号,之后可以确定数据传输路径,将目标数据资源的获取请求通过该路径上的多个服务器,传输至源服务器。同样,再通过上述多个服务器,从上述数据传输路径上接收源服务器发送的目标数据资源。
可选的,基于上述第一服务器从源服务器获取目标数据资源的处理,第一服务器还可以通知同组服务器新增了数据资源,相应的处理可以如下:第一服务器周期性向预设的组播IP地址发送携带有目标数据资源的URL的资源新增通知,以使同组服务器通过组播IP地址获取到资源新增通知后,将目标数据资源的URL记录在各自的组播资源列表中。
在实施中,当多个服务器加入同一组播组后,多个服务器可以同时监控组播IP地址,当有数据资源或者消息通知到达该组播IP地址时,该组播组内的所有服务器均可以获取到相应的数据资源或者消息。这样,第一服务器在从源服务器获取到目标数据资源后,可以周期性向预设的组播IP地址发送携带有目标数据资源的URL的资源新增通知,该资源新增通知的格式可以如下所示:
0xAA55 0x01 URL_LEN URL
其中,第一项“0xAA55”为组播消息的标识,第二项“0x01”代表本条组播消息为“资源新增通知”,第三项“URL_LEN”记录了目标数据资源的URL长度,第四项“URL”具体记录了目标数据资源的URL,如http://test.com/live/abc。
这样,当上述资源新增通知到达预设的组播IP地址后,第一服务器的同组服务器将可以通过组播IP地址获取到相应的资源新增通知,进而上述同组服务器中的每台服务器都可以根据该资源新增通知的套接字,确定其所属的第一服务器的IP地址,然后可以将第一服务器的IP地址和目标数据资源的URL对应记录在各自的组播资源列表中。
可选的,在数据资源被删除后,服务器可以通知同组服务器该数据资源已不存在,相应的处理可以下:如果将目标数据资源从本地删除,第一服务器则向预设的组播IP地址发送携带有目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送资源新增通知,以使同组服务器将目标数据资源的URL从各自的组播资源列表中删除。
在实施中,如果第一服务器将目标数据资源从本地删除,第一服务器则可以向预设的组播IP地址发送携带有目标数据资源的URL的资源删除通知,该资源删除通知的格式可以如下所示:
0xAA56 0x02 URL_LEN URL
其中,与上述资源新增通知基本相同,第一项“0xAA56”组播消息的标识不同,以及第二项更改为“0x02”,代表本条组播消息为“资源删除通知”。
这样,当上述资源删除通知到达预设的组播IP地址后,第一服务器的同组服务器将可以通过组播IP地址获取到相应的资源删除通知,进而上述同组服务器中的每台服务器都可以根据该资源删除通知的套接字,确定其所属的第一服务器的IP地址,然后在各自的组播资源列表中删除第一服务器的IP地址和目标数据资源的URL对应项。
当然,基于上述第一服务器周期性发送资源新增通知的处理,当第一服务器删除了目标数据资源后,可以停止向预设的组播IP地址发送资源新增通知,这样,同组服务器如果在预设的多个周期时长内始终未接收到第一服务器发送的,对应目标数据资源的资源新增通知,则可以判定第一服务器已将目标数据资源删除,故而可以在各自的组播资源列表中删除第一服务器的IP地址和目标数据资源的URL对应项。
可选的,第一服务器的同组服务器可以从第一服务器处获取目标数据资源,相应的处理如下:第一服务器接收第三服务器发送的目标数据资源的获取请求;第一服务器获取上述获取请求中携带的访问标识;如果访问标识和本地存储的第三服务器对应的访问标识相同,第一服务器则向第三服务器发送目标数据资源。
在实施中,当第一服务器获取到目标数据资源,并向预设的组播IP地址发送资源新增通知后,如果其同组服务器中的第三服务器接收到目标数据资源的获取请求,则可以由第三服务器中存储的组播资源列表中获知第一服务器处存在目标数据资源。进而,第三服务器可以向第一服务器发送目标数据资源的获取请求,该获取请求中可以携带有预设的第三服务器的访问标识。之后,第一服务器在接收到该获取请求后,可以获取其中携带的访问标识,然后判断该访问标识与本地存储的、第三服务器对应的访问标识是否相同。如果相同,则鉴权成功,第一服务器则可以向第三服务器发送目标数据资源,而如果不相同,则拒绝发送目标数据资源,并向第三服务器发送访问标识错误的提示消息。可以理解,通过在获取请求中添加访问标识的处理,可以保证数据资源的安全性。
进一步的,容易想到,对于不同的数据资源获取类型,可以设置不同的访问标识,数据资源获取类型可以分为免费获取、计费获取等,而计费获取又可以分为按流量计费、按时长计费等。这样,在接收到获取请求后,可以根据其中携带的访问标识,确定本次的数据资源获取类型,进而可以根据具体的计费标准,选择性地记录相关计费数据。例如,数据资源获取类型为按流量计费,则可以记录本次所产生的数据量大小,并根据该数据量大小进行费用计算。
为了便于理解,图3简单示出了第一服务器从源服务器获取目标数据资源,然后第三服务器再从第一服务器处获取目标数据资源的处理流程。
本发明实施例中,第一服务器接收目标数据资源的获取请求,第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源,如果存在,第一服务器则在同组服务器中确定目标数据资源对应的第二服务器,并从第二服务器处获取目标数据资源。这样,当某台服务器需要向用户设备提供某数据资源时,如果其所在的组播组内存在该数据资源,则可以直接从组播组中获取该数据资源,无需从数据资源的源服务器处进行拉流,从而可以减少获取数据资源的过程中所消耗的网络资源。
基于相同的技术构思,本发明实施例还提供了一种获取数据资源的装置,如图4所示,所述装置包括:
接收模块401,用于接收目标数据资源的获取请求;
判断模块402,用于根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源;
获取模块403,用于如果存在目标数据资源,则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。
可选的,所述获取模块403还用于:
如果所述同组服务器中不存在所述目标数据资源,则从所述目标数据资源的源服务器处获取所述目标数据资源。
可选的,如图5所示,所述装置还包括:
发送模块404,用于周期性向预设的组播IP地址发送携带有所述目标数据资源的URL的资源新增通知,以使所述同组服务器通过所述组播IP地址获取到所述资源新增通知后,将所述目标数据资源的URL记录在各自的组播资源列表中。
可选的,所述发送模块404还用于:
如果将所述目标数据资源从本地删除,第一服务器则向预设的组播IP地址发送携带有所述目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送所述资源新增通知,以使所述同组服务器将所述目标数据资源的URL从各自的组播资源列表中删除。
可选的,所述接收模块401,还用于接收第三服务器发送的所述目标数据资源的获取请求;
所述获取模块403,还用于获取所述获取请求中携带的访问标识;
所述发送模块404,还用于如果所述访问标识和本地存储的所述第三服务器对应的访问标识相同,则向所述第三服务器发送所述目标数据资源。
本发明实施例中,第一服务器接收目标数据资源的获取请求,第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源,如果存在,第一服务器则在同组服务器中确定目标数据资源对应的第二服务器,并从第二服务器处获取目标数据资源。这样,当某台服务器需要向用户设备提供某数据资源时,如果其所在的组播组内存在该数据资源,则可以直接从组播组中获取该数据资源,无需从数据资源的源服务器处进行拉流,从而可以减少获取数据资源的过程中所消耗的网络资源。
需要说明的是:上述实施例提供的获取数据资源的装置在获取数据资源时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的获取数据资源的装置与获取数据资源的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图6是本发明实施例提供的服务器的结构示意图。该服务器600可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器622(例如,一个或一个以上处理器)和存储器632,一个或一个以上存储应用程序642或数据644的存储介质630(例如一个或一个以上海量存储设备)。其中,存储器632和存储介质630可以是短暂存储或持久存储。存储在存储介质630的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器622可以设置为与存储介质630通信,在服务器600上执行存储介质630中的一系列指令操作。
服务器600还可以包括一个或一个以上电源626,一个或一个以上有线或无线网络接口650,一个或一个以上输入输出接口658,一个或一个以上键盘656,和/或,一个或一个以上操作系统641,例如Windows Server TM,Mac OS XTM,Unix TM,Linux TM,FreeBSD TM等等。
服务器600可以包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行上述获取数据资源的指令。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (12)

1.一种获取数据资源的方法,其特征在于,所述方法包括:
第一服务器接收目标数据资源的获取请求;
所述第一服务器根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在所述目标数据资源;
如果存在,所述第一服务器则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
如果所述同组服务器中不存在所述目标数据资源,所述第一服务器则从所述目标数据资源的源服务器处获取所述目标数据资源。
3.根据权利要求2所述的方法,其特征在于,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
所述第一服务器周期性向预设的组播网络协议IP地址发送携带有所述目标数据资源的URL的资源新增通知,以使所述同组服务器通过所述组播IP地址获取到所述资源新增通知后,将所述目标数据资源的统一资源定位符URL记录在各自的组播资源列表中。
4.根据权利要求3所述的方法,其特征在于,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
如果将所述目标数据资源从本地删除,所述第一服务器则向预设的组播IP地址发送携带有所述目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送所述资源新增通知,以使所述同组服务器将所述目标数据资源的URL从各自的组播资源列表中删除。
5.根据权利要求3所述的方法,其特征在于,所述从所述目标数据资源的源服务器处获取所述目标数据资源之后,还包括:
所述第一服务器接收第三服务器发送的所述目标数据资源的获取请求;
所述第一服务器获取所述获取请求中携带的访问标识;
如果所述访问标识和本地存储的所述第三服务器对应的访问标识相同,所述第一服务器则向所述第三服务器发送所述目标数据资源。
6.一种获取数据资源的装置,其特征在于,所述装置包括:
接收模块,用于接收目标数据资源的获取请求;
判断模块,用于根据本地存储的组播资源列表,判断当前组播组内的同组服务器中是否存在目标数据资源;
获取模块,用于如果存在,则在所述同组服务器中确定所述目标数据资源对应的第二服务器,并从所述第二服务器处获取所述目标数据资源。
7.根据权利要求6所述的装置,其特征在于,所述获取模块还用于:
如果所述同组服务器中不存在所述目标数据资源,则从所述目标数据资源的源服务器处获取所述目标数据资源。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
发送模块,用于周期性向预设的组播IP地址发送携带有所述目标数据资源的URL的资源新增通知,以使所述同组服务器通过所述组播IP地址获取到所述资源新增通知后,将所述目标数据资源的URL记录在各自的组播资源列表中。
9.根据权利要求8所述的装置,其特征在于,所述发送模块还用于:
如果将所述目标数据资源从本地删除,则向预设的组播IP地址发送携带有所述目标数据资源的URL的资源删除通知,或者停止向预设的组播IP地址发送所述资源新增通知,以使所述同组服务器将所述目标数据资源的URL从各自的组播资源列表中删除。
10.根据权利要求8所述的装置,其特征在于,所述接收模块,还用于接收第三服务器发送的所述目标数据资源的获取请求;
所述获取模块,还用于获取所述获取请求中携带的访问标识;
所述发送模块,还用于如果所述访问标识和本地存储的所述第三服务器对应的访问标识相同,则向所述第三服务器发送所述目标数据资源。
11.一种服务器,其特征在于,所述服务器包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至5任一所述的获取数据资源的方法。
12.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1至5任一所述的获取数据资源的方法。
CN201710876685.XA 2017-09-25 2017-09-25 一种获取数据资源的方法和装置 Active CN107645386B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710876685.XA CN107645386B (zh) 2017-09-25 2017-09-25 一种获取数据资源的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710876685.XA CN107645386B (zh) 2017-09-25 2017-09-25 一种获取数据资源的方法和装置

Publications (2)

Publication Number Publication Date
CN107645386A true CN107645386A (zh) 2018-01-30
CN107645386B CN107645386B (zh) 2021-06-22

Family

ID=61113695

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710876685.XA Active CN107645386B (zh) 2017-09-25 2017-09-25 一种获取数据资源的方法和装置

Country Status (1)

Country Link
CN (1) CN107645386B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109194542A (zh) * 2018-08-22 2019-01-11 网宿科技股份有限公司 Cdn系统中直播流内耗统计的方法和装置
CN109327550A (zh) * 2018-11-30 2019-02-12 网宿科技股份有限公司 一种访问请求的分配方法、装置、存储介质和计算机设备
CN110290217A (zh) * 2019-07-01 2019-09-27 腾讯科技(深圳)有限公司 数据请求的处理方法及装置、存储介质及电子装置
CN110830531A (zh) * 2018-08-09 2020-02-21 阿里巴巴集团控股有限公司 资源请求的处理方法和装置及存储系统,电子和存储设备
CN111371824A (zh) * 2018-12-26 2020-07-03 北京奇虎科技有限公司 一种资源同步方法和装置
CN114615237A (zh) * 2022-03-22 2022-06-10 阿里巴巴(中国)有限公司 流媒体通信方法、系统、设备及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102143212A (zh) * 2010-12-31 2011-08-03 华为技术有限公司 一种内容分发网络中缓存共享的方法及装置
US20130117427A1 (en) * 2011-11-08 2013-05-09 Hitachi, Ltd. Computer system, and method for managing resource pool information
CN103227839A (zh) * 2013-05-10 2013-07-31 网宿科技股份有限公司 内容分发网络服务器区域自治的管理系统
CN104767629A (zh) * 2014-01-06 2015-07-08 腾讯科技(深圳)有限公司 分配服务节点的方法、装置及系统
CN104796445A (zh) * 2014-01-21 2015-07-22 航天信息股份有限公司 服务器节点进行资源同步的方法、装置
CN104980478A (zh) * 2014-05-28 2015-10-14 深圳市腾讯计算机系统有限公司 内容分发网络中缓存共享方法、设备及系统
CN106656998A (zh) * 2016-11-09 2017-05-10 腾讯科技(深圳)有限公司 服务器通信方法及装置
CN106817381A (zh) * 2015-11-27 2017-06-09 阿里巴巴集团控股有限公司 数据处理方法及装置
CN109039702A (zh) * 2018-06-26 2018-12-18 成都鼎桥通信技术有限公司 专网集群系统中组播组网的实现方法和装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102143212A (zh) * 2010-12-31 2011-08-03 华为技术有限公司 一种内容分发网络中缓存共享的方法及装置
US20130117427A1 (en) * 2011-11-08 2013-05-09 Hitachi, Ltd. Computer system, and method for managing resource pool information
CN103227839A (zh) * 2013-05-10 2013-07-31 网宿科技股份有限公司 内容分发网络服务器区域自治的管理系统
CN104767629A (zh) * 2014-01-06 2015-07-08 腾讯科技(深圳)有限公司 分配服务节点的方法、装置及系统
CN104796445A (zh) * 2014-01-21 2015-07-22 航天信息股份有限公司 服务器节点进行资源同步的方法、装置
CN104980478A (zh) * 2014-05-28 2015-10-14 深圳市腾讯计算机系统有限公司 内容分发网络中缓存共享方法、设备及系统
CN106817381A (zh) * 2015-11-27 2017-06-09 阿里巴巴集团控股有限公司 数据处理方法及装置
CN106656998A (zh) * 2016-11-09 2017-05-10 腾讯科技(深圳)有限公司 服务器通信方法及装置
CN109039702A (zh) * 2018-06-26 2018-12-18 成都鼎桥通信技术有限公司 专网集群系统中组播组网的实现方法和装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110830531A (zh) * 2018-08-09 2020-02-21 阿里巴巴集团控股有限公司 资源请求的处理方法和装置及存储系统,电子和存储设备
CN109194542A (zh) * 2018-08-22 2019-01-11 网宿科技股份有限公司 Cdn系统中直播流内耗统计的方法和装置
CN109327550A (zh) * 2018-11-30 2019-02-12 网宿科技股份有限公司 一种访问请求的分配方法、装置、存储介质和计算机设备
CN111371824A (zh) * 2018-12-26 2020-07-03 北京奇虎科技有限公司 一种资源同步方法和装置
CN110290217A (zh) * 2019-07-01 2019-09-27 腾讯科技(深圳)有限公司 数据请求的处理方法及装置、存储介质及电子装置
CN110290217B (zh) * 2019-07-01 2022-04-26 腾讯科技(深圳)有限公司 数据请求的处理方法及装置、存储介质及电子装置
CN114615237A (zh) * 2022-03-22 2022-06-10 阿里巴巴(中国)有限公司 流媒体通信方法、系统、设备及存储介质
CN114615237B (zh) * 2022-03-22 2024-03-29 阿里巴巴(中国)有限公司 流媒体通信方法、系统、设备及存储介质

Also Published As

Publication number Publication date
CN107645386B (zh) 2021-06-22

Similar Documents

Publication Publication Date Title
CN107645386A (zh) 一种获取数据资源的方法和装置
CN103236949B (zh) 一种服务器集群的监控方法、装置与系统
US6546420B1 (en) Aggregating information about network message flows
CN107528870B (zh) 一种数据采集方法及其设备
CN110326345B (zh) 一种配置网络切片的方法、装置和系统
CN103975556A (zh) 远程多播复制网络的改进复制管理
CN103974140B (zh) 一种基于tr069协议的大规模交互电视终端管理方法及系统
CN104040964B (zh) 跨服务区通信的方法、装置和数据中心网络
CN104092746B (zh) 一种运维审计系统及用在其系统中的网络负载均衡方法
US20130191493A1 (en) System for accessing a set of communication and transaction data associated with a user of interest sourced from multiple different network carriers and for enabling multiple analysts to independently and confidentially access the set of communication and transaction data
CN108881354A (zh) 一种推送信息存储方法、装置、服务器和计算机存储介质
CN109783426A (zh) 采集数据的方法、装置、计算机设备及存储介质
CN104184663A (zh) 基于软件定义网络和一体化标识网络的通信方法和装置
CN108668178A (zh) 一种组播实现方法及相关网络设备
CN106713506A (zh) 一种数据获取方法及系统
EP3229413A1 (en) Cross-domain cooperative method, cooperative device and control device for network as a service business
CN101854305B (zh) 流量采集系统及其方法、装置
CN103581274A (zh) 一种堆叠系统中报文转发方法和装置
CN103812672A (zh) 一种新增网元设备的发现方法、相关设备及系统
CN107645339A (zh) 一种光纤直放站自动实现拓扑结构的方法及装置
CN102970391B (zh) 域名查询处理方法、服务器及系统
CN107276857A (zh) 一种监测流量的方法及装置
CN107995124A (zh) 流量调度方法及装置
CN106210751B (zh) 网络视频直播数据分层传输的方法及系统
CN102572006B (zh) 一种基于nat地址转换的数据传输方法和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant