CN110830565A - 资源下载方法、装置、系统、电子设备及存储介质 - Google Patents

资源下载方法、装置、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN110830565A
CN110830565A CN201911052665.6A CN201911052665A CN110830565A CN 110830565 A CN110830565 A CN 110830565A CN 201911052665 A CN201911052665 A CN 201911052665A CN 110830565 A CN110830565 A CN 110830565A
Authority
CN
China
Prior art keywords
node
downloading
client
preset
speed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911052665.6A
Other languages
English (en)
Other versions
CN110830565B (zh
Inventor
肖剑
庹虎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201911052665.6A priority Critical patent/CN110830565B/zh
Publication of CN110830565A publication Critical patent/CN110830565A/zh
Application granted granted Critical
Publication of CN110830565B publication Critical patent/CN110830565B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1025Dynamic adaptation of the criteria on which the server selection is based
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1074Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1074Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078Resource delivery mechanisms
    • H04L67/1085Resource delivery mechanisms involving dynamic management of active down- or uploading connections
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供了一种资源下载方法、装置、系统、电子设备及存储介质,客户端向服务器发送目标资源的标识信息以及客户端的网络地址,服务器根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,并选择存储目标资源的多种类型的节点,作为候选节点,然后,将下载参数信息、网络类型及候选节点的节点信息返回至客户端,客户端根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,从下载节点下载目标资源。这样,根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。

Description

资源下载方法、装置、系统、电子设备及存储介质
技术领域
本发明涉及网络通信技术领域,特别是涉及一种资源下载方法、装置、系统、电子设备及存储介质。
背景技术
一些场景中,数据资源存储在网络中各种不同类型的节点中,当客户端需要下载这些数据资源时,首先,需要向服务器发送资源下载请求,由服务器为其分配相应的下载节点,然后,客户端可以访问这些下载节点,并从中下载所请求的数据资源。
其中,节点的类型可以包括中心节点、大存储超级节点、大存储边缘节点以及小存储边缘节点等。通常,中心节点中存储的数据资源较多,且带宽较大,因此,服务器往往会将中心节点分配给客户端作为下载节点。
然而,发明人在实现本发明的过程中发现,现有技术至少存在如下问题:
在对下载速度要求较低的场景下,如果客户端从中心节点下载数据资源,中心节点往往会提供较大的下载速度,也就是说,需要消耗较大的带宽和成本。而在对下载速度要求较高的场景下,如果客户端的数量较多,那么,大量的客户端从中心节点下载数据资源,会造成中心节点的超负荷。因此,现有技术中存在分配的节点与客户端的资源下载需求并不匹配的问题。
发明内容
本发明实施例的目的在于提供一种资源下载方法、装置、系统、电子设备及存储介质,以实现根据客户端的资源下载需求合理分配节点。具体技术方案如下:
本发明实施例提供了一种资源下载方法,所述方法包括:
客户端向服务器发送目标资源的标识信息以及所述客户端的网络地址;
所述服务器根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型,并选择存储所述目标资源的多种类型的节点,作为候选节点;将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端;
所述客户端根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点,从所述下载节点下载所述目标资源。
本发明实施例还提供了一种资源下载方法,应用于客户端,所述方法包括:
向服务器发送目标资源的标识信息以及所述客户端的网络地址;
接收所述服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,所述下载参数信息及所述网络类型为所述服务器根据所述标识信息及所述网络地址获取的,所述候选节点为所述服务器根据所述下载参数信息及所述网络类型从存储所述目标资源的多种类型的节点中选择的;
根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点;
从所述下载节点中下载所述目标资源。
本发明实施例还提供了一种资源下载方法,应用于服务器,所述方法包括:
接收客户端发送的目标资源的标识信息以及所述客户端的网络地址;
根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型;
根据所述下载参数信息及所述网络类型,选择存储所述目标资源的多种类型的节点,作为候选节点;
将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端。
本发明实施例还提供了一种资源下载装置,应用于客户端,所述装置包括:
发送模块,用于向服务器发送目标资源的标识信息以及所述客户端的网络地址;
接收模块,用于接收所述服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,所述下载参数信息及所述网络类型为所述服务器根据所述标识信息及所述网络地址获取的,所述候选节点为所述服务器根据所述下载参数信息及所述网络类型从存储所述目标资源的多种类型的节点中选择的;
选择模块,用于根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点;
下载模块,用于从所述下载节点中下载所述目标资源。
本发明实施例还提供了一种资源下载装置,应用于服务器,所述装置包括:
接收模块,用于接收客户端发送的目标资源的标识信息以及所述客户端的网络地址;
获取模块,用于根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型;
选择模块,用于根据所述下载参数信息及所述网络类型,选择存储所述目标资源的多种类型的节点,作为候选节点;
反馈模块,用于将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端。
本发明实施例还提供了一种资源下载系统,所述系统包括客户端和服务器,其中:
所述客户端,用于向所述服务器发送目标资源的标识信息以及所述客户端的网络地址;
所述服务器,用于根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型,并选择存储所述目标资源的多种类型的节点,作为候选节点;将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端;
所述客户端,还用于根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点,从所述下载节点下载所述目标资源。
本发明实施例还提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一所述的资源下载方法。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的资源下载方法。
在本发明实施的又一方面,本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的资源下载方法。
本发明实施例提供的资源下载方法、装置、系统、电子设备及存储介质中,客户端向服务器发送目标资源的标识信息以及客户端的网络地址。然后,服务器根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,并选择存储目标资源的多种类型的节点,作为候选节点,然后,将下载参数信息、网络类型及候选节点的节点信息返回至客户端。进而,客户端根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,从下载节点下载目标资源。也就是说,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的资源下载系统的结构示意图;
图2为本发明实施例提供的资源下载方法的时序图;
图3为一种实现方式中,服务器选择存储目标资源的候选节点的流程示意图;
图4为一种实现方式中,客户端从候选节点中选择下载节点的流程示意图;
图5为本发明实施例提供的资源下载方法的一种方案示意图;
图6为本发明实施例提供的应用于客户端的资源下载方法的一种流程示意图;
图7为本发明实施例提供的应用于服务器的资源下载方法的一种流程示意图;
图8为本发明实施例提供的应用于客户端的资源下载装置的一种结构示意图;
图9为本发明实施例提供的应用于服务器的资源下载装置的一种结构示意图;
图10为本发明实施例还提供的一种电子设备的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行描述。
相关技术中,服务器往往会将中心节点分配给客户端作为下载节点,然后,客户端访问中心节点,并从中下载所请求的数据资源。但是,在对下载速度要求较低的场景下,如果客户端从中心节点下载数据资源,中心节点往往会提供较大的下载速度,也就是说,需要消耗较大的带宽和成本。而在对下载速度要求较高的场景下,如果客户端的数量较多,那么,大量的客户端从中心节点下载数据资源,会造成中心节点的超负荷。
为了解决上述技术问题,本发明实施例提供了一种资源下载方法、装置、系统、电子设备及存储介质。
下面从总体上对本发明实施例提供的资源下载方法进行说明。
如图1所示,为本发明实施例提供的资源下载系统的结构示意图,该资源下载系统包括客户端100和服务器200,其中,客户端100可以有一个或多个。在服务器200中,存储着每个资源的标识信息与存储该资源的节点的节点信息之间的对应关系。当客户端100需要下载目标资源时,需要向服务器200请求存储目标资源的节点的节点信息。服务器选择存储目标资源的候选节点,并为客户端100返回候选节点的节点信息。进而,客户端100根据接收到的节点信息,从候选节点中选择下载节点,并从下载节点下载目标资源。
如图2所示,为本发明实施例提供的资源下载方法的时序图,该方法包括:
S201:客户端向服务器发送目标资源的标识信息以及客户端的网络地址;
S202:服务器根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,并选择存储目标资源的多种类型的节点,作为候选节点;
S203:服务器将下载参数信息、网络类型及候选节点的节点信息返回至客户端;
S204:客户端根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,从下载节点下载目标资源。
由以上可见,应用本发明实施例提供的资源下载方法,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
下面将通过具体的实施例,对本发明实施例提供的资源下载方法进行详细描述。
针对步骤S201的客户端向服务器发送目标资源的标识信息以及客户端的网络地址,本发明实施例提供了以下可行的实施方案。
在资源下载系统中,包括多个不同的资源,其中,每个资源都有与其唯一对应的标识信息,也就是说,根据目标资源的标识信息,可以唯一确定该目标资源。标识信息可以为目标资源的名称、编号或特定标识符等,具体不做限定。
客户端下载目标资源时,需要确定该目标资源的标识信息,并将目标资源的标识信息发送给服务器,以使服务器可以根据接收到的标识信息确定客户端所请求的目标资源。
在本步骤中,客户端还需要将自身的网络地址发送给服务器。其中,客户端的网络地址可用是指客户端的IP(Internet Protocol,互联网协议)地址。这样,服务器可以在网络中对需要下载资源的客户端进行定位。
一种实现方式中,客户端还可以将自身的本地上下行最大速度及硬件信息等信息发送至服务器。服务器根据客户端的本地上下行最大速度及硬件信息,可以进一步根据客户端的具体情况为其分配合适的节点下载目标资源。
其中,本地上下行最大速度是指客户端可以下载及上传资源的最大速度,可以理解,每个客户端都有对应的本地上下行最大速度,可以由客户端所处网络确定,也可以根据用户对客户端的设置确定。比如,移动端设备的上下行最大速度通常小于PC端的上下行最大速度。另外,客户端当前所处的网络环境也会对其本地上下行最大速度产生影响,比如,当客户端当前所处的网络环境的带宽较低时,其本地上下行最大速度也会比较低。这样,服务器在为客户端分配节点时,若客户端的本地上下行最大速度较大,则可以分配下载速度较高的节点,若本地上下行最大速度较小,则可以分配下载速度较低的节点。
客户端的硬件信息可以表示客户端所处设备的类型,比如,客户端可以为移动终端上安装的软件,也可以为PC(Persional Computer,个人电脑)端上安装的软件,等等。PC端相比于移动终端更为稳定,PC端上安装的软件具有更高的下载速度。这样,服务器在为客户端分配节点时,若客户端为移动终端上安装的软件,则可以分配下载速度较低的节点,若客户端为PC端上安装的软件,则可以分配下载速度较高的节点。
针对步骤S202中的服务器根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,并选择存储目标资源的多种类型的节点,作为候选节点,本发明实施例提供了以下可行的实施方案。
一种实现方式中,服务器可以根据目标资源的标识信息,查询目标资源的下载次数及最低下载速度,然后,根据下载次数,计算目标资源的热度,将热度和最低下载速度作为目标资源的下载参数信息。
其中,下载次数是指目标资源被请求的次数,目标资源的热度用于表示该目标资源的热门程度,热度越高,表明目标资源越热门,反之,热度越低,表示目标资源越冷门。目标资源的下载次数和热度是正相关的,也就是说,下载次数越多,热度越高,下载次数越少,热度越低。
举例而言,可以将目标资源的下载次数与预设系数的乘积,作为目标资源的热度,或者,也可以预先设定目标资源的下载次数的不同取值范围对应的不同的热度,进而根据目标资源的下载次数的取值确定目标资源的热度,具体的计算方式不做限定。
一种实现方式中,服务器还可以根据目标资源的标识信息,查询目标资源的请求人数,进而根据该目标资源的下载次数、请求人数确定共同目标资源的热度,具体不做限定。其中,目标资源的请求人数是指请求目标资源的不同客户端的数量。
不同的目标资源对应不同的最低下载速度。举例而言,不同类型的目标资源类型可以对应不同的最低下载速度,比如,对于视频资源而言,需要较高的最低下载速度,这样,客户端才可以流畅播放该视频,而对于网页资源而言,需要的最低下载速度较低,只需客户端可以及时加载、展示网页即可。或者,对于视频资源而言,也可以将目标资源的不同的清晰度对应不同的最低下载速度,清晰度越高的目标资源,最低下载速度最高。也就是说,当目标资源的下载速度高于最低下载速度时,客户端下载得到的视频资源可以实时播放,减少视频卡顿等现象。
另外,服务器还可以根据客户端的网络地址,识别客户端所处的网络类型。其中,网络地址可以为客户端的IP地址,客户端所处的网络类型,可以包括大型公共网络、私人网络或专用网络等。
在服务器中,存储着各个资源的标识信息及存储这些资源的节点的节点信息之间的对应关系,这些对应关系,可以存储在预设数据库中,也可以存储在预设链表中,具体不做限定。其中,节点信息可以指各个节点的IP地址,也可以指各个资源在每个节点中的URL(Uniform Resource Locator,统一资源定位符)地址。根据各个标识信息及节点信息之间的对应关系,服务器可以确定目标资源存储在哪些节点中。
进而,在获取目标资源的下载参数信息及客户端的网络类型之后,服务器可以根据下载参数信息及客户端的网络类型,从存储目标资源的多种类型的节点中选择出候选节点。其中,每个候选节点中均存储着目标资源,客户端可以从任意一个候选节点中下载到目标资源。
其中,存储目标资源的节点的类型可以包括中心节点、大存储边缘节点、小存储边缘节点及大存储超级节点。
其中,中心节点布置各核心机房内。这类节点较为稳定,存储着资源下载系统中的所有资源,能够提供的下载速度快,带宽成本高。
大存储超级节点可以为局域网中的服务器节点,布置在靠近边缘节点的机房,相对于中心节点更加灵活,能够离客户端更近。这类节点较为稳定,主要存储着热门数据,能够提供的下载速度快,带宽成本适中,可以满足高并发的资源下载请求,有利于总成本控制。
大存储边缘节点可以为公司、酒店、小区等区域网中的服务器节点,布置方式相对于中心节点更加灵活,能够离客户端更近。这类节点较为稳定,主要存储着冷门数据,下载速度适中,可以满足一定的速度需求,带宽成本相对中心节点成本低很多,可以为边缘节点提供更稳定更廉价的数据服务,有利于总成本控制。
小存储边缘节点可以为网络中的用户节点。由于用户可以随时退出和登录,因此这类节点的稳定性不高,而且,下载速度低,带宽成本低。
一种实现方式中,服务器在选择候选节点时,首先,可以根据下载参数信息及网络类型,判断存储目标资源的节点的类型的优先级,然后,根据各类型的优先级,选择存储目标资源的多种类型的节点,作为候选节点。
其中,优先级是指客户端下载目标资源时,选择各个类型的节点的优先级,也就是说,客户端优先从优先级较高的节点下载目标资源。在本发明实施例中,服务器在选择候选节点时,优先级越高的类型在候选节点中所占比例越高。
如图3所示,为一种实现方式中,服务器选择存储目标资源的候选节点的流程示意图。服务器可以采取如下步骤,选择存储目标资源的候选节点,其中,下载参数信息包括目标资源的热度和最低下载速度。
S301,判断网络类型是否为大型公共网络,且目标资源的热度是否大于预设第一热度值。
若网络类型为大型公共网络且热度大于预设第一热度值,则判定大存储超级节点、中心节点、小存储边缘节点及大存储边缘节点的优先级依次降低。
在这种情况下,服务器为客户端选择的候选节点中,大存储超级节点数量较多,中心节点、小存储边缘节点及大存储边缘节点的数量依次减少。一方面,可以减少客户端对中心节点的请求,减少由于中心节点拥塞导致的资源下载速度较慢的情况,有利于提高客户端的下载速度,同时可以减小免费网络提供商的出口带宽成本。另一方面,候选节点中小存储边缘节点的数量较少,也可以减少客户端对小存储边缘节点的请求,提高资源下载的稳定性。
在判定网络类型不是大型公共网络,或目标资源的热度小于或等于预设第一热度值的情况下,执行S302。
S302,判断目标资源的热度是否小于或等于预设第二热度值,且最低下载速度是否大于预设第一速度。
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则判定大存储边缘节点、中心节点、小存储边缘节点及大存储超级节点的优先级依次降低。
在这种情况下,服务器为客户端选择的候选节点中,大存储边缘节点数量较多,中心节点、小存储边缘节点及大存储超级节点的数量依次减少。一方面,所选择的大存储边缘节点可以在目标资源的热度较小的情况下,提供足够的下载速度,而且,相比于中心节点和大存储超级节点,大存储边缘节点为客户端提供数据服务更廉价。而且,另一方面,小存储边缘节点的数量较少,从而可以减少客户端对小存储边缘节点的请求,提高资源下载的稳定性。
若服务器判定目标资源的热度大于预设第二热度值或最低下载速度小于或等于预设第一速度,执行S303。
S303,获取当前网络的带宽,判断当前网络的带宽是否小于预设带宽,且最低下载速度是否小于或等于预设第二速度。
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则判定小存储边缘节点的优先级大于中心节点的优先级,中心节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
在这种情况下,服务器为客户端选择的候选节点中,小存储边缘节点数量较多,中心节点的数量次之,大存储超级节点及大存储边缘节点的数量较少。
由于当前系统资源服务能力不足,而资源下载请求的数量较多,中心节点压力过载,且目标资源的最低下载速度较低,一方面,所选择的小存储边缘节点虽然能够提供的资源速度偏低且不稳定,但通过为客户端选择较多数量的小存储边缘节点,客户端可以并发访问大量小存储边缘节点,从而满足目标资源的下载需求,缓解中心节点的压力。另一方面,小存储边缘节点成本廉价,可以为客户端提供更廉价的资源下载服务。
若服务器判定当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度,那么,可以判定中心节点的优先级大于小存储边缘节点的优先级,小存储边缘节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
针对步骤S203中的服务器将下载参数信息、网络类型及候选节点的节点信息返回至客户端,本发明实施例提供了以下可行的实施方案。。
服务器将下载参数信息和网络类型返回给客户端,使得客户端可以在后续的资源下载过程中,根据下载参数信息和网络类型对候选节点进行进一步的选择,选择更符合客户端需求的节点进行下载,进一步减少节点超负荷或带宽成本过高的情况的发生。
各候选节点的节点信息中,可以包括该候选节点的IP地址或目标资源在该候选节点中的URL地址等信息。也就是说,根据节点信息,客户端可以与该候选节点建立连接,进而可以实现从该候选节点中下载目标资源。
针对步骤S204中的客户端根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,从下载节点下载目标资源,本发明实施例提供了以下可行的实施方案。
在本发明实施例中,候选节点中包括多种不同类型的节点,客户端可以进一步根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点。
其中,根据下载参数信息和网络类型的不同,不同类型的候选节点会具有不同的优先级。客户端在从下载节点中下载目标资源的步骤中,首先,可以确定各类型下载节点的优先级,然后,从下载节点中选择优先级最高的节点,作为目标下载节点,从目标下载节点中下载目标资源。若目标下载节点提供的下载速度低于预设下载速度,则从未被选择的下载节点中,选择优先级最高的下载节点,将所选择的下载节点增加为目标下载节点,从增加后的目标下载节点中下载目标资源。
如图4所示,为一种实现方式中,客户端从候选节点中选择下载节点的流程示意图。客户端可以通过如下步骤,从候选节点中选择下载节点,其中,下载参数信息包括目标资源的热度和最低下载速度。
S401,判断网络类型是否为大型公共网络,且目标资源的热度是否大于预设第一热度值。
若网络类型为大型公共网络且热度大于预设第一热度值,则从候选节点中选择大存储超级节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储超级节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。在这种情况下,客户端优先选择大存储超级节点,从大存储超级节点下载目标资源。若大存储超级节点提供的下载速度低于预设下载速度,那么,客户端进一步选择中心节点,从大存储超级节点和中心节点下载目标资源。若大存储超级节点和中心节点提供的下载速度仍然低于预设下载速度,那么,客户端进一步选择小存储边缘节点,从大存储超级节点、中心节点和小存储边缘节点下载目标资源。
这样,一方面,客户端优先选择大存储超级节点,可以减少对中心节点的请求,减少由于中心节点拥塞导致的资源下载速度较慢的情况,有利于提高下载速度,同时可以减小免费网络提供商的出口带宽成本。另一方面,小存储边缘节点的优先级较低,客户端可以减少对小存储边缘节点的请求,提高资源下载的稳定性。
若判定网络类型不是大型公共网络,或目标资源的热度小于或等于预设第一热度值的情况下,执行S402。
S402,判断目标资源的热度是否小于或等于预设第二热度值,且最低下载速度是否大于预设第一速度。
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则从候选节点中选择大存储边缘节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储边缘节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
在这种情况下,客户端优先选择大存储边缘节点,从大存储边缘节点下载目标资源。若大存储边缘节点提供的下载速度低于预设下载速度,那么,客户端进一步选择中心节点,从大存储边缘节点和中心节点下载目标资源。若大存储边缘节点和中心节点提供的下载速度仍然低于预设下载速度,那么,客户端进一步选择小存储边缘节点,从大存储边缘节点、中心节点和小存储边缘节点下载目标资源。
这样,一方面,客户端优先选择大存储边缘节点,而大存储边缘节点可以在目标资源的热度较小的情况下,提供足够的下载速度,而且,相比于中心节点和大存储超级节点,大存储边缘节点为客户端提供数据服务更廉价。而且,另一方面,客户端选择小存储边缘节点的优先级较低,从而可以减少对小存储边缘节点的请求,提高资源下载的稳定性。
若客户端判定目标资源的热度大于预设第二热度值或最低下载速度小于或等于预设第一速度,客户端可以执行S403。
S403,获取当前网络的带宽,判断当前网络的带宽是否小于预设带宽,且最低下载速度是否小于或等于预设第二速度。
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则从候选节点中选择小存储边缘节点及中心节点,作为下载节点,其中,小存储边缘节点的优先级高于中心节点。
在这种情况下,客户端优先选择小存储边缘节点,从小存储边缘节点下载目标资源。若小存储边缘节点提供的下载速度低于预设下载速度,那么,客户端进一步选择中心节点,从小存储边缘节点和中心节点下载目标资源。
这样,在系统资源服务能力不足,而资源下载请求的数量较多,中心节点压力过载,能够提供的速度偏低且不稳定的情况下,一方面,客户端选择中心节点的优先级较低,可以减少对中心节点的请求,而通过并发访问大量小存储边缘节点的方式,满足目标资源的下载需求,缓解中心节点的压力。另一方面,小存储边缘节点成本廉价,客户端可以获取到更廉价的资源下载服务。
若客户端判定当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度,那么,可以从候选节点中选择中心节点及小存储边缘节点,作为下载节点,其中,中心节点的优先级高于小存储边缘节点。
举例而言,如图5所示,为本发明实施例提供的一种资源下载方法的方案示意图。其中,客户端向服务器发送目标资源的标识信息以及客户端的网络地址。服务器根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,并选择存储目标资源的多种类型的节点,作为候选节点,将下载参数信息、网络类型及候选节点的节点信息返回至客户端。客户端根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,并确定各类型下载节点的优先级,然后,从下载节点中选择优先级最高的节点,作为目标下载节点,从目标下载节点中下载目标资源。其中,图中的箭头可以表示各个目标下载节点的优先级顺序。
其中,首先,客户端在判断网络类型为大型公共网络,且目标资源的热度大于预设第一热度值的情况下,从候选节点中选择大存储超级节点、中心节点及小存储边缘节点,作为下载节点。其中,大存储超级节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
客户端在网络类型不是大型公共网络,或目标资源的热度小于或等于预设第一热度值的情况下,若判定热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则从候选节点中选择大存储边缘节点、中心节点及小存储边缘节点,作为下载节点。其中,大存储边缘节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
客户端在目标资源的热度大于预设第二热度值或最低下载速度小于或等于预设第一速度的情况下,若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则从候选节点中选择小存储边缘节点及中心节点,作为下载节点,其中,小存储边缘节点的优先级高于中心节点。
客户端在当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度的情况下,也就是其他场景下,从候选节点中选择中心节点及小存储边缘节点,作为下载节点,其中,中心节点的优先级高于小存储边缘节点。
由以上可见,应用本发明实施例提供的资源下载方法,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
举例而言,在本发明实施例提供的资源下载方法中,若客户端处于大型公共场所的大型公共网络中,而且需要下载热度较高的目标资源,那么,客户端可以优先从大存储超级节点下载目标资源,一方面,可以为客户端提供更高的资源下载速度,另一方面,还可以降低成本,提高服务质量。比如,可以将大存储超级节点布置在当前场所的服务商网内,从而减小对合作网络服务商出口带宽成本。这样,即使在中心节点的服务器高峰时间段,客户端对目标资源的下载也不会受到影响。
另外,若目标资源的热度较低,那么,可以优先从大存储边缘节点下载目标资源,这样,一方面,大存储边缘节点可以为客户端提供较高的资源下载速度,另一方面,相比于客户端从中心节点下载目标资源,又能降低成本,而且,大存储边缘节点相比于小存储边缘节点较为稳定,能有有效替代不稳定的小存储边缘节点,保障服务质量。比如,用户可以自己或者与合作方共同在客户端周围灵活地布置中小型上传设备,作为大存储边缘节点。
以及,在当前网络的带宽紧张或者下载速度需求低的场景下,客户端可以优先从小存储边缘节点获得资源,一方面,由于下载速度需要较低,小存储边缘节点可以提供足够的资源下载速度,另一方面,客户端从小存储边缘节点下载目标资源的程较低,可以进一步降低成本以及对中心节点的压力,减少中心节点的超负荷工作。
如图6所示,为本发明实施例提供的资源下载方法的流程示意图,应用于客户端,包括如下步骤:
S601:向服务器发送目标资源的标识信息以及客户端的网络地址。
S602:接收服务器发送的下载参数信息、网络类型及候选节点的节点信息。
其中,下载参数信息及网络类型为服务器根据标识信息及网络地址获取的,候选节点为服务器根据下载参数信息及网络类型从存储目标资源的多种类型的节点中选择的。
S603:根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点。
S604:从下载节点中下载目标资源。
一种实现方式中,从下载节点中下载目标资源,包括:
确定各类型下载节点的优先级;
从下载节点中选择优先级最高的节点,作为目标下载节点,从目标下载节点中下载目标资源;
若目标下载节点提供的下载速度低于预设下载速度,则从未被选择的下载节点中,选择优先级最高的下载节点,将所选择的下载节点增加为目标下载节点,从增加后的目标下载节点中下载目标资源。
一种实现方式中,下载参数信息包括目标资源的热度;根据下载参数信息网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点,包括:
判断网络类型是否为大型公共网络且热度是否大于预设第一热度值;
若网络类型为大型公共网络且热度大于预设第一热度值,则从候选节点中选择大存储超级节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储超级节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
一种实现方式中,访问下载参数信息还包括目标资源的最低下载速度;在网络类型不是大型公共网络或热度小于或等于预设第一热度值的情况下,方法还包括:
判断热度是否小于或等于预设第二热度值且最低下载速度是否大于预设第一速度;
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则从候选节点中选择大存储边缘节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储边缘节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
一种实现方式中,在热度大于预设第二热度值或最低下载速度小于或等于预设第一速度的情况下,方法还包括:
获取当前网络的带宽;
判断当前网络的带宽是否小于预设带宽且最低下载速度是否小于或等于预设第二速度;
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则从候选节点中选择小存储边缘节点及中心节点,作为下载节点,其中,小存储边缘节点的优先级高于中心节点。
一种实现方式中,在当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度的情况下,方法还包括:
从候选节点中选择中心节点及小存储边缘节点,作为下载节点,其中,中心节点的优先级高于小存储边缘节点。
由以上可见,应用本发明实施例提供的资源下载方法,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
如图7所示,为本发明实施例提供的资源下载方法的流程示意图,应用于服务器,包括如下步骤:
S701:接收客户端发送的目标资源的标识信息以及客户端的网络地址;
S702:根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型;
S703:根据下载参数信息及网络类型,选择存储目标资源的多种类型的节点,作为候选节点;
S704:将下载参数信息、网络类型及候选节点的节点信息返回至客户端。
一种实现方式中,网络地址为IP地址,根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型,包括:
根据标识信息,查询目标资源的下载次数及最低下载速度,根据下载次数,计算目标资源的热度,将热度和最低下载速度作为目标资源的下载参数信息;
根据IP地址,识别客户端所处的网络类型。
一种实现方式中,根据下载参数信息及网络类型,选择存储目标资源的多种类型的节点,作为候选节点,包括:
根据下载参数信息及网络类型,判断存储目标资源的节点的类型的优先级;
根据各类型的优先级,选择存储目标资源的多种类型的节点,作为候选节点,其中,优先级越高的类型在候选节点所占比例越高。
一种实现方式中,下载参数信息包括目标资源的热度;根据下载参数信息及网络类型,判断存储目标资源的节点的类型的优先级,包括:
判断网络类型是否为大型公共网络且热度是否大于预设第一热度值;
若网络类型为大型公共网络且热度大于预设第一热度值,则判定大存储超级节点、中心节点、小存储边缘节点及大存储边缘节点的优先级依次降低。
一种实现方式中,下载参数信息还包括目标资源的最低下载速度;在网络类型不是大型公共网络或热度小于或等于预设第一热度值的情况下,方法还包括:
判断热度是否小于或等于预设第二热度值且最低下载速度是否大于预设第一速度;
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则判定大存储边缘节点、中心节点、小存储边缘节点及大存储超级节点的优先级依次降低。
一种实现方式中,在热度大于预设第二热度值或最低下载速度小于或等于预设第一速度的情况下,方法还包括:
获取当前网络的带宽;
判断当前网络的带宽是否小于预设带宽且最低下载速度是否小于或等于预设第二速度;
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则判定小存储边缘节点的优先级大于中心节点的优先级,中心节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
一种实现方式中,在当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度的情况下,方法还包括:
判定中心节点的优先级大于小存储边缘节点的优先级,小存储边缘节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
由以上可见,应用本发明实施例提供的资源下载方法,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
如图8所示,为本发明实施例提供的资源下载装置的结构示意图,应用于客户端,该装置包括:
发送模块801,用于向服务器发送目标资源的标识信息以及客户端的网络地址;
接收模块802,用于接收服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,下载参数信息及网络类型为服务器根据标识信息及网络地址获取的,候选节点为服务器根据下载参数信息及网络类型从存储目标资源的多种类型的节点中选择的;
选择模块803,用于根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点;
下载模块804,用于从下载节点中下载目标资源。
一种实现方式中,下载模块804,具体用于:
确定各类型下载节点的优先级;
从下载节点中选择优先级最高的节点,作为目标下载节点,从目标下载节点中下载目标资源;
若目标下载节点提供的下载速度低于预设下载速度,则从未被选择的下载节点中,选择优先级最高的下载节点,将所选择的下载节点增加为目标下载节点,从增加后的目标下载节点中下载目标资源。
一种实现方式中,下载参数信息包括目标资源的热度;选择模块803,具体用于:
判断网络类型是否为大型公共网络且热度是否大于预设第一热度值;
若网络类型为大型公共网络且热度大于预设第一热度值,则从候选节点中选择大存储超级节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储超级节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
一种实现方式中,访问下载参数信息还包括目标资源的最低下载速度;选择模块803,还用于:
在网络类型不是大型公共网络或热度小于或等于预设第一热度值的情况下,判断热度是否小于或等于预设第二热度值且最低下载速度是否大于预设第一速度;
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则从候选节点中选择大存储边缘节点、中心节点及小存储边缘节点,作为下载节点,其中,大存储边缘节点的优先级高于中心节点,中心节点的优先级高于小存储边缘节点。
一种实现方式中,选择模块803,还用于:
在热度大于预设第二热度值或最低下载速度小于或等于预设第一速度的情况下,获取当前网络的带宽;
判断当前网络的带宽是否小于预设带宽且最低下载速度是否小于或等于预设第二速度;
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则从候选节点中选择小存储边缘节点及中心节点,作为下载节点,其中,小存储边缘节点的优先级高于中心节点。
一种实现方式中,选择模块803,还用于:
在当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度的情况下,从候选节点中选择中心节点及小存储边缘节点,作为下载节点,其中,中心节点的优先级高于小存储边缘节点。
由以上可见,应用本发明实施例提供的资源下载装置,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
如图9所示,为本发明实施例提供的资源下载装置的结构示意图,应用于服务器,该装置包括:
接收模块901,用于接收客户端发送的目标资源的标识信息以及客户端的网络地址;
获取模块902,用于根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型;
选择模块903,用于根据下载参数信息及网络类型,选择存储目标资源的多种类型的节点,作为候选节点;
反馈模块904,用于将下载参数信息、网络类型及候选节点的节点信息返回至客户端。
一种实现方式中,网络地址为IP地址,获取模块902,具体用于:
根据标识信息,查询目标资源的下载次数及最低下载速度,根据下载次数,计算目标资源的热度,将热度和最低下载速度作为目标资源的下载参数信息;
根据IP地址,识别客户端所处的网络类型。
一种实现方式中,选择模块903,具体用于:
根据下载参数信息及网络类型,判断存储目标资源的节点的类型的优先级;
根据各类型的优先级,选择存储目标资源的多种类型的节点,作为候选节点,其中,优先级越高的类型在候选节点所占比例越高。
一种实现方式中,下载参数信息包括目标资源的热度;选择模块903,具体用于:
判断网络类型是否为大型公共网络且热度是否大于预设第一热度值;
若网络类型为大型公共网络且热度大于预设第一热度值,则判定大存储超级节点、中心节点、小存储边缘节点及大存储边缘节点的优先级依次降低。
一种实现方式中,下载参数信息还包括目标资源的最低下载速度;选择模块903,还用于:
在网络类型不是大型公共网络或热度小于或等于预设第一热度值的情况下,判断热度是否小于或等于预设第二热度值且最低下载速度是否大于预设第一速度;
若热度小于或等于预设第二热度值且最低下载速度大于预设第一速度,则判定大存储边缘节点、中心节点、小存储边缘节点及大存储超级节点的优先级依次降低。
一种实现方式中,选择模块903,还用于:
在热度大于预设第二热度值或最低下载速度小于或等于预设第一速度的情况下,获取当前网络的带宽;
判断当前网络的带宽是否小于预设带宽且最低下载速度是否小于或等于预设第二速度;
若当前网络的带宽小于预设带宽且最低下载速度小于或等于预设第二速度,则判定小存储边缘节点的优先级大于中心节点的优先级,中心节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
一种实现方式中,选择模块903,还用于:
在当前网络的带宽大于或等于预设带宽或最低下载速度大于预设第二速度的情况下,判定中心节点的优先级大于小存储边缘节点的优先级,小存储边缘节点的优先级大于大存储超级节点及大存储边缘节点的优先级。
由以上可见,应用本发明实施例提供的资源下载装置,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
本发明实施例还提供了一种电子设备,如图10所示,包括处理器1001、通信接口1002、存储器1003和通信总线1004,其中,处理器1001,通信接口1002,存储器1003通过通信总线1004完成相互间的通信,
存储器1003,用于存放计算机程序;
处理器1001,用于执行存储器1003上所存放的程序时,实现如下步骤:
向服务器发送目标资源的标识信息以及客户端的网络地址;
接收服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,下载参数信息及网络类型为服务器根据标识信息及网络地址获取的,候选节点为服务器根据下载参数信息及网络类型从存储目标资源的多种类型的节点中选择的;
根据下载参数信息、网络类型及候选节点的节点信息,从候选节点中选择至少一种类型的节点,作为下载节点;
从下载节点中下载目标资源。
或者,实现如下步骤:
接收客户端发送的目标资源的标识信息以及客户端的网络地址;
根据标识信息及网络地址,获取目标资源的下载参数信息及客户端的网络类型;
根据下载参数信息及网络类型,选择存储目标资源的多种类型的节点,作为候选节点;
将下载参数信息、网络类型及候选节点的节点信息返回至客户端。
由以上可见,应用本发明实施例提供的电子设备,在资源下载过程中,先由服务器为客户端选择多种类型的候选节点,进而,客户端可以根据目标资源的下载参数信息及该客户端的网络类型,进一步从候选节点中选择至少一种类型的下载节点,并从下载节点下载目标资源,相比于相关技术中主要从中心节点下载目标资源的方式,可以根据下载参数信息及网络类型的不同,选择不同类型的节点下载目标资源,对下载节点的分配更为合理,减少了下载节点超负荷或带宽成本过高的情况的发生。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的资源下载方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的资源下载方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例、系统实施例、电子设备实施例、存储介质实施例和计算机程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (19)

1.一种资源下载方法,其特征在于,所述方法包括:
客户端向服务器发送目标资源的标识信息以及所述客户端的网络地址;
所述服务器根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型,并选择存储所述目标资源的多种类型的节点,作为候选节点;将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端;
所述客户端根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点,从所述下载节点下载所述目标资源。
2.一种资源下载方法,其特征在于,应用于客户端,所述方法包括:
向服务器发送目标资源的标识信息以及所述客户端的网络地址;
接收所述服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,所述下载参数信息及所述网络类型为所述服务器根据所述标识信息及所述网络地址获取的,所述候选节点为所述服务器根据所述下载参数信息及所述网络类型从存储所述目标资源的多种类型的节点中选择的;
根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点;
从所述下载节点中下载所述目标资源。
3.根据权利要求2所述的方法,其特征在于,所述从所述下载节点中下载所述目标资源,包括:
确定各类型下载节点的优先级;
从所述下载节点中选择优先级最高的节点,作为目标下载节点,从所述目标下载节点中下载所述目标资源;
若所述目标下载节点提供的下载速度低于预设下载速度,则从未被选择的下载节点中,选择优先级最高的下载节点,将所选择的下载节点增加为目标下载节点,从增加后的目标下载节点中下载所述目标资源。
4.根据权利要求3所述的方法,其特征在于,所述下载参数信息包括所述目标资源的热度;所述根据所述下载参数信息所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点,包括:
判断所述网络类型是否为大型公共网络且所述热度是否大于预设第一热度值;
若所述网络类型为大型公共网络且所述热度大于预设第一热度值,则从所述候选节点中选择大存储超级节点、中心节点及小存储边缘节点,作为下载节点,其中,所述大存储超级节点的优先级高于所述中心节点,所述中心节点的优先级高于所述小存储边缘节点。
5.根据权利要求4所述的方法,其特征在于,所述访问下载参数信息还包括所述目标资源的最低下载速度;在所述网络类型不是大型公共网络或所述热度小于或等于预设第一热度值的情况下,所述方法还包括:
判断所述热度是否小于或等于预设第二热度值且所述最低下载速度是否大于预设第一速度;
若所述热度小于或等于预设第二热度值且所述最低下载速度大于预设第一速度,则从所述候选节点中选择大存储边缘节点、中心节点及小存储边缘节点,作为下载节点,其中,所述大存储边缘节点的优先级高于所述中心节点,所述中心节点的优先级高于所述小存储边缘节点。
6.根据权利要求5所述的方法,其特征在于,在所述热度大于预设第二热度值或所述最低下载速度小于或等于预设第一速度的情况下,所述方法还包括:
获取当前网络的带宽;
判断所述当前网络的带宽是否小于预设带宽且所述最低下载速度是否小于或等于预设第二速度;
若所述当前网络的带宽小于预设带宽且所述最低下载速度小于或等于预设第二速度,则从所述候选节点中选择小存储边缘节点及中心节点,作为下载节点,其中,所述小存储边缘节点的优先级高于所述中心节点。
7.根据权利要求6所述的方法,其特征在于,在所述当前网络的带宽大于或等于预设带宽或所述最低下载速度大于预设第二速度的情况下,所述方法还包括:
从所述候选节点中选择中心节点及小存储边缘节点,作为下载节点,其中,所述中心节点的优先级高于所述小存储边缘节点。
8.一种资源下载方法,其特征在于,应用于服务器,所述方法包括:
接收客户端发送的目标资源的标识信息以及所述客户端的网络地址;
根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型;
根据所述下载参数信息及所述网络类型,选择存储所述目标资源的多种类型的节点,作为候选节点;
将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端。
9.根据权利要求8所述的方法,其特征在于,所述网络地址为IP地址,所述根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型,包括:
根据所述标识信息,查询所述目标资源的下载次数及最低下载速度,根据所述下载次数,计算所述目标资源的热度,将所述热度和所述最低下载速度作为所述目标资源的下载参数信息;
根据所述IP地址,识别所述客户端所处的网络类型。
10.根据权利要求8所述的方法,其特征在于,所述根据所述下载参数信息及所述网络类型,选择存储所述目标资源的多种类型的节点,作为候选节点,包括:
根据所述下载参数信息及所述网络类型,判断存储所述目标资源的节点的类型的优先级;
根据各类型的优先级,选择存储所述目标资源的多种类型的节点,作为候选节点,其中,优先级越高的类型在所述候选节点所占比例越高。
11.根据权利要求10所述的方法,其特征在于,所述下载参数信息包括所述目标资源的热度;所述根据所述下载参数信息及所述网络类型,判断存储所述目标资源的节点的类型的优先级,包括:
判断所述网络类型是否为大型公共网络且所述热度是否大于预设第一热度值;
若所述网络类型为大型公共网络且所述热度大于预设第一热度值,则判定大存储超级节点、中心节点、小存储边缘节点及大存储边缘节点的优先级依次降低。
12.根据权利要求11所述的方法,其特征在于,所述下载参数信息还包括所述目标资源的最低下载速度;在所述网络类型不是大型公共网络或所述热度小于或等于预设第一热度值的情况下,所述方法还包括:
判断所述热度是否小于或等于预设第二热度值且所述最低下载速度是否大于预设第一速度;
若所述热度小于或等于预设第二热度值且所述最低下载速度大于预设第一速度,则判定所述大存储边缘节点、所述中心节点、所述小存储边缘节点及所述大存储超级节点的优先级依次降低。
13.根据权利要求12所述的方法,其特征在于,在所述热度大于预设第二热度值或所述最低下载速度小于或等于预设第一速度的情况下,所述方法还包括:
获取当前网络的带宽;
判断所述当前网络的带宽是否小于预设带宽且所述最低下载速度是否小于或等于预设第二速度;
若所述当前网络的带宽小于预设带宽且所述最低下载速度小于或等于预设第二速度,则判定所述小存储边缘节点的优先级大于所述中心节点的优先级,所述中心节点的优先级大于所述大存储超级节点及所述大存储边缘节点的优先级。
14.根据权利要求13所述的方法,其特征在于,在所述当前网络的带宽大于或等于预设带宽或所述最低下载速度大于预设第二速度的情况下,所述方法还包括:
判定所述中心节点的优先级大于所述小存储边缘节点的优先级,所述小存储边缘节点的优先级大于所述大存储超级节点及所述大存储边缘节点的优先级。
15.一种资源下载装置,其特征在于,应用于客户端,所述装置包括:
发送模块,用于向服务器发送目标资源的标识信息以及所述客户端的网络地址;
接收模块,用于接收所述服务器发送的下载参数信息、网络类型及候选节点的节点信息,其中,所述下载参数信息及所述网络类型为所述服务器根据所述标识信息及所述网络地址获取的,所述候选节点为所述服务器根据所述下载参数信息及所述网络类型从存储所述目标资源的多种类型的节点中选择的;
选择模块,用于根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点;
下载模块,用于从所述下载节点中下载所述目标资源。
16.一种资源下载装置,其特征在于,应用于服务器,所述装置包括:
接收模块,用于接收客户端发送的目标资源的标识信息以及所述客户端的网络地址;
获取模块,用于根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型;
选择模块,用于根据所述下载参数信息及所述网络类型,选择存储所述目标资源的多种类型的节点,作为候选节点;
反馈模块,用于将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端。
17.一种资源下载系统,其特征在于,所述系统包括客户端和服务器,其中:
所述客户端,用于向所述服务器发送目标资源的标识信息以及所述客户端的网络地址;
所述服务器,用于根据所述标识信息及所述网络地址,获取所述目标资源的下载参数信息及所述客户端的网络类型,并选择存储所述目标资源的多种类型的节点,作为候选节点;将所述下载参数信息、所述网络类型及所述候选节点的节点信息返回至所述客户端;
所述客户端,还用于根据所述下载参数信息、所述网络类型及所述候选节点的节点信息,从所述候选节点中选择至少一种类型的节点,作为下载节点,从所述下载节点下载所述目标资源。
18.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求2-7或8-14任一所述的方法步骤。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求2-7或8-14任一所述的方法步骤。
CN201911052665.6A 2019-10-31 2019-10-31 资源下载方法、装置、系统、电子设备及存储介质 Active CN110830565B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911052665.6A CN110830565B (zh) 2019-10-31 2019-10-31 资源下载方法、装置、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911052665.6A CN110830565B (zh) 2019-10-31 2019-10-31 资源下载方法、装置、系统、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN110830565A true CN110830565A (zh) 2020-02-21
CN110830565B CN110830565B (zh) 2023-04-18

Family

ID=69551729

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911052665.6A Active CN110830565B (zh) 2019-10-31 2019-10-31 资源下载方法、装置、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN110830565B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111753239A (zh) * 2020-06-23 2020-10-09 北京奇艺世纪科技有限公司 一种资源分发方法、装置、电子设备及存储介质
CN111835856A (zh) * 2020-07-17 2020-10-27 北京百度网讯科技有限公司 文件下载的方法、装置、设备以及存储介质
CN112073542A (zh) * 2020-11-12 2020-12-11 腾讯科技(深圳)有限公司 雾节点调度方法、装置、计算机设备和存储介质
CN114189715A (zh) * 2021-12-07 2022-03-15 北京奇艺世纪科技有限公司 下载地址切换方法及相关设备
CN115473806A (zh) * 2022-08-12 2022-12-13 北京奇艺世纪科技有限公司 资源下载控制方法、装置、电子设备和计算机可读介质
CN117041260A (zh) * 2023-10-09 2023-11-10 湖南快乐阳光互动娱乐传媒有限公司 一种控制处理方法及系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420337A (zh) * 2007-10-26 2009-04-29 北大方正集团有限公司 一种资源定位的方法、装置和索引服务器
US20120151051A1 (en) * 2009-06-17 2012-06-14 China Mobile Communications Corporation Method, system and device for searching active peer in p2p streaming media system
CN102664938A (zh) * 2012-04-12 2012-09-12 北京蓝汛通信技术有限责任公司 一种资源下载控制方法及装置
CN103312752A (zh) * 2012-03-13 2013-09-18 中国联合网络通信集团有限公司 点对点网络信息分发方法、下载节点、索引服务器及系统
CN103731511A (zh) * 2014-01-26 2014-04-16 飞狐信息技术(天津)有限公司 一种p2p系统中数据获取方法和装置
KR101484059B1 (ko) * 2013-09-17 2015-01-20 성균관대학교산학협력단 다중 전송 속도 파티셔닝 및 협력 전송을 이용한 고속 무선랜 통신 방법 및 무선랜 통신 장치
US20150189011A1 (en) * 2013-12-27 2015-07-02 Microsoft Corporation Peer-to-peer network prioritizing propagation of objects through the network
WO2016127315A1 (zh) * 2015-02-10 2016-08-18 深圳好视网络科技有限公司 一种私有云系统的资源共享方法及装置
US20170142177A1 (en) * 2015-11-13 2017-05-18 Le Holdings (Beijing) Co., Ltd. Method and system for network dispatching
CN109788051A (zh) * 2019-01-02 2019-05-21 深圳市网心科技有限公司 基于分布式文件系统的网络资源传输方法及系统
CN109862124A (zh) * 2019-04-24 2019-06-07 北京风行极客科技有限公司 一种业务请求响应的方法及装置
CN110298194A (zh) * 2019-06-11 2019-10-01 阿里巴巴集团控股有限公司 基于区块链的文件处理方法、装置、设备及存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420337A (zh) * 2007-10-26 2009-04-29 北大方正集团有限公司 一种资源定位的方法、装置和索引服务器
US20120151051A1 (en) * 2009-06-17 2012-06-14 China Mobile Communications Corporation Method, system and device for searching active peer in p2p streaming media system
CN103312752A (zh) * 2012-03-13 2013-09-18 中国联合网络通信集团有限公司 点对点网络信息分发方法、下载节点、索引服务器及系统
CN102664938A (zh) * 2012-04-12 2012-09-12 北京蓝汛通信技术有限责任公司 一种资源下载控制方法及装置
KR101484059B1 (ko) * 2013-09-17 2015-01-20 성균관대학교산학협력단 다중 전송 속도 파티셔닝 및 협력 전송을 이용한 고속 무선랜 통신 방법 및 무선랜 통신 장치
US20150189011A1 (en) * 2013-12-27 2015-07-02 Microsoft Corporation Peer-to-peer network prioritizing propagation of objects through the network
CN103731511A (zh) * 2014-01-26 2014-04-16 飞狐信息技术(天津)有限公司 一种p2p系统中数据获取方法和装置
WO2016127315A1 (zh) * 2015-02-10 2016-08-18 深圳好视网络科技有限公司 一种私有云系统的资源共享方法及装置
US20170142177A1 (en) * 2015-11-13 2017-05-18 Le Holdings (Beijing) Co., Ltd. Method and system for network dispatching
CN109788051A (zh) * 2019-01-02 2019-05-21 深圳市网心科技有限公司 基于分布式文件系统的网络资源传输方法及系统
CN109862124A (zh) * 2019-04-24 2019-06-07 北京风行极客科技有限公司 一种业务请求响应的方法及装置
CN110298194A (zh) * 2019-06-11 2019-10-01 阿里巴巴集团控股有限公司 基于区块链的文件处理方法、装置、设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陆垂伟: "结构化P2P网络的安全高效路由算法研究" *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111753239A (zh) * 2020-06-23 2020-10-09 北京奇艺世纪科技有限公司 一种资源分发方法、装置、电子设备及存储介质
CN111753239B (zh) * 2020-06-23 2023-09-05 北京奇艺世纪科技有限公司 一种资源分发方法、装置、电子设备及存储介质
CN111835856A (zh) * 2020-07-17 2020-10-27 北京百度网讯科技有限公司 文件下载的方法、装置、设备以及存储介质
CN112073542A (zh) * 2020-11-12 2020-12-11 腾讯科技(深圳)有限公司 雾节点调度方法、装置、计算机设备和存储介质
CN112073542B (zh) * 2020-11-12 2021-02-05 腾讯科技(深圳)有限公司 雾节点调度方法、装置、计算机设备和存储介质
US11838387B2 (en) 2020-11-12 2023-12-05 Tencent Technology (Shenzhen) Company Limited Fog node scheduling method and apparatus, computer device, and storage medium
CN114189715A (zh) * 2021-12-07 2022-03-15 北京奇艺世纪科技有限公司 下载地址切换方法及相关设备
CN115473806A (zh) * 2022-08-12 2022-12-13 北京奇艺世纪科技有限公司 资源下载控制方法、装置、电子设备和计算机可读介质
CN115473806B (zh) * 2022-08-12 2023-09-26 北京奇艺世纪科技有限公司 资源下载控制方法、装置、电子设备和计算机可读介质
CN117041260A (zh) * 2023-10-09 2023-11-10 湖南快乐阳光互动娱乐传媒有限公司 一种控制处理方法及系统
CN117041260B (zh) * 2023-10-09 2024-01-02 湖南快乐阳光互动娱乐传媒有限公司 一种控制处理方法及系统

Also Published As

Publication number Publication date
CN110830565B (zh) 2023-04-18

Similar Documents

Publication Publication Date Title
CN110830565B (zh) 资源下载方法、装置、系统、电子设备及存储介质
US9787599B2 (en) Managing content delivery network service providers
US10601767B2 (en) DNS query processing based on application information
US8065417B1 (en) Service provider registration by a content broker
US9985927B2 (en) Managing content delivery network service providers by a content broker
US20180288141A1 (en) Http scheduling system and method of content delivery network
CN110519183B (zh) 一种节点限速的方法、装置、电子设备及存储介质
CN110677684B (zh) 视频处理、视频访问方法及分布式存储、视频访问系统
CN110620828A (zh) 一种文件推送方法、系统、装置、电子设备及介质
US20140344901A1 (en) Method And System For Sharing A File
CN109756584B (zh) 域名解析方法、域名解析装置及计算机可读存储介质
CN114268631B (zh) 低延迟网络系统及其通信连接方法及可读存储介质
CN110392119B (zh) 一种数据传输方法及基站
CN115706741A (zh) 一种切片文件的回源方法以及装置
CN114003337A (zh) 访问请求的分配方法及装置
CN110677683B (zh) 视频存储、视频访问方法及分布式存储、视频访问系统
CN112019451A (zh) 带宽分配方法、调试网元、本地缓存服务器及计算设备
CN113873302B (zh) 内容分发方法、装置、存储介质和电子设备
CN115665262A (zh) 一种请求处理方法、装置、电子设备及存储介质
CN113301445B (zh) 一种内容分发网络的地址分配方法和装置
CN108574714B (zh) 互联网资源获取方法、装置及互联网缓存系统
CN117544688A (zh) 一种网络服务方法、装置、服务器及存储介质
CN114501080A (zh) 服务内容更新方法及装置、存储介质及电子设备
CN117914822A (zh) 调度方法、电子设备、计算机可读介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant