CN110365783B - 文件部署方法及装置、网络节点及存储介质 - Google Patents

文件部署方法及装置、网络节点及存储介质 Download PDF

Info

Publication number
CN110365783B
CN110365783B CN201910652179.1A CN201910652179A CN110365783B CN 110365783 B CN110365783 B CN 110365783B CN 201910652179 A CN201910652179 A CN 201910652179A CN 110365783 B CN110365783 B CN 110365783B
Authority
CN
China
Prior art keywords
network node
area
target file
target
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910652179.1A
Other languages
English (en)
Other versions
CN110365783A (zh
Inventor
祁朋祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Onething Technology Co Ltd
Original Assignee
Shenzhen Onething Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Onething Technology Co Ltd filed Critical Shenzhen Onething Technology Co Ltd
Priority to CN201910652179.1A priority Critical patent/CN110365783B/zh
Publication of CN110365783A publication Critical patent/CN110365783A/zh
Application granted granted Critical
Publication of CN110365783B publication Critical patent/CN110365783B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63Routing a service request depending on the request content or context

Abstract

本发明提供一种文件部署方法,应用于部署有目标文件的第一网络节点,包括:判断单位时间内从第一网络节点请求目标文件的第一请求次数是否大于或等于预设次数;若单位时间内从第一网络节点请求目标文件的第一请求次数大于或等于预设次数,则获取第一网络节点所在区域中目标文件的数量和单位时间内从该区域请求目标文件的第二请求次数;根据该区域中目标文件的数量和第二请求次数确定是否需要在该区域中对目标文件进行再部署;若需要在该区域中对目标文件进行再部署,则确定该区域中未部署有目标文件的第二网络节点;将目标文件部署到第二网络节点。本发明可以实现文件的动态部署,减轻区域中节点的文件服务压力,提升文件服务的稳定性。

Description

文件部署方法及装置、网络节点及存储介质
技术领域
本发明涉及计算机网络技术领域,具体涉及一种文件部署方法及装置、网络节点及计算机可读存储介质。
背景技术
目前,在分布式系统中,为了提高系统中文件的稳定性,一般一个文件都会部署多份,因此,即使有节点下线,不至于导致整个文件无法下载。文件部署通常的做法是根据全国的行政区域和运营商将全国划分为多个区域,每一个区域至少部署一份,这个过程称为主动部署。每个区域部署的份数通常都是粗略估计一个数值,然后再根据实际中的下载数据去调整这个数值。
主动部署的特点是人为地将文件打散,均匀分布在全国几个区域中,并没有考虑每个文件的不同情况,结果往往不是很理想。例如,某个文件在某个区域下载比较集中,如果该区域只部署了一份数据,那么很容易造成部署该数据的节点上行带宽过高,而拥有该资源的其他节点处于浪费状态。在这种情况下,下载端的速度往往不会令人满意。
发明内容
鉴于以上内容,有必要提出一种文件部署方法及装置、网络节点及计算机可读存储介质,其可以实现文件的动态部署,减轻网络区域中节点的文件服务压力,提升文件服务的稳定性。
本申请的第一方面提供一种文件部署方法,应用于部署有目标文件的第一网络节点,所述方法包括:
判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;
若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
将所述目标文件部署到所述第二网络节点。
另一种可能的实现方式中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
计算所述第二请求次数与所述预设次数的比值;
计算所述比值与所述区域中所述目标文件的数量的差值;
判断所述差值是否大于或等于预设数量。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
若所述差值大于或等于预设数量,根据所述预设数量确定所述目标文件再部署的数量;
按照所述目标文件再部署的数量确定所述第二网络节点。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的稳定性指标;
根据所述稳定性指标从所述各个网络节点中确定所述第二网络节点。
另一种可能的实现方式中,所述根据所述稳定性指标确定所述第二网络节点包括:
根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇;
从所述稳定节点簇中确定所述第二网络节点。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的剩余存储量;
根据所述剩余存储量从所述各个网络节点中确定所述第二网络节点。
另一种可能的实现方式中,所述将所述目标文件部署到所述第二网络节点之后,所述方法还包括:
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知。
本申请的第二方面提供一种网络节点,所述网络节点包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现所述文件部署方法。
本申请的第三方面提供一种文件部署装置,应用于部署有目标文件的第一网络节点,所述装置包括:
判断单元,用于判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;
获取单元,用于若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
第一确定单元,用于根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
第二确定单元,用于若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
部署单元,用于将所述目标文件部署到所述第二网络节点。
另一种可能的实现方式中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
计算所述第二请求次数与所述预设次数的比值;
计算所述比值与所述区域中所述目标文件的数量的差值;
判断所述差值是否大于或等于预设数量。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
若所述差值大于或等于预设数量,根据所述预设数量确定所述目标文件再部署的数量;
按照所述目标文件再部署的数量确定所述第二网络节点。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的稳定性指标;
根据所述稳定性指标从所述各个网络节点中确定所述第二网络节点。
另一种可能的实现方式中,所述根据所述稳定性指标确定所述第二网络节点包括:
根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇;
从所述稳定节点簇中确定所述第二网络节点。
另一种可能的实现方式中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的剩余存储量;
根据所述剩余存储量从所述各个网络节点中确定所述第二网络节点。
另一种可能的实现方式中,所述将所述目标文件部署到所述第二网络节点之后,所述方法还包括:
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知。
本申请的第四方面提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现所述文件部署方法。
本申请的第五方面提供一种计算机程序产品,包括计算机指令,当其在第一网络节点上运行时,使得第一网络节点执行所述文件部署方法。
本发明的文件部署方法应用于部署有目标文件的第一网络节点,所述方法包括:判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;将所述目标文件部署到所述第二网络节点。本发明实现文件的动态部署,减轻网络区域中节点的文件服务压力,提升文件服务的稳定性。
附图说明
图1是本发明实施例提供的文件部署方法较佳实施例的流程图。
图2是本发明实施例提供的文件部署装置较佳实施例的流程图。
图3是本发明实施例提供的第一网络节点较佳实施例的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在本发明中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
优选地,本发明的文件部署方法应用于第一网络节点。所述第一网络节点是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程门阵列(Field-Programmable Gate Array,FPGA)、数字处理器(Digital SignalProcessor,DSP)、嵌入式设备等。
所述第一网络节点可以是桌上型计算机、笔记本及掌上电脑等计算设备。所述第一网络节点可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
所述第一网络节点可以是组成CDN(Content Delivery Network,内容分发网络)网络或者区块链网络的节点。
实施例一
图1是本发明实施例提供的文件部署方法的流程图。所述文件部署方法应用于分布式系统中部署有目标文件的第一网络节点,用于根据文件的热度将所述目标文件动态部署至第二网络节点。所述分布式系统包括多个网络节点,每个节点存储一定的文件。在本实施例中,所述分布式系统中的网络节点(例如第一网络节点、第二网络节点)可以是个人云盘,例如玩客云。在其他的实施例中,所述分布式系统中的网络节点可以是其他的计算机装置,例如机顶盒或路由器。
参阅图1所示,所述文件部署方法具体包括以下步骤:
S101,判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数。
所述单位时间可以根据实际需要设定,例如可以是一分钟、一小时、一天等。例如,判断一小时内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数(例如100次)。
所述目标文件可以是不同类型的文件,例如可以是视频文件、音频文件、文本文件等。
S102,若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数。
网络节点所在区域是指网络节点所属的网络区域。在一具体实施例中,所述区域可以包括“华东”、“华北”、“华南”、“东北”、“西北”、“西南”六个区域。例如,所述第一网络节点所在区域为华东区域。
在一实施例中,可以结合所述第一网络节点所属区域和运营商获取所述目标文件的数量和第二请求次数。也就是说,若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取与所述第一网络节点属于相同区域相同运营商的网络节点中所述目标文件的数量和所述单位时间内从所述与所述第一网络节点属于相同区域相同运营商的网络节点请求所述目标文件的第二请求次数。在一具体实施例中,所述运营商可以包括“中国电信”、“中国联通”、“中国移动”、“中国网通”、“中国铁通”五个网络运营商。
在本发明实施例中,每个运营商都有其对应的IP地址段,运营商可将其对应的IP地址段中的IP地址分配给接入该运营商网络的网络节点,使得该网络节点可利用运营商为其分配的IP地址与该运营商网络中的业务服务器进行数据交互。
可以查找各个运营商的IP地址段,将包含网络节点(如第一网络节点)的IP地址的地址段的运营商确定为网络节点所属的运营商。例如:111.0.0.0/10为中国移动的IP地址段,网络节点的IP地址为111.0.0.7,111.0.0.0/10包含111.0.0.7,则网络节点所属的运营商为中国移动。
在本实施例中,每个运营商将其不同的IP地址段分配给不同区域使用。可以查找各个运营商的IP地址段所分配的区域,将包含网络节点(如第一网络节点)的IP地址的IP地址段所分配的区域确定为网络节点所属的区域。例如,网络节点的IP地址为111.0.0.7,该IP地址包含在中国移动的IP地址段111.0.0.0/10中,且该地址段分配给深圳,则可确定该网络节点所属的区域为深圳。
S103,根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署。
在一具体实施例中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
计算所述第二请求次数与所述预设次数的比值;
计算所述比值与所述区域中所述目标文件的数量的差值;
判断所述差值是否大于或等于预设数量。
若所述差值大于或等于预设数量,则需要在所述区域中对所述目标文件进行再部署。否则,所述差值小于预设数量,则不需要在所述区域中对所述目标文件进行再部署。
例如,所述第二请求次数为M,所述区域中所述目标文件的数量为N,所述预设次数为T,所述预设数量为R,则所述第二请求次数与所述预设次数的比值为M/T,若M/T-N>R,则需要在所述区域中对所述目标文件进行再部署。
在另一具体实施例中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
根据所述区域中所述目标文件的数量和所述第二请求次数计算所述区域中所述目标文件的热度值R:
Figure BDA0002135610090000091
其中,M表示所述第二请求次数,N表示所述区域中所述目标文件的数量,Q表示所述目标文件的大小;
判断所述区域中所述目标文件的热度值是否大于或等于预设热度值。
若所述区域中所述目标文件的热度值大于或等于预设热度值,则需要在所述区域中对所述目标文件进行再部署。否则,若所述区域中所述目标文件的热度值小于预设热度值,则不需要在所述区域中对所述目标文件进行再部署。
S104,若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点。
在一具体实施例中,若所述差值大于或等于预设数量,根据所述预设数量确定所述目标文件再部署的数量,按照所述目标文件再部署的数量确定所述第二网络节点。例如,所述目标文件再部署的数量为5,则确定出5个所述区域中未部署有所述目标文件的第二网络节点。
所述目标文件再部署的数量可以等于所述预设数量。所述目标文件再部署的数量也可以是其他数值,例如为所述预设数量的一半。
在一具体实施例中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的稳定性指标;
根据所述稳定性指标从所述各个网络节点中确定所述第二网络节点。
所述根据所述稳定性指标确定所述第二网络节点包括:
根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇;
从所述稳定节点簇中确定所述第二网络节点。
所述稳定性指标可以包括在线时间、上传文件时间、上传文件数量、上传文件大小总和、下载文件时间、下载文件数量、下载文件大小总和等。
在一具体实施例中,所述根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇包括:
(1)采用向量空间模型表示所述各个网络节点,所述各个网络节点中的每个网络节点对应于所述空间模型中的一个节点向量。
具体地,将所述各个网络节点中的每个网络节点作为向量空间中的一个节点向量,将每个稳定性指标作为所述向量空间中的一个正交维度。
例如,将所述各个网络节点中的第i个网络节点Di作为向量空间中的一个节点向量(W1,i,W2,i,…,Wn,i),n个为每个网络节点的稳定性指标的个数,Wj,i为网络节点Di中稳定性指标j的权重,即稳定性指标j的数值。
(2)将每个节点向量作为一个簇。
将每个节点向量作为一个簇就是对所述各个网络节点D={D1,D2,…,Di,…Dm}进行划分,分成
Figure BDA0002135610090000101
Cx称为一个簇。初始状态下,一个簇包括单个节点向量,即包括单个网络节点。
(3)计算每两个簇之间的相似度,选取相似度最大的簇对,并将所述相似度最大的簇对合并为一个新簇,直至所述簇的数量达到预设簇数量。
具体地,所述计算每两个簇之间的相似度包括:
若每个簇中只有一个节点向量(即初始状态下),两个簇之间的相似度为两个簇中的两个节点向量之间的离差平方和的倒数或两个簇中的两个节点向量之间的欧式距离的倒数;
若每个簇中包括两个或两个以上节点向量,两个簇之间的相似度为两个簇之间的离差平方和的倒数或两个簇的质心之间的欧式距离的倒数。
例如,给定5个节点向量A、B、C、D、E,初始状态下,一个节点向量为一个簇(即簇A、B、C、D、E),预设簇数量为3。计算每两个节点向量之间的欧式距离的倒数,将欧式距离的倒数最小的两个簇A、E合并为一个新簇F;分别计算所述新簇F的质心与簇B、C、D的质心之间的欧式距离的倒数,将欧式距离的倒数最小的两个簇B、C合并为一个新簇G,此时共有D、F、G三个簇,达到预设簇数量。
(4)从所述簇中提取所述稳定节点簇。
具体地,所述从所述簇中提取所述稳定节点簇包括:计算每个簇的网络节点的平均在线时间和平均上传文件数量;对每个簇的网络节点的平均在线时间和平均上传文件数量加权求和,得到每个簇的加权分值;将加权分值最高的簇确定为所述稳定节点簇。加权分值越高,表明簇的稳定性越好,加权分值越低,表明簇的稳定性越差。从稳定节点簇中确定用于部署目标文件的第二网络节点可以提高文件服务的稳定性。
例如,某个簇的网络节点的平均在线时间为A,平均上传文件数量为B,平均在线时间A的权重为0.6,平均上传文件数量B的权重为0.4,则该簇的加权分值为0.6*A+0.4*B。
在另一具体实施例中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的剩余存储量;
根据所述剩余存储量从所述各个网络节点中确定所述第二网络节点。
例如,可以根据所述剩余存储量从所述各个网络节点中确定有足够的存储空间部署所述目标文件的网络节点,从有足够的存储空间部署所述目标文件的网络节点中确定所述第二网络节点。
又如,可以按照剩余存储量从大到小的顺序对所述各个网络节点进行排序,将剩余存储量最大或剩余存储量排在前预设位数的网络节点作为所述第二网络节点。
S105,将所述目标文件部署到所述第二网络节点。
可以将文件部署任务发送给所述第二网络节点,使所述第二网络节点从所述第一网络节点拉取所述目标文件进行部署。
在一具体实施例中,若所述目标文件再部署的数量大于预设单批数量(例如10),将所述目标文件分批部署到所述第二网络节点;每次部署完成后,计算单位时间内从所述第一网络节点请求所述目标文件的第三请求次数;若所述第三请求次数大于或等于所述预设次数,则停止部署。
每次部署完成后,所述区域中的文件数量增多,所述第一网络节点及所述区域中部署有目标文件的其他网络节点的文件服务压力降低,当所述第一网络节点的第三请求次数小于所述预设次数时,可以停止部署文件。
实施例一的文件部署方法应用于部署有目标文件的第一网络节点,所述方法包括:判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;将所述目标文件部署到所述第二网络节点。实施例一的文件部署方法实现文件的动态部署,减轻网络区域中节点的文件服务压力,提升文件服务的稳定性。
所述将所述目标文件部署到所述第二网络节点之后,所述方法还可以包括:
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知。
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知,可以避免所述区域中多个网络节点同时再部署该目标文件而导致目标文件数量爆炸。
实施例二
图2为本发明实施例提供的文件部署装置较佳实施例的流程图。所述文件部署装置10应用于第一网络节点中,用于将文件动态地部署到目标区域中的稳定节点簇中。
如图2所示,所述文件部署装置10可以包括:判断单元201、获取单元202、第一确定单元203、第二确定单元204、部署单元205。
判断单元201,用于判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数。
所述单位时间可以根据实际需要设定,例如可以是一分钟、一小时、一天等。例如,判断一小时内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数(例如100次)。
所述目标文件可以是不同类型的文件,例如可以是视频文件、音频文件、文本文件等。
获取单元202,用于若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数。
网络节点所在区域是指网络节点所属的网络区域。在一具体实施例中,所述区域可以包括“华东”、“华北”、“华南”、“东北”、“西北”、“西南”六个区域。例如,所述第一网络节点所在区域为华东区域。
在一实施例中,可以结合所述第一网络节点所属区域和运营商获取所述目标文件的数量和第二请求次数。也就是说,若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取与所述第一网络节点属于相同区域相同运营商的网络节点中所述目标文件的数量和所述单位时间内从所述与所述第一网络节点属于相同区域相同运营商的网络节点请求所述目标文件的第二请求次数。在一具体实施例中,所述运营商可以包括“中国电信”、“中国联通”、“中国移动”、“中国网通”、“中国铁通”五个网络运营商。
在本发明实施例中,每个运营商都有其对应的IP地址段,运营商可将其对应的IP地址段中的IP地址分配给接入该运营商网络的网络节点,使得该网络节点可利用运营商为其分配的IP地址与该运营商网络中的业务服务器进行数据交互。
可以查找各个运营商的IP地址段,将包含网络节点(如第一网络节点)的IP地址的地址段的运营商确定为网络节点所属的运营商。例如:111.0.0.0/10为中国移动的IP地址段,网络节点的IP地址为111.0.0.7,111.0.0.0/10包含111.0.0.7,则网络节点所属的运营商为中国移动。
在本实施例中,每个运营商将其不同的IP地址段分配给不同区域使用。可以查找各个运营商的IP地址段所分配的区域,将包含网络节点(如第一网络节点)的IP地址的IP地址段所分配的区域确定为网络节点所属的区域。例如,网络节点的IP地址为111.0.0.7,该IP地址包含在中国移动的IP地址段111.0.0.0/10中,且该地址段分配给深圳,则可确定该网络节点所属的区域为深圳。
第一确定单元203,用于根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署。
在一具体实施例中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
计算所述第二请求次数与所述预设次数的比值;
计算所述比值与所述区域中所述目标文件的数量的差值;
判断所述差值是否大于或等于预设数量。
若所述差值大于或等于预设数量,则需要在所述区域中对所述目标文件进行再部署。否则,所述差值小于预设数量,则不需要在所述区域中对所述目标文件进行再部署。
例如,所述第二请求次数为M,所述区域中所述目标文件的数量为N,所述预设次数为T,所述预设数量为R,则所述第二请求次数与所述预设次数的比值为M/T,若M/T-N>R,则需要在所述区域中对所述目标文件进行再部署。
在另一具体实施例中,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
根据所述区域中所述目标文件的数量和所述第二请求次数计算所述区域中所述目标文件的热度值R:
Figure BDA0002135610090000151
其中,M表示所述第二请求次数,N表示所述区域中所述目标文件的数量,Q表示所述目标文件的大小;
判断所述区域中所述目标文件的热度值是否大于或等于预设热度值。
若所述区域中所述目标文件的热度值大于或等于预设热度值,则需要在所述区域中对所述目标文件进行再部署。否则,若所述区域中所述目标文件的热度值小于预设热度值,则不需要在所述区域中对所述目标文件进行再部署。
第二确定单元204,用于若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点。
在一具体实施例中,若所述差值大于或等于预设数量,根据所述预设数量确定所述目标文件再部署的数量,按照所述目标文件再部署的数量确定所述第二网络节点。例如,所述目标文件再部署的数量为5,则确定出5个所述区域中未部署有所述目标文件的第二网络节点。
所述目标文件再部署的数量可以等于所述预设数量。所述目标文件再部署的数量也可以是其他数值,例如为所述预设数量的一半。
在一具体实施例中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的稳定性指标;
根据所述稳定性指标从所述各个网络节点中确定所述第二网络节点。
所述根据所述稳定性指标确定所述第二网络节点包括:
根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇;
从所述稳定节点簇中确定所述第二网络节点。
所述稳定性指标可以包括在线时间、上传文件时间、上传文件数量、上传文件大小总和、下载文件时间、下载文件数量、下载文件大小总和等。
在一具体实施例中,所述根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇包括:
(1)采用向量空间模型表示所述各个网络节点,所述各个网络节点中的每个网络节点对应于所述空间模型中的一个节点向量。
具体地,将所述各个网络节点中的每个网络节点作为向量空间中的一个节点向量,将每个稳定性指标作为所述向量空间中的一个正交维度。
例如,将所述各个网络节点中的第i个网络节点Di作为向量空间中的一个节点向量(W1,i,W2,i,…,Wn,i),n个为每个网络节点的稳定性指标的个数,Wj,i为网络节点Di中稳定性指标j的权重,即稳定性指标j的数值。
(2)将每个节点向量作为一个簇。
将每个节点向量作为一个簇就是对所述各个网络节点D={D1,D2,…,Di,…Dm}进行划分,分成
Figure BDA0002135610090000171
Cx称为一个簇。初始状态下,一个簇包括单个节点向量,即包括单个网络节点。
(3)计算每两个簇之间的相似度,选取相似度最大的簇对,并将所述相似度最大的簇对合并为一个新簇,直至所述簇的数量达到预设簇数量。
具体地,所述计算每两个簇之间的相似度包括:
若每个簇中只有一个节点向量(即初始状态下),两个簇之间的相似度为两个簇中的两个节点向量之间的离差平方和的倒数或两个簇中的两个节点向量之间的欧式距离的倒数;
若每个簇中包括两个或两个以上节点向量,两个簇之间的相似度为两个簇之间的离差平方和的倒数或两个簇的质心之间的欧式距离的倒数。
例如,给定5个节点向量A、B、C、D、E,初始状态下,一个节点向量为一个簇(即簇A、B、C、D、E),预设簇数量为3。计算每两个节点向量之间的欧式距离的倒数,将欧式距离的倒数最小的两个簇A、E合并为一个新簇F;分别计算所述新簇F的质心与簇B、C、D的质心之间的欧式距离的倒数,将欧式距离的倒数最小的两个簇B、C合并为一个新簇G,此时共有D、F、G三个簇,达到预设簇数量。
(4)从所述簇中提取所述稳定节点簇。
具体地,所述从所述簇中提取所述稳定节点簇包括:计算每个簇的网络节点的平均在线时间和平均上传文件数量;对每个簇的网络节点的平均在线时间和平均上传文件数量加权求和,得到每个簇的加权分值;将加权分值最高的簇确定为所述稳定节点簇。加权分值越高,表明簇的稳定性越好,加权分值越低,表明簇的稳定性越差。从稳定节点簇中确定用于部署目标文件的第二网络节点可以提高文件服务的稳定性。
例如,某个簇的网络节点的平均在线时间为A,平均上传文件数量为B,平均在线时间A的权重为0.6,平均上传文件数量B的权重为0.4,则该簇的加权分值为0.6*A+0.4*B。
在另一具体实施例中,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的剩余存储量;
根据所述剩余存储量从所述各个网络节点中确定所述第二网络节点。
例如,可以根据所述剩余存储量从所述各个网络节点中确定有足够的存储空间部署所述目标文件的网络节点,从有足够的存储空间部署所述目标文件的网络节点中确定所述第二网络节点。
又如,可以按照剩余存储量从大到小的顺序对所述各个网络节点进行排序,将剩余存储量最大或剩余存储量排在前预设位数的网络节点作为所述第二网络节点。
部署单元205,用于将所述目标文件部署到所述第二网络节点。
可以将文件部署任务发送给所述第二网络节点,使所述第二网络节点从所述第一网络节点拉取所述目标文件进行部署。
在一具体实施例中,若所述目标文件再部署的数量大于预设单批数量(例如10),将所述目标文件分批部署到所述第二网络节点;每次部署完成后,计算单位时间内从所述第一网络节点请求所述目标文件的第三请求次数;若所述第三请求次数大于或等于所述预设次数,则停止部署。
实施例二的文件部署装置10判断单位时间内从第一网络节点请求目标文件的第一请求次数是否大于或等于预设次数;若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;将所述目标文件部署到所述第二网络节点。实施例一的文件部署方法实现文件的动态部署,减轻网络区域中节点的文件服务压力,提升文件服务的稳定性。
在另一实施例中,所述文件部署装置还包括通知单元,用于向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知。
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知,可以避免所述区域中多个网络节点同时再部署该目标文件而导致目标文件数量爆炸。
实施例三
本实施例提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述文件部署方法实施例中的步骤,例如图1所示的S101-S105:
S101,判断单位时间内从第一网络节点请求目标文件的第一请求次数是否大于或等于预设次数;
S102,若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
S103,根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
S104,若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
S105,将所述目标文件部署到所述第二网络节点。
或者,该计算机程序被处理器执行时实现上述文件部署装置实施例中各模块/单元的功能,例如图2中的单元201-205:
判断单元201,用于判断单位时间内从第一网络节点请求目标文件的第一请求次数是否大于或等于预设次数;
获取单元202,用于若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
第一确定单元203,用于根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
第二确定单元204,用于若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
部署单元205,用于将所述目标文件部署到所述第二网络节点。
实施例四
图3为本发明实施例提供的网络节点的示意图。所述网络节点1包括存储器20、处理器30、总线50以及存储在所述存储器20中并可在所述处理器30上运行的计算机程序40,例如文件部署程序。所述处理器30执行所述计算机程序40时实现上述文件部署方法实施例中的步骤,例如图1所示的S101-S105:
S101,判断单位时间内从所述网络节点1(称第一网络节点)请求目标文件的第一请求次数是否大于或等于预设次数;
S102,若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
S103,根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
S104,若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
S105,将所述目标文件部署到所述第二网络节点。
或者,所述处理器30执行所述计算机程序40时实现上述装置实施例中各模块/单元的功能,例如图2中的单元201-205:
判断单元201,用于判断单位时间内从所述网络节点1(称第一网络节点)请求目标文件的第一请求次数是否大于或等于预设次数;
获取单元202,用于若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
第一确定单元203,用于根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
第二确定单元204,用于若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
部署单元205,用于将所述目标文件部署到所述第二网络节点。
示例性的,所述计算机程序40可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器20中,并由所述处理器30执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序40在所述网络节点1中的执行过程。例如,所述计算机程序40可以被分割成图2中的判断单元201、获取单元202、第一确定单元203、第二确定单元204、部署单元205,各单元具体功能参见实施例二。
所称处理器30可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器30也可以是任何常规的处理器等,所述处理器30是所述网络节点1的控制中心,利用各种接口和线路连接整个网络节点1的各个部分。
所述存储器20可用于存储所述计算机程序40和/或模块/单元,所述处理器30通过运行或执行存储在所述存储器20内的计算机程序和/或模块/单元,以及调用存储在存储器20内的数据,实现所述网络节点1的各种功能。所述存储器20可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据网络节点1的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器20可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(SmartMedia Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述总线50以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extended industry standard architecture,简称EISA)总线等。所述总线50可以分为地址总线、数据总线、控制总线等。为便于表示,图3中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
进一步地,网络节点1还可以包括网络接口,网络接口可选的可以包括有线接口和/或无线接口(如WI-FI接口、蓝牙接口等),通常用于在该网络节点1与其他电子设备之间建立通信连接。
可选地,该网络节点1还可以包括用户接口,用户接口可以包括显示器(Display)、输入单元比如键盘(Keyboard),可选的用户接口还可以包括标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-EmittingDiode,有机发光二极管)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在网络节点1中处理的信息以及用于显示可视化的用户界面。
本领域技术人员可以理解,所述示意图3仅仅是网络节点1的示例,并不构成对网络节点1的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。
所述计算机程序产品包括一个或多个计算机指令。在网络节点上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述网络节点可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的文件部署装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个文件部署装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,文件部署装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个计算机可读存储介质中,包括若干指令用以使得一台网络节点(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是,上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。并且本文中的术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、系统、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、系统、物品或者方法所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、系统、物品或者方法中还存在另外的相同要素。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种文件部署方法,应用于部署有目标文件的第一网络节点,其特征在于,所述方法包括:
判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;
若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
将所述目标文件部署到所述第二网络节点;
所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
根据所述区域中所述目标文件的数量、所述第二请求次数和所述目标文件的大小计算所述区域中所述目标文件的热度值R:
Figure FDA0003649217300000011
其中,M表示所述第二请求次数,N表示所述区域中所述目标文件的数量,Q表示所述目标文件的大小;
判断所述区域中所述目标文件的热度值是否大于或等于预设热度值;
若所述区域中所述目标文件的热度值大于或等于预设热度值,则确定需要在所述区域中对所述目标文件进行再部署。
2.如权利要求1所述的方法,其特征在于,所述根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署包括:
计算所述第二请求次数与所述预设次数的比值;
计算所述比值与所述区域中所述目标文件的数量的差值;
判断所述差值是否大于或等于预设数量。
3.如权利要求2所述的方法,其特征在于,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
若所述差值大于或等于预设数量,根据所述预设数量确定所述目标文件再部署的数量;
按照所述目标文件再部署的数量确定所述第二网络节点。
4.如权利要求1所述的方法,其特征在于,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的稳定性指标;
根据所述稳定性指标从所述各个网络节点中确定所述第二网络节点。
5.如权利要求4所述的方法,其特征在于,所述根据所述稳定性指标确定所述第二网络节点包括:
根据所述稳定性指标对所述各个网络节点进行聚类,得到稳定节点簇;
从所述稳定节点簇中确定所述第二网络节点。
6.如权利要求1所述的方法,其特征在于,所述确定所述区域中未部署有所述目标文件的第二网络节点包括:
获取所述区域中未部署有所述目标文件的各个网络节点的剩余存储量;
根据所述剩余存储量从所述各个网络节点中确定所述第二网络节点。
7.如权利要求1-6中任一项所述的方法,其特征在于,所述将所述目标文件部署到所述第二网络节点之后,所述方法还包括:
向所述区域中所述第一网络节点以外的其他网络节点发送完成对所述目标文件进行再部署的通知。
8.一种网络节点,其特征在于,所述网络节点包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1-7中任一项所述文件部署方法。
9.一种文件部署装置,应用于部署有目标文件的第一网络节点,其特征在于,所述装置包括:
判断单元,用于判断单位时间内从所述第一网络节点请求所述目标文件的第一请求次数是否大于或等于预设次数;
获取单元,用于若单位时间内从所述第一网络节点请求所述目标文件的第一请求次数大于或等于预设次数,则获取所述第一网络节点所在区域中所述目标文件的数量和所述单位时间内从所述区域请求所述目标文件的第二请求次数;
第一确定单元,用于根据所述区域中所述目标文件的数量和所述第二请求次数确定是否需要在所述区域中对所述目标文件进行再部署;
第二确定单元,用于若需要在所述区域中对所述目标文件进行再部署,则确定所述区域中未部署有所述目标文件的第二网络节点;
部署单元,用于将所述目标文件部署到所述第二网络节点;
所述第一确定单元具体用于:
根据所述区域中所述目标文件的数量、所述第二请求次数和所述目标文件的大小计算所述区域中所述目标文件的热度值R:
Figure FDA0003649217300000031
其中,M表示所述第二请求次数,N表示所述区域中所述目标文件的数量,Q表示所述目标文件的大小;
判断所述区域中所述目标文件的热度值是否大于或等于预设热度值;
若所述区域中所述目标文件的热度值大于或等于预设热度值,则确定需要在所述区域中对所述目标文件进行再部署。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述文件部署方法。
CN201910652179.1A 2019-07-18 2019-07-18 文件部署方法及装置、网络节点及存储介质 Active CN110365783B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910652179.1A CN110365783B (zh) 2019-07-18 2019-07-18 文件部署方法及装置、网络节点及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910652179.1A CN110365783B (zh) 2019-07-18 2019-07-18 文件部署方法及装置、网络节点及存储介质

Publications (2)

Publication Number Publication Date
CN110365783A CN110365783A (zh) 2019-10-22
CN110365783B true CN110365783B (zh) 2022-10-21

Family

ID=68221088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910652179.1A Active CN110365783B (zh) 2019-07-18 2019-07-18 文件部署方法及装置、网络节点及存储介质

Country Status (1)

Country Link
CN (1) CN110365783B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111770180B (zh) * 2020-06-29 2023-06-30 百度在线网络技术(北京)有限公司 部署方法、装置、设备以及存储介质
CN112468597B (zh) * 2020-12-11 2021-05-28 深圳市知小兵科技有限公司 基于人工智能的数据中心资源分配方法及装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109379448A (zh) * 2018-12-27 2019-02-22 深圳市网心科技有限公司 一种文件分布式部署方法、装置、电子设备及存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101520805B (zh) * 2009-03-25 2011-05-11 中兴通讯股份有限公司 一种分布式文件系统及其文件处理方法
CN103327116B (zh) * 2013-07-05 2016-06-01 山东大学 一种网络文件的动态副本存储方法
CN103763363B (zh) * 2014-01-14 2017-01-11 南京邮电大学 一种云存储系统及基于该系统的文件副本部署方法
US9715402B2 (en) * 2014-09-30 2017-07-25 Amazon Technologies, Inc. Dynamic code deployment and versioning
CN104317669B (zh) * 2014-10-17 2017-03-15 南京邮电大学 一种云端异构存储系统及其数据副本管理方法
US20180336061A1 (en) * 2017-05-16 2018-11-22 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Storing file portions in data storage space available to service processors across a plurality of endpoint devices
CN108833996B (zh) * 2018-07-03 2020-07-10 湖北大学 分布式dash系统中服务节点选择、更新和码率自适应方法
CN109634915A (zh) * 2018-11-28 2019-04-16 深圳市网心科技有限公司 文件部署方法、云服务器、系统及存储介质
CN109933289B (zh) * 2019-03-15 2022-06-10 深圳市网心科技有限公司 一种存储副本部署方法、系统及电子设备和存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109379448A (zh) * 2018-12-27 2019-02-22 深圳市网心科技有限公司 一种文件分布式部署方法、装置、电子设备及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"基于Alluxio的数据高可用部署策略的研究与优化";徐新钧;《中国硕士学位论文全文数据库信息科技辑》;20180601;全文 *
"基于云计算平台的虚拟机部署及迁移策略研究";胡荣辉;《中国硕士学位论文全文数据库信息科技辑》;20171026;全文 *

Also Published As

Publication number Publication date
CN110365783A (zh) 2019-10-22

Similar Documents

Publication Publication Date Title
CN110096336B (zh) 数据监控方法、装置、设备和介质
CN109729106B (zh) 处理计算任务的方法、系统和计算机程序产品
US10235047B2 (en) Memory management method, apparatus, and system
CN111163130B (zh) 一种网络服务系统及其数据传输方法
CN110677493B (zh) 服务状态确定方法及装置、计算机装置及存储介质
CN111585887B (zh) 基于多个网络的通信方法、装置、电子设备及存储介质
CN110365783B (zh) 文件部署方法及装置、网络节点及存储介质
CN107105013B (zh) 文件的处理方法、服务器、终端和系统
CN112417036A (zh) 分布式存储系统中处理对象的元数据的方法及装置
CN113361913A (zh) 一种通信业务编排方法、装置、计算机设备及存储介质
US20170104683A1 (en) Dynamically segmenting traffic for a/b testing in a distributed computing environment
CN110245014B (zh) 数据处理方法和装置
CN108153494B (zh) 一种io请求处理方法及装置
CN110636149B (zh) 远程访问方法、装置、路由器及存储介质
CN109165135B (zh) 一种数据管理方法、计算机可读存储介质及终端设备
CN107045452B (zh) 虚拟机调度方法和装置
CN110008029B (zh) ceph元数据集群目录分配方法、系统、装置及可读存储介质
CN111343240A (zh) 一种服务请求的处理方法、装置、电子设备及存储介质
US11838207B2 (en) Systems for session-based routing
CN110535977B (zh) 文件分发方法及装置、计算机装置及存储介质
CN114564210A (zh) 一种副本部署方法、装置、系统、电子设备及存储介质
JP2019041241A (ja) 振り分けシステム
CN108683608B (zh) 分配流量的方法和装置
CN110703997A (zh) 云存储系统及数据存储方法、装置、设备、计算机介质
CN110519357B (zh) 文件传输方法及系统、计算机装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant