CN114095573B - 基于边缘缓存的cdn-p2p网络的内容副本放置方法 - Google Patents

基于边缘缓存的cdn-p2p网络的内容副本放置方法 Download PDF

Info

Publication number
CN114095573B
CN114095573B CN202111215323.9A CN202111215323A CN114095573B CN 114095573 B CN114095573 B CN 114095573B CN 202111215323 A CN202111215323 A CN 202111215323A CN 114095573 B CN114095573 B CN 114095573B
Authority
CN
China
Prior art keywords
content
copy
node
domain
response time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111215323.9A
Other languages
English (en)
Other versions
CN114095573A (zh
Inventor
孙军涛
杜剑波
刘文欢
姜静
郑凌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shaanxi Wukong Cloud Network Technology Co.,Ltd.
Original Assignee
Shaanxi Wukongyun Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shaanxi Wukongyun Information Technology Co ltd filed Critical Shaanxi Wukongyun Information Technology Co ltd
Priority to CN202111215323.9A priority Critical patent/CN114095573B/zh
Publication of CN114095573A publication Critical patent/CN114095573A/zh
Application granted granted Critical
Publication of CN114095573B publication Critical patent/CN114095573B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1008Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1001Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004Server selection for load balancing
    • H04L67/1023Server selection for load balancing based on a hash applied to IP addresses or costs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种基于边缘缓存的CDN‑P2P网络的内容副本放置方法,解决了现有网络中主干网络的拥堵,资源的响应能力低的技术问题。本副本放置方法包括以下步骤:S1、确定边缘缓存节点中每个域的管理节点;S2、当用户请求内容时,此用户的边缘节点中没有内容时,计算内容的被访问频率,判断内容是否为热点资源;S3、计算内容的单位平均响应时间,判断内容是否需要创建内容副本;S4、计算内容在域内的单位平均响应时间,判断在域内是否需要创建内容的副本;S5、计算每个副本缺乏域需要创建内容副本的数量;S6、在副本缺乏域内确定个最适合放置内容副本的节点;S7、在副本缺乏域创建放置内容。

Description

基于边缘缓存的CDN-P2P网络的内容副本放置方法
技术领域
本发明属于无线通信技术中内容分发网络领域,尤其涉及一种基于边缘缓存的CDN-P2P网络的内容副本放置方法。
背景技术
随着网络及其用户的爆炸性增长,人们越来越依靠网络中的多媒体应用来获取相关信息。多媒体流式系统目前已经被认为是网络中的“杀手级应用”,人们可以通过互联网络随时随地获取到多媒体内容。向大规模的(通常是上百万级别的)用户稳定而又持续地传输流式内容,无论是在学术界还是工业界,已成为研究的热点话题。在上述问题下,内容分发网络(CDN,Content Delivery Network)、对等网络(P2P,Peer-to-Peer)受到了广泛关注。
内容分发网络是在现有互联网基础之上的一层智能虚拟网络。一方面,它把源服务器上的内容,通过一定的策略,将内容传送到离用户较近的代理服务器上。另一方面,它根据各个代理服务器的负载情况、内容请求用户距代理服务器的位置和网络流量等信息,选定一个合适的代理服务器为用户提供服务。对等网络中,各个设备没有主从之分,网络上任意节点的计算机既可以作为网络服务器,为其他计算机提供资源;也可以作为一般客户端,从其他计算机获取资源。CDN和P2P网络各自存在局限性,但两者能在部署成本和可扩展性等方面能很好地互补,因此,近年来展开了对混合CDN-P2P网络中的内容副本放置、请求重定向、内容更新和计费等技术研究。其中,合理的放置内容副本可以减小骨干网的流量、提高边缘服务器的命中率,已经受到了广泛关注。但是现有的混合CDN-P2P网络在内容请求、分发和放置过程中均在服务器上进行,内容的命中率低,相应时间长,容易造成网络的堵塞,服务质量的下降。因此,合理的放置内容副本可以减小骨干网的流量、提高边缘服务器的命中率和提高内容的响应时间,已经受到了广泛关注。
发明内容
为了克服现有网络中主干网络的拥堵,资源的响应能力低的技术问题,本发明提出一种基于边缘节点的CDN-P2P网络的内容副本放置方法,据内容的域平均响应时间与全局的内容响应时间以及节点的代价因子的大小,来决定在哪个域创建内容副本,最大程度的减少了主干网络的拥堵,充分提高了资源的响应能力。
为达到上述目的,本发明采用的技术方案为:
一种基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特殊之处在于,包括以下步骤:
步骤S1、将边缘缓存节点划分为多个不同的域,确定每个域的管理节点;
所述边缘缓存节点是一种放置在用户的生活场所中,具有缓存功能的CDN节点;
所述管理节点是根据节点的存储空间和节点的带宽决定,用于收集内容副本的全部信息并上传至后台系统,并执行内容副本放置;
步骤S2、当用户请求内容Ci时,此用户的边缘缓存节点中没有内容Ci时,计算内容Ci的被访问频率CFi,判断内容Ci是否为热点资源;
若内容Ci的被访问频率CFi大于频率阈值αCF,则内容Ci为热点资源;
步骤S3、计算内容Ci的单位平均响应时间SACTi,判断内容Ci是否需要创建内容副本;
若内容Ci的单位平均响应时间SACTi大于单位平均响应时间阈值αSACT,则内容Ci需要创建内容副本;
步骤S4、计算内容Ci在域R内的单位平均响应时间SACTi,R,判断在域R内是否需要创建内容Ci的副本;
若SACTi,R大于SACTi,则需要在域R内创建内容Ci副本,则该域为副本缺乏域用Rd表示,副本缺乏域Rd∈R;
步骤S5、计算每个副本缺乏域Rd需要创建内容Ci副本的数量Δamount;
步骤S6、在副本缺乏域Rd内确定Δamount个最适合放置内容Ci副本的节点;
步骤S7、在副本缺乏域Rd的管理节点创建放置内容Ci副本;
步骤S8、更新边缘缓存节点中域的管理节点和目录服务器中的内容列表;
步骤S9、更新网络系统中存储的边缘节点剩余空间信息。
进一步地,所述步骤S1具体为:
步骤S1.1、选出域中剩余存储空间S和可用平均带宽AB符合下列条件的边缘缓存节点;
1)管理节点的剩余存储空间S大于剩余存储空间阈值S0
2)管理节点的可用平均带宽AB大于可用平均带宽阈值B0
步骤S1.2、计算边缘缓存节点的剩余能力SY,选出剩余能力最大的作为管理节点
SY=(S-S0)×(AB-B0)。
进一步地,步骤S2中:
所述内容Ci的被访问频率CFi
其中,Ti,j为单位时间内访问内容Ci的副本的次数,j为内容Ci的副本的索引;
n为内容Ci副本的个数。
进一步地,所述步骤S3具体为:
步骤S3.1、计算内容Ci的平均响应时间ACTi
其中,Ti为在单位时间内第i个内容被访问的次数;
CTk为单位时间内第k次访问内容Ci副本的响应时间;
步骤S3.2、计算内容Ci的单位平均响应时间SACTi
其中,fsi为内容Ci的尺寸大小;
步骤S3.3、判断内容Ci是否需要创建内容副本;
若内容Ci的单位平均响应时间SACTi大于单位平均响应时间阈值αSACT,则内容Ci需要创建内容副本;
反之,内容Ci不需要创建内容副本。
进一步地,所述步骤S4中:
所述内容Ci在域R内的单位平均响应时间SACTi,R
其中,Ti,R为单位时间内在域R内所有的节点访问内容Ci的次数。
进一步地,所述步骤S5中:
所述每个副本缺乏域Rd需要创建内容Ci副本的数量Δamount,
其中,amount为副本缺乏域Rd内当前拥有的内容Ci副本的数量,αACT为内容平均响应时间阈值。
进一步地,所述步骤S6具体为:
步骤S6.1、计算节点的服务质量SQ;
所述节点的服务质量是单位时间内节点完成服务的数量与节点被请求的数量之比;
步骤S6.2、计算放置内容Ci副本的节点代价因子Costi
所述节点代价因子Costi是衡量节点适宜放置内容副本的程度;
所述节点代价因子Costi通过下式计算:
其中,St为节点的存储空间的大小;
步骤S6.3、在副本缺乏域Rd内,选取节点代价因子Costi值大的Δamount个节点作为最适合放置内容Ci副本的节点。
与现有技术相比,本发明具有的有益技术效果如下:
1、本发明通过考虑内容的请求次数以及响应时间,来决定是否创建内容副本。然后根据内容的域平均响应时间与全局的内容响应时间以及节点的代价因子的大小,来决定在哪个域创建内容副本,充分提高了内容的命中率,降低了内容的响应时间。
2、本发明通过综合考虑每个节点的平均带宽、节点的剩余存储空间,以及节点的服务质量和内容的大小来决定将内容副本放置在那个节点,从而减小了网络的堵塞,提高了网络的服务质量。
3、本发明提出的基于边缘缓存节点的CDN-P2P网络中,边缘缓存节点之间是以P2P的形式连接的,各个节点之间可以共享资源;边缘缓存节点所辖用户端可直接从边缘缓存节点获取资源,也可从CDN服务器获取,最大程度的减少了主干网络的拥堵,充分提高了资源的响应能力。
附图说明
图1是本发明基于边缘缓存节点的CDN-P2P网络的内容副本放置方法流程图。
图2是本发明基于边缘缓存节点的CDN-P2P网络中后台系统的结构示意图。
图3是本发明可应用的一个场景图。
图4是本发明实施例的计算副本缺乏域流程图。
图5是本发明实施例的副本位置放置流程图。
附图说明:
图3中,1-源服务器,2-边缘CDN服务器,3-后台系统,4-管理节点,5-区域CDN缓存节点(域),6-边缘缓存节点。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面结合附图和具体实施方式对本发明提出的一种基于边缘节点的CDN-P2P网络及其缓存方法作进一步详细说明。本领域技术人员应当理解的是,这些实施方式仅仅用来解释本发明的技术原理,目的并不是用来限制本发明的保护范围。
本发明基于的边缘缓存节点的CDN-P2P网络包括前台系统和后台系统;所述的前台系统由家庭CDN边缘缓存节点(家庭内容服务器)简称边缘缓存节点组成,它一方面用于用户信息的存储,一方面作为CDN边缘缓存设备存储流媒体资源,用户则就近从边缘服务器获取服务,这样就提高了用户获取服务的速度。
所述边缘缓存节点是一种部署在用户生活场所中的专用家庭盒子,与传统CDN相似,具有一定的缓存功能,可提前将一些文件存储在其存储空间中。若边缘缓存节点所辖用户请求的文件已被边缘缓存节点缓存,则可以直接从边缘缓存节点获取,因此可以显著降低网络开销和网络时延。
边缘缓存节点之间以逻辑上P2P方式通信用户需要的内容可以从边缘缓存节点获取,如果有的片段在边缘缓存节点中没有,用户也可以从边缘CDN甚至源服务器获取。
所述后台系统包括内容路由模块、目录服务器、内容管理模块和运营管理模块。
内容路由模块用于把访问需求调度到最优的边缘缓存节点;
目录服务器模块主要维护系统中可服务的视频信息列表,即系统内文件分片分布情况,包括资源名称、贡献资源的用户地址等,比如当前系统中有哪些视频文件,当前在线边缘节点上拥有哪些视频文件分片可向其他节点提供。
内容管理模块一方面,每隔一段时间或者系统接收到一定次数的内容请求指导在家庭CDN边缘缓存节点执行内容副本放置算法;另一方面,根据P2P用户的请求,更新内容服务器中内容列表。
运营管理模块包括节点管理功能和网络管理功能等;节点管理功能:通过接收边缘节点定时发送的心跳包获取并管理自治域内的对等节点的基本信息,包括该边缘节点的网络地址,是否在线,节点内存占用情况,自身上传下载带宽、插件更新、版本更新等信息。这些信息可以用于对系统内节点分布情况进行管理;网络管理功能:如CDN系统的网络拓扑管理、故障管理、网络设备管理和链路监控,为管理员提供集中化的管理操作界面。
如图1所示,本发明提供的基于边缘缓存的CDN-P2P网络中的内容副本放置方法包括以下步骤:
步骤S1:首先确定每个域的管理节点,管理节点是由预先根据节点的存储空间以及节点的带宽来决定,管理节点收集内容副本的全部信息并上传至后台系统。
所述管理节点是内容管理模块根据运营管理模块提供的数据确定;
步骤S2:当用户请求内容Ci时,此用户的边缘节点中没有内容Ci时,计算内容Ci,Ci∈C的被访问频率CFi,如果CFi大于先前设定的一个阈值αCF,那么我们就可以判定内容Ci是一个热点资源。
所述内容Ci,Ci∈C;其中,C为所有需要创建副本的内容合集;
所述内容副本的全部信息包括副本的位置、副本的访问次数、访问频率和副本的响应时间;
所述内容Ci的被访问频率CFi是在后台系统的内容管理模块来计算的;
所述内容Ci的响应时间包括带宽、节点性能、内容的大小。
步骤S3:如果内容Ci是热点资源,计算该资源的内容平均响应时间ACTi并判断该热点资源的平均内容响应时间是否大于之前设定的阈值αACT。如果是,接下来计算该内容的单位平均响应时间SACTi,如果大于之前设定的阈值αSACT,那么该内容Ci就需要创建内容副本。
步骤S4:计算需要创建副本的内容Ci在域R内的单位平均响应时间SACTi,R,如果在域R内的内容Ci的单位平均响应时间大于该内容的单位平均响应时间,那么这就说明域R内需要创建内容Ci,即此域为副本缺乏域Rd
步骤S5:依次确定每个副本缺乏域Rd内需要创建多少个内容副本。根据域Rd内的单位平均响应时间和单位平均响应时间的阈值还有该域Rd内已经拥有的内容副本的数量来计算需要创建的内容副本的数量。
步骤S6:对于每一个副本缺乏域Rd∈R,需要在域Rd内确定Δamount个最适合放置内容副本的节点,首先选择域Rd内没有内容副本的节点作为待选节点,在域管理节点中根据代价因子的计算公式计算每个节点上的代价因子,然后选择其中最大的并且可以容纳的下Δamount个内容副本的节点作为内容副本的放置位置。
步骤S7:执行内容放置。
步骤S8:更新域管理节点、目录服务器中的内容列表。
步骤S9:更新运营管理模块中的边缘节点剩余空间信息。
如图2所示,本发明实施例提供的后台系统包括:
内容路由模块:主要完成调度控制,把访问需求调度到最优的边缘节点。
目录服务器:主要维护系统中可服务的视频信息列表,即系统内文件分片分布情况,包括资源名称、贡献资源的用户地址等,比如当前系统中有哪些视频文件,当前在线边缘节点上拥有哪些视频文件分片可向其他节点提供。
内容管理模块:一方面,边缘节点每隔一段时间或者系统接收到一定次数的内容请求,边缘节点执行内容副本放置算法;另一方面,边缘服务器根据P2P用户的请求,更新内容管理列表。
运营管理模块:运营管理模块包括节点管理功能和网络管理功能等。节点管理功能:通过接收边缘节点定时发送的心跳包获取并管理自治域内的对等节点的基本信息,包括该边缘节点的网络地址,是否在线,节点内存占用情况,自身上传下载带宽、插件更新、版本更新等信息,这些信息可以用于对系统内节点分布情况进行管理;网络管理功能:如CDN系统的网络拓扑管理、故障管理、网络设备管理和链路监控,为管理员提供集中化的管理操作界面。
图3是本发明的方法可应用的一个场景图。
系统中包括一个源服务器和一个边缘服务器,在边缘服务器下面连接着一定数量的边缘节点,这些边缘节点构成了一个由不同域组成的P2P网络。(如果一个P2P网络是一个小区的话,那么我们就可以让每一栋楼是一个P2P网络的域)每个边缘节点都可以连接不同数量的用户。
当某一个用户请求内容Ci时如果该内容的平均响应时间大于事先设定的阈值那该内容就会被认为是需要创建副本的内容,然后就计算P2P网络中每一个域的该内容的平均响应时间和全局的平均响应时间的相对大小,如果大于全局响应时间那么该域就会被称为副本缺乏域。然后内容副本放置算法就会给该域放置内容资源Ci的副本,来的提高内容响应时间。
由于本发明的边缘节点只涉及存储功能,所以就会大大提高P2P网络的存储能力,同时边缘节点的移动性相比用户端就会弱很多,在线时间相比用户端也大大提升。所以相比用户端组成的P2P网络,边缘节点组成的P2P网络的性能明显会更好。
本发明提供的基于边缘缓存的CDN-P2P网络中的内容副本放置方法包括以下具体步骤:
步骤S1:首先确定每个域的管理节点,管理节点是由预先根据节点的存储空间以及节点的带宽来决定,管理节点收集内容副本的全部信息并上传至后台系统。
每个域内的管理节点是内容管理模块根据运营管理模块提供的数据来确定。管理节点主要负责收集该域内所有副本的信息,比如:副本的位置,副本的访问次数和频率以及内容副本的响应时间等,同时辅助内容管理模块计算部分内容。
根据节点的剩余存储空间和节点的带宽来选择域管理节点,首先节点的剩余存储空间和可用带宽必须大于事先给定的阈值S0和B0,然后计算剩余能力SY,选出域R中剩余能力最大的作为管理节点。计算公式如下:
SY=(S-S0)×(AB-B0)
其中AB表示每个节点的可用平均带宽,可以用节点上的等候队列的长短来和计算,等待的队列越长就说明可以的平均带宽就会越少,S表示节点的剩余存储空间的大小。
图4是本发明提供的计算副本缺乏域流程图;
步骤S2:计算内容Ci,Ci∈C的被访问频率CFi,如果CFi大于先前设定的一个阈值αCF,那么我们就可以判定内容Ci是一个热点资源。
内容Ci的访问频率CFi是在后台系统的内容管理模块来计算的,这里用单位时间内内容副本被访问的次数与已经具有的副本数量之比来计算内容副本的访问频率,所以内容Ci的访问频率CFi的计算公式为:
这里用n表示内容副本的个数,Ti,j表示单位时间内访问内容Ci的副本的次数。
如果内容Ci的访问频率CFi大于先前设定的一个阈值αCF,那么我们就可以判定Ci内容是一个热点资源,热点资源可能需要创建内容副本。
步骤S3:如果内容Ci是热点资源,接下来需要计算该资源的内容平均响应时间ACTi并判断该热点资源的平均内容响应时间是否大于之前设定的阈值αACT。如果是,接下来计算该内容的单位平均响应时间SACTi,如果大于之前设定的阈值αSACT,那么该内容Ci就需要创建内容副本。
步骤S3的计算全部都在后台系统的内容管理模块来完成,首先计算内容Ci的平均响应时间。用单位时间内,访问Ci所有副本的资源响应时间CT之和与访问次数之比,称为内容平均响应时间ACTi,所以内容的平均响应时间ACTi的计算公式如下式:
其中Ti表示在单位时间内第i个内容被访问的次数。CTk表示内容Ci每次被访问的响应时间。
然后计算内容的单位平均响应时间SACTi。如果单位平均响应时间大于之前设定的阈值αSACT那么我们就判定该资源Ci是副本比较缺乏的需要创建内容副本。用集合C表示所有需要创建副本的内容。内容的单位平均响应时间SACTi可以用下面的公式表示:
其中fsi表示内容Ci的尺寸大小,ACTi表示内容平均响应时间。
对于需要创建副本的内容首先必须满足该资源是热点资源,因为热点资源创建副本可以最大程度的减少内容资源的响应时间,提高系统的整体性能。所以对于热点资源我们首先要判断他的平均响应和系统设定的阈值的相对大小才能确定是否需要创建副本。内容的响应时间取决于很多因素,包括带宽、节点性能等,也包括内容的大小.如果内容尺寸比较大,平均响应时间有可能也大,其实这并不能说明该内容副本数量稀缺,所以,还需要引入单位平均响应时间来判断内容是否需要创建副本。
步骤S4:首先计算需要创建副本的内容Ci在该域内的单位平均响应时间SACTi,R,如果在域R内的内容Ci的单位平均响应时间大于该内容的单位平均响应时间,那么这就说明域R内需要创建内容Ci(即域R为副本缺乏域,用Rd表示)。
步骤S4的计算全部在后台系统的内容管理模块完成,同时用集合R表示所有的副本缺乏域。
对于需要创建内容副本的内容Ci,首先要计算该内容Ci在该域内的单位平均响应时间SACTi,R,然后将全局的单位平均响应时间SACTi与域R内的单位平均响应时间SACTi,R进行比较,如果SACTi<SACTi,R就说明域R内需要创建内容的副本。域R内的单位平均响应时间的计算公式为:
式中Ti,R表示单位时间内,在域R内所有的节点访问内容Ci的次数。
如果SACTi<SACTi,R,就可以称域R为内容副本缺乏域,用Rd表示。域内节点请求该资源的平均响应时间(即域平均响应时间)能够综合反映该域对资源Ci的缺乏程度和访问热度。如果某个域平均响应时间大于内容Ci的平均响应时间,说明相对系统内其他区域的节点,域R内该资源的副本数量过少,需要在域R内增加内容Ci的副本。在平均响应时间大的域内创建副本,会最大程度减少内容Ci在全局范围内的平均响应时间。
图5是本发明实施例提供的副本位置放置流程图。
步骤S5:依次确定每个副本缺乏域内需要创建多少个内容副本。然后,根据域Rd内的单位平均响应时间和单位平均响应时间的阈值还有该域内已经拥有的内容副本的数量来计算需要创建的内容副本的数量。
步骤S5的计算全部由域管理节点来完成的。
在步骤S4中已经确定了副本缺乏域,在步骤S5中确定每一个副本缺乏域中需要创建多少副本,也就是确定需要创建的副本的数量。根据副本缺乏域Rd内的节点请求内容Ci的实际响应时间以及期望能够达到的响应时间来确定在域Rd内需要创建多少副本。假定该域内容副本amount个,需要新创建的内容副本Δamount个。由于平均响应时间和内容副本的个数成反比,所以平均响应时间与副本个数的比就等于平均响应时间和阈值只差与需要创建的副本的数量之比,可以用下式计算需要新建的内容副本的数量。
式中amount表示内容副本的数量,Δamount表示需要创建的内容副本的数量。αACT表示平均响应时间的阈值。
由于创建内容副本的目的是降低内容的平均响应时间ACTi,使ACTi能够接近事先给定的期望值αACT。如果期望的平均响应时间αACT与实际ACTi相差比较大,就需要创建更多的内容副本数量以降低ACTi
步骤S6:对于每一个副本缺乏域Rd∈R,需要在域Rd内确定Δamount个最适合放置内容副本的节点。首先选择域Rd内没有内容副本的节点作为待选节点,在域管理节点中根据代价因子的计算公式计算每个节点上的代价因子,然后选择其中最大的并且可以容纳的下Δamount个内容副本的节点作为内容副本的放置位置。
步骤S6的计算在域管理节点来完成的,节点位置的路由由内容路由模块给选路的,在步骤五确定了每个副本缺乏域应该创建内容副本的数量之后,接下来步骤六就是为新创建的副本找到合适的位置。
首先需要明确节点的服务质量SQ,也就是单位时间内节点完成服务的数量与节点被请求的数量之比。这样节点服务质量就可以衡量一个节点的综合性能。
代价因子Costi是衡量节点适宜放置内容副本的程度。可以用下式来计算:
其中AB表示每个节点的可用平均带宽,可以用节点上的等候队列的长短来和计算。等待的队列越长就说明可以的平均带宽就会越少。St表示节点的存储空间的大小。fsi表示内容Ci的大小。代价因子与节点服务质量、节点可用存储空间、节点平均可用带宽以及节点上的平均等候队列长度成正比,与内容的尺寸成反比.代价因子的大小代表着该节点适宜放置该副本的程度,代价因子的值越大,表明该节点越适合放置这个副本。
步骤S7:执行内容放置。
步骤S8:更新域管理节点、目录服务器中的内容列表。
更新域管理节点、目录服务器中的内容列表。是在后台系统的内容管理模块和目录服务器模块完成的。
步骤S9:更新运营管理模块中的边缘节点剩余空间信息。
更新运营管理模块中的边缘节点剩余空间信息是在后台系统的运营管理模块完成的。

Claims (5)

1.一种基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特征在于,包括以下步骤:
步骤S1、将边缘缓存节点划分为多个不同的域,确定每个域的管理节点;
所述边缘缓存节点是一种放置在用户的生活场所中,具有缓存功能的CDN节点;
所述管理节点是根据节点的存储空间和节点的带宽决定,用于收集内容副本的全部信息并上传至后台系统,并执行内容副本放置;
步骤S2、当用户请求内容Ci时,此用户的边缘缓存节点中没有内容Ci时,计算内容Ci的被访问频率CFi,判断内容Ci是否为热点资源;
若内容Ci的被访问频率CFi大于频率阈值αCF,则内容Ci为热点资源;
步骤S3、判断内容Ci是否需要创建内容副本,具体为:
步骤S3.1、计算内容Ci的平均响应时间ACTi
其中,Ti为在单位时间内第i个内容被访问的次数;
CTk为单位时间内第k次访问内容Ci副本的响应时间;
步骤S3.2、计算内容Ci的单位平均响应时间SACTi
其中,fsi为内容Ci的尺寸大小;
步骤S3.3、判断内容Ci是否需要创建内容副本:
若内容Ci的单位平均响应时间SACTi大于单位平均响应时间阈值αSACT,则内容Ci需要创建内容副本;
反之,内容Ci不需要创建内容副本;
步骤S4、判断在域R内是否需要创建内容Ci的副本:
所述内容Ci在域R内的单位平均响应时间SACTi,R
其中,Ti,R为单位时间内在域R内所有的节点访问内容Ci的次数;
若SACTi,R大于SACTi,则需要在域R内创建内容Ci副本,则该域为副本缺乏域用Rd表示,副本缺乏域Rd∈R;
步骤S5、计算每个副本缺乏域Rd需要创建内容Ci副本的数量Δamount;
步骤S6、在副本缺乏域Rd内确定Δamount个最适合放置内容Ci副本的节点;
步骤S7、在副本缺乏域Rd的管理节点创建放置内容Ci副本;
步骤S8、更新边缘缓存节点中域的管理节点和目录服务器中的内容列表;
步骤S9、更新网络系统中存储的边缘节点剩余空间信息。
2.根据权利要求1所述的基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特征在于,所述步骤S1具体为:
步骤S1.1、选出域中剩余存储空间S和可用平均带宽AB符合下列条件的边缘缓存节点;
1)管理节点的剩余存储空间S大于剩余存储空间阈值S0
2)管理节点的可用平均带宽AB大于可用平均带宽阈值B0
步骤S1.2、计算边缘缓存节点的剩余能力SY,选出剩余能力最大的作为管理节点
SY=(S-S0)×(AB-B0)。
3.根据权利要求1所述的基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特征在于,步骤S2中:
所述内容Ci的被访问频率CFi
其中,Ti,j为单位时间内访问内容Ci的副本的次数,j为内容Ci的副本的索引;n为内容Ci副本的个数。
4.根据权利要求1所述的基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特征在于,所述步骤S5中:
所述每个副本缺乏域Rd需要创建内容Ci副本的数量Δamount,
其中,amount为副本缺乏域Rd内当前拥有的内容Ci副本的数量,αACT为内容平均响应时间阈值。
5.根据权利要求2所述的基于边缘缓存的CDN-P2P网络的内容副本放置方法,其特征在于,所述步骤S6具体为:
步骤S6.1、计算节点的服务质量SQ;
所述节点的服务质量是单位时间内节点完成服务的数量与节点被请求的数量之比;
步骤S6.2、计算放置内容Ci副本的节点代价因子Costi
所述节点代价因子Costi是衡量节点适宜放置内容副本的程度;
所述节点代价因子Costi通过下式计算:
其中,St为节点的存储空间的大小;
步骤S6.3、在副本缺乏域Rd内,选取节点代价因子Costi值大的Δamount个节点作为最适合放置内容Ci副本的节点。
CN202111215323.9A 2021-10-19 2021-10-19 基于边缘缓存的cdn-p2p网络的内容副本放置方法 Active CN114095573B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111215323.9A CN114095573B (zh) 2021-10-19 2021-10-19 基于边缘缓存的cdn-p2p网络的内容副本放置方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111215323.9A CN114095573B (zh) 2021-10-19 2021-10-19 基于边缘缓存的cdn-p2p网络的内容副本放置方法

Publications (2)

Publication Number Publication Date
CN114095573A CN114095573A (zh) 2022-02-25
CN114095573B true CN114095573B (zh) 2023-11-28

Family

ID=80297160

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111215323.9A Active CN114095573B (zh) 2021-10-19 2021-10-19 基于边缘缓存的cdn-p2p网络的内容副本放置方法

Country Status (1)

Country Link
CN (1) CN114095573B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116405563B (zh) * 2023-06-08 2023-08-18 湖南快乐阳光互动娱乐传媒有限公司 一种基于点对点内容分发网络的资源获取方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101753625A (zh) * 2009-12-28 2010-06-23 北京理工大学 对等网络环境下副本服务的部署及副本创建方法
CN101751309A (zh) * 2009-12-28 2010-06-23 北京理工大学 数据网格中一种优化的副本分布方法
CN102984188A (zh) * 2011-09-06 2013-03-20 中国科学院声学研究所 一种cdn网络中内容副本放置方法及系统
CN103780693A (zh) * 2014-01-21 2014-05-07 北京科技大学 一种利用用户视图协作感知的最佳副本服务器选择方法和系统
CN113453038A (zh) * 2021-06-25 2021-09-28 桂林电子科技大学 一种cdn-p2p混合架构下效用最优协同缓存管理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101753625A (zh) * 2009-12-28 2010-06-23 北京理工大学 对等网络环境下副本服务的部署及副本创建方法
CN101751309A (zh) * 2009-12-28 2010-06-23 北京理工大学 数据网格中一种优化的副本分布方法
CN102984188A (zh) * 2011-09-06 2013-03-20 中国科学院声学研究所 一种cdn网络中内容副本放置方法及系统
CN103780693A (zh) * 2014-01-21 2014-05-07 北京科技大学 一种利用用户视图协作感知的最佳副本服务器选择方法和系统
CN113453038A (zh) * 2021-06-25 2021-09-28 桂林电子科技大学 一种cdn-p2p混合架构下效用最优协同缓存管理方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
一种海云协同媒体服务系统副本放置算法;包沙如拉;孙鹏;韩锐;郭志川;;计算机与现代化(第09期);全文 *
基于内容流行度差异性的CDN-P2P融合分发网络缓存替换机制研究;聂华;张敏;郭敬荣;阳小龙;;通信学报(第S1期);全文 *

Also Published As

Publication number Publication date
CN114095573A (zh) 2022-02-25

Similar Documents

Publication Publication Date Title
US10893118B2 (en) Content delivery network with deep caching infrastructure
US11194719B2 (en) Cache optimization
US9330004B2 (en) Data processing method, cache node, collaboration controller, and system
EP2704402B1 (en) Method and node for distributing electronic content in a content distribution network
CN105049254B (zh) 一种ndn/ccn中基于内容等级及流行度的数据缓存替换方法
EP3021537B1 (en) Method, device and system for determining content acquisition path and processing request
EP2410770A1 (en) Method, user node and server for requesting position information of resource on network
WO2005099223A1 (en) Cache server network and method of scheduling the distribution of content files
JP2010522386A (ja) P2pコンテンツ共有のための方法、システム、及びノード
CN114095573B (zh) 基于边缘缓存的cdn-p2p网络的内容副本放置方法
CN112104752B (zh) 一种内容分发网络缓存节点的热点均衡方法及系统
JP7174372B2 (ja) 分散ストレージネットワークにおけるデータ管理方法、装置、プログラム
Yang et al. Collaborative web caching based on proxy affinities
CN114124971B (zh) 一种基于边缘缓存的cdn-p2p网络的内容副本放置方法
CN113992653B (zh) 一种基于边缘缓存的cdn-p2p网络的内容下载、预存和替换方法
JP2013105227A (ja) P2P型Webプロキシネットワークシステム
CN112565796A (zh) 一种视频内容去中心化存取方法和系统
CN116633921A (zh) 基于边缘缓存的cdn-p2p网络及缓存方法、缓存放置方法
Gao et al. Distributed caching strategies in peer-to-peer systems
Zhou et al. A cooperative hybrid caching strategy for P2P mobile network
Hongbao et al. A tracker-based cache utilization strategy in ccn
CN115174471A (zh) 一种icn路由器存储单元的缓存管理方法
Tagashira et al. Proxy-based index caching for content-addressable networks
Shinkuma et al. In-network caching mechanisms for intermittently connected mobile users
Li et al. Coordinated placement and replacement for grid-based hierarchical web caches

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20240328

Address after: 1403, enterprise headquarters building, No.2 Saigao City Plaza, 170 Weiyang Road, Xi'an Economic and Technological Development Zone, Shaanxi 710000

Patentee after: Shaanxi Wukong Cloud Network Technology Co.,Ltd.

Country or region after: China

Address before: 1403, enterprise headquarters building, No.2 Saigao City Plaza, 170 Weiyang Road, Xi'an Economic and Technological Development Zone, Shaanxi 710000

Patentee before: Shaanxi wukongyun Information Technology Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right