CN108156249B - 基于近似马尔科夫链的网络缓存更新方法 - Google Patents

基于近似马尔科夫链的网络缓存更新方法 Download PDF

Info

Publication number
CN108156249B
CN108156249B CN201711474877.4A CN201711474877A CN108156249B CN 108156249 B CN108156249 B CN 108156249B CN 201711474877 A CN201711474877 A CN 201711474877A CN 108156249 B CN108156249 B CN 108156249B
Authority
CN
China
Prior art keywords
cache
content
request
node
updating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711474877.4A
Other languages
English (en)
Other versions
CN108156249A (zh
Inventor
朱洪波
梁茵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Posts and Telecommunications
Original Assignee
Nanjing University of Posts and Telecommunications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Posts and Telecommunications filed Critical Nanjing University of Posts and Telecommunications
Priority to CN201711474877.4A priority Critical patent/CN108156249B/zh
Publication of CN108156249A publication Critical patent/CN108156249A/zh
Application granted granted Critical
Publication of CN108156249B publication Critical patent/CN108156249B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5682Policies or rules for updating, deleting or replacing the stored data

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Memory System Of A Hierarchy Structure (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种基于近似马尔科夫链的网络缓存更新方法,方法包括:(1)对单缓存节点系统进行建模,推导缓存命中率;(2)对多缓存节点系统进行建模,推导缓存命中率。本发明在内容中心网络系统中可以提高缓存命中率,减小网络开销,提高用户访问速度。本发明基于LCD的缓存更新策略,对缓存节点上内容存储区的缓存内容不断更新,减小用户访问时间,提高网络效率。将数据块在内容存储区上的位置表示不同的状态,利用马尔科夫链的动态转移特性,推导出缓存命中率的闭合表达式。

Description

基于近似马尔科夫链的网络缓存更新方法
技术领域
本发明主要涉及在内容中心网络中的缓存更新方法,利用近似马尔科夫链的动态转移特性进行缓存替换,属于网络存储领域。
背景技术
现代互联网通信技术迅猛发展,网络提供的带宽能力也快速增强,使得用户浏览视频的行为得到广泛支持。现代互联网的视频流量部分占到了互联网总流量的百分之五十以上,预计几年之内占比将升至百分之七十以上。视频流量增大使得网络带宽的危机越来越严重,使得网络缓存的研究日益重要。
内容中心网络中主要传输兴趣包和数据包两种报文结构。其中,兴趣包包含用户请求内容的内容名,它由用户请求内容时发送。数据包是与兴趣包相对应的报文,它携带被请求内容的内容数据。内容中心网络中,只有兴趣包需要被路由与转发,数据包只需要按照原路径返回即可。
内容中心网络中的节点包含三种数据结构,分别为:内容存储器(CS,ContentStore),待定请求表(PIT,Pending InterestTable)和前向转发表(FIT,ForwardingInformation Base)。其中,CS表示内容数据缓存区,节点按照特定的规则对CS中的缓存数据进行缓存放置和缓存更新。PIT记录了兴趣包的来源信息,这样,在回传数据包时可以方便地找到请求路径。FIB主要起着将兴趣包转发出去的重要作用,它为节点的兴趣包提供下一跳的转发信息。
在对于网络缓存的研究中,经常使用的方法主要包括LFU(Least FrequentlyUsed)、LRU(LeastRecently Used)、MCD(Move CopyDown)、LCD(Leave CopyDown)、LCE(Leave Copy Everywhere)及一些改进算法。
基于现有的算法,为了进一步提高缓存命中率,减小网络开销,本发明提出了一种基于近似马尔科夫链的缓存更新方法。首先通过建模单缓存节点开始,然后将模型扩展到多个缓存节点,基于LCD缓存更新策略,推导出内容中心网络中缓存命中率的表达式。
发明内容
本发明所要解决的技术问题是提供一种可以提高缓存命中率、减小网络开销的网络缓存更新方法。主要解决内容中心网络中缓存缓存更新问题,从而推导出缓存命中率。本发明主要包括两个部分:单缓存节点模型下的缓存更新过程和多缓存节点模型下的缓存更新过程。
本发明为解决上述技术问题采用以下技术方案
基于近似马尔科夫链的网络缓存更新方法,具体包含单缓存节点缓存更新过程和多个缓存节点缓存更新过程;
其中,单缓存节点缓存更新过程具体如下:
步骤1,假设C={c1,c2…cK}表示缓存系统中的内容集合,其中,K表示内容的数量,且K为正整数,内容缓存器CS中的缓存容量大小为N,且N为正整数,规定内容的流行度服从Zipf分布,第k个内容的请求概率为
Figure BDA0001532609850000021
其中,c和α为常数,热点内容按照其流行度等级进行放置;
步骤2,用户对第k个内容ck发出请求,即对第k个内容的兴趣包到达节点,首先对CS进行最长内容名匹配,如果CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口;对缓存区域的数据块进行更新;
步骤3,如果CS中不存在匹配内容ck,则发生缓存丢失,这时需要向源内容服务器发送请求,对CS的缓存区域进行更新;
步骤4,根据马尔科夫链的平稳分布和π(k)和内容的请求概率pk,得到第k个内容处在马尔科夫链状态s的概率μs(k);
Figure BDA0001532609850000022
步骤5,引入马尔科夫链的转移概率Tij,表示从状态i转移到状态j的概率,利用
Figure BDA0001532609850000023
Figure BDA0001532609850000024
求马尔科夫链的平稳分布;
Tii=μi(k),1≤i≤N+1
Ti1=pk,2≤i≤N+1
T12=1-μ1(k)
Tii+1=1-pki(k),2≤i≤N
Tij=0,j≠{1,i,i+1}
Figure BDA0001532609850000031
步骤6,根据马尔科夫链的平稳分布获取缓存命中的概率Phit,具体为:
Figure BDA0001532609850000032
作为本发明基于近似马尔科夫链的网络缓存更新方法的进一步优选方案,在步骤2中,对缓存区域的数据块进行更新,具体如下;
步骤2.1,处在ck前置位的数据块均后移一个位置;
步骤2.2,处在ck后置位的数据块均保持在原有的位置不动。
作为本发明基于近似马尔科夫链的网络缓存更新方法的进一步优选方案,在步骤3中,对CS的缓存区域进行更新,具体如下:
步骤3.1,将数据块ck放置在CS的首位;
步骤3.2,将原来处在第1到第N-1位置的数据块均后移一个位置,使其处在第2到第N位置;
步骤3.3,将原来处在第N个位置的数据块从CS中移逐出去。
作为本发明基于近似马尔科夫链的网络缓存更新方法的进一步优选方案,多个缓存节点缓存更新过程具体如下:
步骤A,用户对第k个内容ck发出请求:首先对CS进行最长内容名匹配,若CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口,然后对缓存区域的数据块进行更新:
步骤B,若CS中不存在匹配内容ck,则查看PIT中是否存在匹配条目,如果PIT中存在匹配条目,则将本次请求数据包的来源端口添加到该记录中,然后丢弃兴趣包;
步骤C,若PIT中不存在匹配条目,则查询FIB:
若FIB中发现匹配条目,则按照FIB中的信息对匹配条目按照最短路径路由算法进行转发,并将该次请求记录到PIT中;
若FIB中不存在匹配条目,则说明该节点并不知道如何处理此次请求,于是丢弃该兴趣包,缓存未命中;
步骤D,假设节点对数据包ck发出请求,且在源服务器上命中,则根据LCD策略在最短路径上进行缓存放置,当节点v对数据包发出请求,接收到的内容的总概率将不再是pk,而是p'k',具体如下:
Figure BDA0001532609850000041
其中,λk(v)表示沿着最短路径转发到节点v的概率。
步骤E,将单缓存节点模型下的pk全部改为p'k',可以得到多缓存节点模型下的缓存命中率为:
Figure BDA0001532609850000042
作为本发明基于近似马尔科夫链的网络缓存更新方法的进一步优选方案,在步骤A中,对缓存区域的数据块进行更新具体如下:
步骤A1,处在ck前置位的数据块均后移一个位置,即等级降低一位;
步骤A2,处在ck后置位的数据块均保持在原有的位置不动。
本发明采用以上技术方案与现有技术相比,具有以下技术效果:
本发明基于LCD的缓存更新策略,对缓存节点上内容存储区的缓存内容不断更新,减小用户访问时间,提高网络效率。将数据块在内容存储区上的位置表示不同的状态,利用马尔科夫链的动态转移特性,推导出缓存命中率的闭合表达式。
附图说明
图1是本发明的系统流程图;
图2是本发明的单缓存节点模型下的缓存更新过程流程图;
图3是本发明的多缓存节点模型下的缓存更新过程流程图。
具体实施方式
下面结合附图对本发明的技术方案做进一步的详细说明:
以下结合说明书附图对发明做进一步的分析。
如图1所示,本发明提供了一种在内容中心网络中的基于近似马尔科夫链的缓存放置及缓存更新方法。本发明主要分为两部分:单缓存节点缓存更新过程,多个缓存节点缓存更新过程。
单缓存节点缓存更新过程
假设系统中只有一个缓存节点,那么如图2所示,单缓存节点的缓存更新过程具体如下:
步骤1:假设C={c1,c2…cK}表示缓存系统中的内容集合,其中,K表示内容的数量,且为正整数,内容缓存器CS中的缓存容量大小为N,且为正整数,规定内容的流行度服从Zipf分布,第k个内容的请求概率为
Figure BDA0001532609850000051
其中,c和α为常数,热点内容按照其流行度等级进行放置;
步骤2,用户对第k个内容ck发出请求,即对第k个内容的兴趣包到达节点,首先对CS进行最长内容名匹配,如果CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口;对缓存区域的数据块进行更新,更新方法具体如下:
步骤2.1,处在ck前置位的数据块均后移一个位置;
步骤2.2,处在ck后置位的数据块均保持在原有的位置不动。
步骤3,如果CS中不存在匹配内容ck,则发生缓存丢失,这时需要向源内容服务器发送请求,对CS的缓存区域进行更新,更新方法具体如下;
步骤3.1,将数据块ck放置在CS的首位;
步骤3.2,将原来处在第1到第N-1位置的数据块均后移一个位置,使其处在第2到第N位置;
步骤3.3,将原来处在第N个位置的数据块从CS中移逐出去。
步骤4,根据马尔科夫链的平稳分布和π(k)和内容的请求概率pk,得到第k个内容处在马尔科夫链状态s的概率μs(k);
Figure BDA0001532609850000052
步骤5,引入马尔科夫链的转移概率Tij,表示从状态i转移到状态j的概率,利用
Figure BDA0001532609850000061
Figure BDA0001532609850000062
求马尔科夫链的平稳分布;
Tii=μi(k),1≤i≤N+1
Ti1=pk,2≤i≤N+1
T12=1-μ1(k)
Tii+1=1-pki(k),2≤i≤N
Tij=0,j≠{1,i,i+1}
Figure BDA0001532609850000063
步骤6,根据马尔科夫链的平稳分布获取缓存命中的概率Phit,具体为:
Figure BDA0001532609850000064
多个缓存节点缓存更新过程
如图3所示,当存在多个缓存节点时,每个缓存节点都需要被考虑进去,除了本地请求的兴趣包,还需要考虑由于缓存丢失来自先前节点的兴趣包。
步骤A,用户对第k个内容ck发出请求:首先对CS进行最长内容名匹配,若CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口,然后对缓存区域的数据块进行更新,具体更新方法如下:
步骤A1,处在ck前置位的数据块均后移一个位置,即等级降低一位;
步骤A2,处在ck后置位的数据块均保持在原有的位置不动。
步骤B,若CS中不存在匹配内容ck,则查看PIT中是否存在匹配条目,如果PIT中存在匹配条目,则将本次请求数据包的来源端口添加到该记录中,然后丢弃兴趣包;
步骤C,若PIT中不存在匹配条目,则查询FIB:
若FIB中发现匹配条目,则按照FIB中的信息对匹配条目按照最短路径路由算法进行转发,并将该次请求记录到PIT中;
若FIB中不存在匹配条目,则说明该节点并不知道如何处理此次请求,于是丢弃该兴趣包,缓存未命中;
步骤D,假设节点对数据包ck发出请求,且在源服务器上命中,则根据LCD策略在最短路径上进行缓存放置,当节点v对数据包发出请求,接收到的内容的总概率将不再是pk,而是p'k',具体如下:
Figure BDA0001532609850000071
其中,λk(v)表示沿着最短路径转发到节点v的概率。
步骤E,将单缓存节点模型下的pk全部改为p'k',可以得到多缓存节点模型下的缓存命中率为:
Figure BDA0001532609850000072

Claims (2)

1.基于近似马尔科夫链的网络缓存更新方法,其特征在于:具体包含单缓存节点缓存更新过程和多个缓存节点缓存更新过程;
其中,单缓存节点缓存更新过程具体如下:
步骤1,假设C={c1,c2…cK}表示缓存系统中的内容集合,其中,K表示内容的数量,且K为正整数,内容缓存器CS中的缓存容量大小为N,且N为正整数,规定内容的流行度服从Zipf分布,第k个内容的请求概率为
Figure FDA0002810631130000011
其中,c和α为常数,热点内容按照其流行度等级进行放置;
步骤2,用户对第k个内容ck发出请求,即对第k个内容的兴趣包到达节点,首先对CS进行最长内容名匹配,如果CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口;对缓存区域的数据块进行更新;
在步骤2中,对缓存区域的数据块进行更新,具体如下;
步骤2.1,处在ck前置位的数据块均后移一个位置;
步骤2.2,处在ck后置位的数据块均保持在原有的位置不动;
步骤3,如果CS中不存在匹配内容ck,则发生缓存丢失,这时需要向源内容服务器发送请求,对CS的缓存区域进行更新;
步骤3.1,将数据块ck放置在CS的首位;
步骤3.2,将原来处在第1到第N-1位置的数据块均后移一个位置,使其处在第2到第N位置;
步骤3.3,将原来处在第N个位置的数据块从CS中移逐出去;
步骤4,根据马尔科夫链的平稳分布和π(k)和内容的请求概率pk,得到第k个内容处在马尔科夫链状态s的概率μs(k);
Figure FDA0002810631130000012
步骤5,引入马尔科夫链的转移概率Tij,表示从状态i转移到状态j的概率,利用
Figure FDA0002810631130000013
Figure FDA0002810631130000014
求马尔科夫链的平稳分布;
Tii=μi(k),1≤i≤N+1
Ti1=pk,2≤i≤N+1
T12=1-μ1(k)
Tii+1=1-pki(k),2≤i≤N
Tij=0,j≠{1,i,i+1}
Figure FDA0002810631130000021
步骤6,根据马尔科夫链的平稳分布获取缓存命中的概率Phit,具体为:
Figure FDA0002810631130000022
2.根据权利要求1所述的基于近似马尔科夫链的网络缓存更新方法,其特征在于:多个缓存节点缓存更新过程具体如下:
步骤A,用户对第k个内容ck发出请求:首先对内容存储器CS进行最长内容名匹配,若内容存储器CS中存在匹配内容,则将对应的数据包返回到兴趣包来源端口,然后对缓存区域的数据块进行更新:
步骤B,若内容存储器CS中不存在匹配内容ck,则查看待定请求表PIT中是否存在匹配条目,如果待定请求表PIT中存在匹配条目,则将本次请求数据包的来源端口添加到待定请求表PIT中,然后丢弃兴趣包;
步骤C,若待定请求表PIT中不存在匹配条目,则查询FIB,其中,FIB为节点的兴趣包提供下一跳的转发信息;
若FIB中发现匹配条目,则按照FIB中的信息对匹配条目按照最短路径路由算法进行转发,并将该次请求记录到PIT中;
若FIB中不存在匹配条目,则说明如何处理此次请求的节点并不知道如何处理此次请求,于是丢弃该兴趣包,缓存未命中;
步骤D,假设节点对数据包ck发出请求,且在源服务器上命中,则根据LCD缓存更新策略在最短路径上进行缓存放置,当节点v对数据包发出请求,接收到的内容的总概率将不再是pk,而是p'k',具体如下:
Figure FDA0002810631130000031
其中,λk(v)表示沿着最短路径转发到节点v的概率;
步骤E,将单缓存节点模型下的pk全部改为p'k',可以得到多缓存节点模型下的缓存命中率为:
Figure FDA0002810631130000032
在步骤A中,对缓存区域的数据块进行更新具体如下:
步骤A1,处在ck前置位的数据块均后移一个位置,即等级降低一位;
步骤A2,处在ck后置位的数据块均保持在原有的位置不动。
CN201711474877.4A 2017-12-29 2017-12-29 基于近似马尔科夫链的网络缓存更新方法 Active CN108156249B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711474877.4A CN108156249B (zh) 2017-12-29 2017-12-29 基于近似马尔科夫链的网络缓存更新方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711474877.4A CN108156249B (zh) 2017-12-29 2017-12-29 基于近似马尔科夫链的网络缓存更新方法

Publications (2)

Publication Number Publication Date
CN108156249A CN108156249A (zh) 2018-06-12
CN108156249B true CN108156249B (zh) 2021-01-12

Family

ID=62463879

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711474877.4A Active CN108156249B (zh) 2017-12-29 2017-12-29 基于近似马尔科夫链的网络缓存更新方法

Country Status (1)

Country Link
CN (1) CN108156249B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109407996B (zh) * 2018-11-07 2022-02-18 郑州云海信息技术有限公司 一种缓存管理方法以及相关装置
CN109933908A (zh) * 2019-03-14 2019-06-25 恒生电子股份有限公司 一种业务节点模型保存方法、应用方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104253855A (zh) * 2014-08-07 2014-12-31 哈尔滨工程大学 一种面向内容中心网络中基于内容分类的类别流行度缓存替换方法
CN106453495A (zh) * 2016-08-31 2017-02-22 北京邮电大学 一种基于内容流行度预测的信息中心网络缓存方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9736263B2 (en) * 2015-02-16 2017-08-15 Telefonaktiebolaget L M Ericsson (Publ) Temporal caching for ICN

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104253855A (zh) * 2014-08-07 2014-12-31 哈尔滨工程大学 一种面向内容中心网络中基于内容分类的类别流行度缓存替换方法
CN106453495A (zh) * 2016-08-31 2017-02-22 北京邮电大学 一种基于内容流行度预测的信息中心网络缓存方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
"Estimating Instantaneous Cache Hit Ratio Using";Hazem Gomaa等;《IEEE/ACM TRANSACTIONS ON NETWORKING》;20131030;第21卷(第5期);全文 *
"Modelling and Evaluation of CCN-Caching";Ioannis Psaras等;《NETWORKING 2011》;20200513;全文 *
"内容中心网络中一种基于内容等级及流行度的缓存策略";黄胜等;《电子与信息学报》;20170630;第39卷(第6期);全文 *

Also Published As

Publication number Publication date
CN108156249A (zh) 2018-06-12

Similar Documents

Publication Publication Date Title
CN109905480B (zh) 基于内容中心性的概率缓存内容放置方法
CN100531102C (zh) 路由表调整方法、路由查询方法和装置及路由表存储装置
CN104811493B (zh) 一种网络感知的虚拟机镜像存储系统及读写请求处理方法
CN108900570B (zh) 一种基于内容价值的缓存替换方法
CN106021128B (zh) 一种基于步幅和数据相关性的数据预取器及其预取方法
CN105589664B (zh) 虚拟存储高速传输方法
WO2012072049A1 (zh) 协作缓存的方法和装置
TWI663518B (zh) Search cache update method and device
CN111782612B (zh) 跨域虚拟数据空间中文件数据边缘缓存方法
CN108156249B (zh) 基于近似马尔科夫链的网络缓存更新方法
CN103905439A (zh) 一种基于家庭网关的加速网页浏览方法
CN106899692A (zh) 一种内容中心网络节点数据缓存替换方法和装置
CN108769252A (zh) 一种基于请求内容关联性的icn网络预缓存方法
US20150256601A1 (en) System and method for efficient content caching in a streaming storage
CN108173903B (zh) 自治系统协作缓存策略在ccn中的应用方法
CN101840417B (zh) 一种基于相关关系的物联网uid查询方法
CN109951390A (zh) 一种基于PopBetw策略的网络装置及其协作路由缓存方法
EP3274844B1 (en) Hierarchical cost based caching for online media
CN112822275B (zh) 基于topsis熵权法的轻量级缓存策略
CN115599711B (zh) 缓存数据处理方法、系统、装置、设备及计算机存储介质
KR102235622B1 (ko) IoT 환경에서의 협력 에지 캐싱 방법 및 그를 위한 장치
EP3207457B1 (en) Hierarchical caching for online media
CN109743407B (zh) 一种面向多租户网络的边缘网络缓存方法
CN113382053A (zh) 基于节点半局部中心性和内容热度的内容主动推送方法
CN114640641B (zh) 一种流量感知的OpenFlow流表弹性节能查找方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant