CN1585347A - 一种利用网络用户访问特性的网络代理缓存替换方法 - Google Patents

一种利用网络用户访问特性的网络代理缓存替换方法 Download PDF

Info

Publication number
CN1585347A
CN1585347A CN 200410047534 CN200410047534A CN1585347A CN 1585347 A CN1585347 A CN 1585347A CN 200410047534 CN200410047534 CN 200410047534 CN 200410047534 A CN200410047534 A CN 200410047534A CN 1585347 A CN1585347 A CN 1585347A
Authority
CN
China
Prior art keywords
page
buffer memory
network
user
network agent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200410047534
Other languages
English (en)
Other versions
CN1281029C (zh
Inventor
郭岩
白硕
王斌
张刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Computing Technology of CAS
Original Assignee
Institute of Computing Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Computing Technology of CAS filed Critical Institute of Computing Technology of CAS
Priority to CN 200410047534 priority Critical patent/CN1281029C/zh
Publication of CN1585347A publication Critical patent/CN1585347A/zh
Application granted granted Critical
Publication of CN1281029C publication Critical patent/CN1281029C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明涉及网络通信技术领域,利用网络用户访问特性的网络代理缓存替换方法。该方法利用用户访问网络的特性,设计了一种网络代理缓存替换系统来实现网络代理缓存服务。步骤:S1,假设ΔT是网络代理缓存中某页面这次被访问和下次被访问期间发生的所有访问的次数;S2,用户请求页面t,判断缓存中是否包含了t的副本?S3,把t的过期副本从缓存中删除,从网络服务器获得t的新副本;S4,判断缓存中的剩余空间是否足以存放t的新副本?S5,替换优先级最低的页面;S6,把t的新副本压入缓存,S7,副本被返回给用户;S8,根据权重计算公式更新缓存中每个页面的权重;S9,判断是否已经过了一个固定时间段。

Description

一种利用网络用户访问特性的网络代理缓存替换方法
技术领域
本发明涉及网络通信技术领域,特别是一种利用网络用户访问特性的网络代理缓存替换方法。
网络代理缓存是指在网络代理服务器上保存常用网页的一个副本,以便它们可以更快地被本地用户访问。通过网络代理缓存,本地客户端发给远程网站的访问请求被重新路由到本地网络的缓存服务器中,缓存服务器将请求的网页的副本直接返回给客户端浏览器。网络代理缓存被公认为是一种能够缓解网络服务瓶颈的有效方法。但网络代理中能够缓存的页面是有限的,当缓存空间不足以存放新网页的副本时,需要根据缓存替换方法删除缓存中的某个或某些网页。缓存替换方法的好坏直接影响到网络代理缓存的使用效率。因此开发高效的网络代理缓存替换方法具有很重要的现实意义。
背景技术
目前已有不少网络代理缓存替换方法,但这些缓存替换方法都没有考虑过用户对网络的访问特性。访问网页的是用户,网络代理缓存中页面的替换行为是用户访问网络这一行为的连锁反应,因此为了提高网络代理缓存的使用效率,缓存的替换方法应该充分考虑用户访问网络的特性。
发明内容
鉴于现有的网络代理缓存替换方法都没有考虑网络用户的访问特性,本发明设计了一种利用网络用户访问特性的网络代理缓存替换方法。该方法充分利用了网络用户的访问特性,从而提高了网络代理缓存的使用效率。该方法定期获得最近的网络用户的访问特性,使得网络代理缓存能够及时地、自动地调整自身行为,从而具有自适应性。该发明设计的网络代理缓存替换实现方法得到了高文档命中率(Hit Rate)和高字节文档命中率(Byte Hit Rate)。该发明设计的网络代理缓存替换实现方法实现简单,且时间代价小。
假设Δ′T是网络代理缓存中某页面这次被访问和下次被访问期间发生的所有访问的次数,UserAvgΔ′T是定期根据网络代理日志离线计算的每个使用缓存的用户访问页面的Δ′T的平均值,当网络代理缓存需要在线替换页面时考虑最后一次访问页面的用户的UserAvgΔ′T。
假设ΔTlast是网络代理缓存中某页面最近一次被访问后至今发生的所有访问的次数,当网络代理缓存需要在线替换页面时考虑页面的ΔTlast
当网络代理缓存需要在线替换页面时,计算缓存中每个页面的权重,权重越高,优先级越低,替换优先级最低页面;
页面i的权重计算公式是Wi=Sizei×(α×UserAvgΔ′Tj+(1-α)×ΔTlasti),其中Sizei是页面i的尺寸,UserAvgΔ′Tj是最近一次访问页面i的用户j访问页面的Δ′T的平均值,ΔTlasti是页面i最近一次被访问后至今发生的所有访问的次数,α为经验参数;
附图说明
图1是本发明的利用网络用户访问特性的网络代理缓存替换方法的实现流程图。
具体实施方式
以下是该方法的实现过程,参照说明书附图1:
步骤S1,假设Δ′T是网络代理缓存中某页面这次被访问和下次被访问期间发生的所有访问的次数,UserAvgΔ′T是根据网络代理日志离线计算的每个使用缓存的用户访问页面的Δ′T的平均值,定期根据最近的网络代理日志计算每个使用缓存的用户的UserAvgΔ′T;
步骤S2,用户请求页面t,判断缓存中是否包含了t的副本并且没有过期?如果是,则转向步骤S7;
步骤S3,把t的过期副本从缓存中删除,从网络服务器获得t的新副本;
步骤S4,判断缓存中的剩余空间是否足以存放t的新副本?如果是,则转向步骤S6;
步骤S5,页面的权重越高,优先级越低,替换优先级最低的页面,直至缓存中的剩余空间足以存放t的新副本;
步骤S6,把t的新副本压入缓存,转向步骤S8;
步骤S7,副本被返回给用户;
步骤S8,根据权重计算公式更新缓存中每个页面的权重,页面i的权重计算公式是Wi=Sizei×(α×UserAvgΔ′Tj+(1-α)×ΔTlasti),其中Sizei是页面i的尺寸,UserAvgΔ′Tj是最近一次访问页面i的用户j访问页面的Δ′T的平均值,ΔTlasti是页面i最近一次被访问后至今发生的所有访问的次数,α为经验参数;
步骤S9,判断是否已经过了一个固定时间段,或是否缓存的性能开始下降,如果是则转向步骤S1,否则转向步骤S2。
本发明的效果体现在:
一.该发明设计的网络代理缓存替换方法充分利用了用户对网络的访问特性,从而提高了网络代理缓存的使用效率。
二.该发明设计的网络代理缓存替换方法定期获得最近的网络用户的访问特性,使得网络代理缓存能够及时地、自动地调整自身行为,从而具有自适应性。
三.该发明设计的网络代理缓存替换方法得到了高文档命中率(HitRate)和高字节文档命中率(Byte Hit Rate)。
四.该发明设计的网络代理缓存替换方法实现简单,且时间代价小。

Claims (5)

1.一种利用网络用户访问特性的网络代理缓存替换方法:该方法利用用户访问网络的特性,设计了一种网络代理缓存替换系统来实现网络代理缓存服务。
2.根据权利要求1所述的利用网络用户访问特性的网络代理缓存替换方法,其特征在于:假设Δ′T是网络代理缓存中某页面这次被访问和下次被访问期间发生的所有访问的次数,UserAvgΔ′T是定期根据网络代理日志离线计算的每个使用缓存的用户访问页面的Δ′T的平均值,当网络代理缓存需要在线替换页面时考虑最后一次访问页面的用户的UserAvgΔ′T。
3.根据权利要求1所述的利用网络用户访问特性的网络代理缓存替换方法,其特征在于:假设ΔTlast是网络代理缓存中某页面最近一次被访问后至今发生的所有访问的次数,当网络代理缓存需要在线替换页面时考虑页面的ΔTlast
4.根据权利要求1所述的利用网络用户访问特性的网络代理缓存替换方法,其特征在于:当网络代理缓存需要在线替换页面时,计算缓存中每个页面的权重,权重越高,优先级越低,替换优先级最低页面;页面i的权重计算公式是Wi=Sizei×(α×UserAvgΔ′Tj+(1-α)×ΔTlasti),其中Sizei是页面i的尺寸,UserAvgΔ′Tj是最近一次访问页面i的用户j访问页面的平均Δ′T,ΔTlasti是页面i最近一次被访问后至今发生的所有访问的次数,α为经验参数,权重越高,优先级越低,缓存空间不够时替换优先级最低的页面。
5.根据权利要求1所述的利用网络用户访问特性的网络代理缓存替换方法,其特征在于:具体步骤如下:
步骤S1,假设Δ′T是网络代理缓存中某页面这次被访问和下次被访问期间发生的所有访问的次数,UserAvgΔ′T是根据网络代理日志离线计算的每个使用缓存的用户访问页面的Δ′T的平均值,定期根据最近的网络代理日志计算每个使用缓存的用户的UserAvgΔ′T;
步骤S2,用户请求页面t,判断缓存中是否包含了t的副本并且没有过期?如果是,则转向步骤S7;
步骤S3,把t的过期副本从缓存中删除,从网络服务器获得t的新副本;
步骤S4,判断缓存中的剩余空间是否足以存放t的新副本?如果是,则转向步骤S6;
步骤S5,页面的权重越高,优先级越低,替换优先级最低的页面,直至缓存中的剩余空间足以存放t的新副本;
步骤S6,把t的新副本压入缓存,转向步骤S8;
步骤S7,副本被返回给用户;
步骤S8,根据权重计算公式更新缓存中每个页面的权重,页面i的权重计算公式是Wi=Sizei×(α×UserAvgΔ′Tj+(1-α)×ΔTlasti),其中Sizei是页面i的尺寸,UserAvgΔ′Tj是最近一次访问页面i的用户j访问页面的Δ′T的平均值,ΔTlasti是页面i最近一次被访问后至今发生的所有访问的次数,α为经验参数;
步骤S9,判断是否已经过了一个固定时间段,或是否缓存的性能开始下降,如果是则转向步骤S1,否则转向步骤S2。
CN 200410047534 2004-05-21 2004-05-21 一种利用网络用户访问特性的网络代理缓存替换方法 Expired - Lifetime CN1281029C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 200410047534 CN1281029C (zh) 2004-05-21 2004-05-21 一种利用网络用户访问特性的网络代理缓存替换方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 200410047534 CN1281029C (zh) 2004-05-21 2004-05-21 一种利用网络用户访问特性的网络代理缓存替换方法

Publications (2)

Publication Number Publication Date
CN1585347A true CN1585347A (zh) 2005-02-23
CN1281029C CN1281029C (zh) 2006-10-18

Family

ID=34602025

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 200410047534 Expired - Lifetime CN1281029C (zh) 2004-05-21 2004-05-21 一种利用网络用户访问特性的网络代理缓存替换方法

Country Status (1)

Country Link
CN (1) CN1281029C (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101179494B (zh) * 2007-12-03 2010-09-01 浙江大学 面向网络多媒体传输服务的资源分发方法
CN101060402B (zh) * 2006-04-21 2010-09-08 盛大计算机(上海)有限公司 基于Hash-map的多点缓存装置
CN101616129B (zh) * 2008-06-27 2012-11-21 成都市华为赛门铁克科技有限公司 防网络攻击流量过载保护的方法、装置和系统
CN103905439A (zh) * 2014-03-25 2014-07-02 重庆邮电大学 一种基于家庭网关的加速网页浏览方法
CN104239370A (zh) * 2013-06-24 2014-12-24 腾讯科技(深圳)有限公司 一种网页数据存储方法及装置
CN104731980A (zh) * 2015-04-17 2015-06-24 吉林大学 一种针对缓存页面的页面管理方法及装置
CN105512251A (zh) * 2015-12-01 2016-04-20 北京百度网讯科技有限公司 一种页面缓存方法和装置
CN105975402A (zh) * 2016-04-28 2016-09-28 华中科技大学 一种混合内存环境下淘汰数据感知的缓存方法与系统
CN106227679A (zh) * 2016-07-25 2016-12-14 北京邮电大学 一种数据缓存替换方法及装置
CN107491320A (zh) * 2017-06-26 2017-12-19 北京五八信息技术有限公司 基于混合模式移动应用的载入方法和装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101060402B (zh) * 2006-04-21 2010-09-08 盛大计算机(上海)有限公司 基于Hash-map的多点缓存装置
CN101179494B (zh) * 2007-12-03 2010-09-01 浙江大学 面向网络多媒体传输服务的资源分发方法
CN101616129B (zh) * 2008-06-27 2012-11-21 成都市华为赛门铁克科技有限公司 防网络攻击流量过载保护的方法、装置和系统
CN104239370A (zh) * 2013-06-24 2014-12-24 腾讯科技(深圳)有限公司 一种网页数据存储方法及装置
WO2014206096A1 (en) * 2013-06-24 2014-12-31 Tencent Technology (Shenzhen) Company Limited Method, device, and system for data storage management
CN103905439A (zh) * 2014-03-25 2014-07-02 重庆邮电大学 一种基于家庭网关的加速网页浏览方法
CN104731980A (zh) * 2015-04-17 2015-06-24 吉林大学 一种针对缓存页面的页面管理方法及装置
CN105512251A (zh) * 2015-12-01 2016-04-20 北京百度网讯科技有限公司 一种页面缓存方法和装置
CN105512251B (zh) * 2015-12-01 2019-09-10 北京百度网讯科技有限公司 一种页面缓存方法和装置
CN105975402A (zh) * 2016-04-28 2016-09-28 华中科技大学 一种混合内存环境下淘汰数据感知的缓存方法与系统
CN105975402B (zh) * 2016-04-28 2019-01-18 华中科技大学 一种混合内存环境下淘汰数据感知的缓存方法与系统
CN106227679A (zh) * 2016-07-25 2016-12-14 北京邮电大学 一种数据缓存替换方法及装置
CN106227679B (zh) * 2016-07-25 2018-12-28 北京邮电大学 一种数据缓存替换方法及装置
CN107491320A (zh) * 2017-06-26 2017-12-19 北京五八信息技术有限公司 基于混合模式移动应用的载入方法和装置

Also Published As

Publication number Publication date
CN1281029C (zh) 2006-10-18

Similar Documents

Publication Publication Date Title
Zeng et al. Efficient web content delivery using proxy caching techniques
Wang et al. Prefetching in world wide web
Cao et al. {Cost-Aware}{WWW} Proxy Caching Algorithms
US7581028B2 (en) Method for efficient image distribution and management
Duvvuri et al. Adaptive leases: A strong consistency mechanism for the world wide web
Wolman et al. On the scale and performance of cooperative web proxy caching
Wong Web cache replacement policies: a pragmatic approach
US6272598B1 (en) Web cache performance by applying different replacement policies to the web cache
CN102546751B (zh) 一种分布式文件系统分级元数据缓存控制方法
CN1281029C (zh) 一种利用网络用户访问特性的网络代理缓存替换方法
Cardellini et al. Collaborative proxy system for distributed web content transcoding
Paul et al. Distributed caching with centralized control
CN103905439A (zh) 一种基于家庭网关的加速网页浏览方法
CN101079727A (zh) 一种流媒体数据内容管理方法
CN103106153A (zh) 基于访问密度的web缓存替换方法
Busari et al. Simulation evaluation of a heterogeneous web proxy caching hierarchy
Balamash et al. Performance analysis of a client-side caching/prefetching system for web traffic
Aggarwal et al. Performance of dynamic replication schemes for an internet hosting service
Zhao et al. GDSF-based low access latency web proxy caching replacement algorithm
CN109067898A (zh) 一种通过文件散列分布降低内容分发网络边缘节点回源率的方法
Patil et al. Improving performance on WWW using intelligent predictive caching for web proxy servers
Yu et al. A new prefetch cache scheme
Liu et al. Evaluation of web caching consistency
Selvakumar et al. Delay sensitive least frequently used algorithm for replacement in web caches
Yang et al. Model based predictive prefetching

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Assignee: SHANGHAI WANGSU SCIENCE & TECHNOLOGY Co.,Ltd.

Assignor: Institute of Computing Technology, Chinese Academy of Sciences

Contract fulfillment period: 2007.5.18 to 2013.5.17

Contract record no.: 2008990000520

Denomination of invention: Network agent buffer substitution by using access characteristics of network users

Granted publication date: 20061018

License type: Exclusive license

Record date: 20080928

LIC Patent licence contract for exploitation submitted for record

Free format text: EXCLUSIVE LICENSE; TIME LIMIT OF IMPLEMENTING CONTACT: 2007.5.18 TO 2013.5.17; CHANGE OF CONTRACT

Name of requester: SHANGHAI WANGSU TECHNOLOGY CO., LTD.

Effective date: 20080928

CX01 Expiry of patent term

Granted publication date: 20061018