CN104133880B - 一种设置文件缓存时间的方法与装置 - Google Patents

一种设置文件缓存时间的方法与装置 Download PDF

Info

Publication number
CN104133880B
CN104133880B CN201410360917.2A CN201410360917A CN104133880B CN 104133880 B CN104133880 B CN 104133880B CN 201410360917 A CN201410360917 A CN 201410360917A CN 104133880 B CN104133880 B CN 104133880B
Authority
CN
China
Prior art keywords
time
cache
benchmark
file
frequency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410360917.2A
Other languages
English (en)
Other versions
CN104133880A (zh
Inventor
刘杰
梁润强
霍键聪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Ruijiang Cloud Computing Co Ltd
Original Assignee
Guangdong Ruijiang Cloud Computing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Ruijiang Cloud Computing Co Ltd filed Critical Guangdong Ruijiang Cloud Computing Co Ltd
Priority to CN201410360917.2A priority Critical patent/CN104133880B/zh
Publication of CN104133880A publication Critical patent/CN104133880A/zh
Application granted granted Critical
Publication of CN104133880B publication Critical patent/CN104133880B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明实施例公开了一种设置文件缓存时间的方法及装置，所述方法包括：设置文件的基准缓存时间；获取文件的访问信息，依据访问信息计算访问频率，并依据计算后获得的访问频率，调整基准缓存时间；根据调整后的基准缓存时间，重新设置文件的基准缓存时间。通过本发明实施例公开了一种设置文件缓存时间的方法及装置，实现动态调整文件的缓冲时间，合理分配缓存资源，防止发生由于文件的缓存时间设置过长或过短，占用过多缓存资源，减少文件回源的次数，节省带宽和服务器端资源。

Description

一种设置文件缓存时间的方法与装置
技术领域
本发明实施例涉及互联网技术领域，尤其涉及一种设置文件缓存时间的方法与装置。
背景技术
HTTP(Hypertext transfer protocol，超文本传输协议)缓存技术可以将万维网Web服务器发送的HTTP文件缓存在本地，当用户再次请求访问HTTP文件时，不需要向Web服务器请求发送HTTP文件，直接读取本地HTTP文件即可，可以节省大量的带宽资源并且降低Web服务器的响应负载。
目前依靠人工的方式来设置缓存时间，但是在一些大型的Web服务器中，HTTP文件数量众多，往往将HTTP文件区分成几个目录来设置缓存时间，同一目录下的文件设置为同等的缓存时间，但是各个HTTP文件之间的访问频率不同，在这样的情况下，如果使用相同的缓存时间，缓存容量紧张的缓存设备上随机放弃HTTP文件，增加了HTTP文件回源的次数，会浪费带宽资源，增加Web服务器的响应负载。
发明内容
本发明提供一种设置文件缓存时间的方法与装置，以实现减少文件回源的次数，节省带宽和服务器端资源的目的。
一方面，本发明实施例提供了一种设置文件缓存时间的方法，包括：
设置文件的基准缓存时间；
获取所述文件的访问信息，依据所述访问信息计算访问频率，并依据计算后获得的所述访问频率，调整所述基准缓存时间；
根据调整后的基准缓存时间，重新设置所述文件的基准缓存时间。
优选地，所述依据计算后获得的所述访问频率，调整所述基准缓存时间包括：
如果计算后获得的所述访问频率高于预设的访问频率，则延长所述基准缓存时间；
如果计算后获得的所述访问频率低于预设的访问频率，则缩短所述基准缓存时间。
优选地，所述访问信息包括：访问时间和访问次数。
优选地，所述根据调整后基准缓存时间，重新设置所述文件的基准缓存时间包括：
依据调整后基准缓存时间，选择服务器或缓存节点的缓存设置接口，重新设置所述文件的基准缓存时间。
另一方面，本发明实施例提供了一种设置文件缓存时间的装置，包括：
基准缓冲时间设置模块，用于设置文件的基准缓存时间；
基准缓冲时间调整模块，用于获取所述文件的访问信息，依据所述访问信息计算访问频率，并依据计算后获得的所述访问频率，调整所述基准缓存时间；
基准缓存时间重新设置模块，用于根据调整后基准缓存时间，重新设置所述文件的基准缓存时间。
优选地，基准缓冲时间调整模块具体用于，如果计算后获得的所述访问频率高于预设的访问频率，则延长所述基准缓存时间；如果计算后获得的所述访问频率低于预设的访问频率，则缩短所述基准缓存时间。
优选地，所述访问信息包括：访问时间和访问次数。
优选地，基准缓存时间重新设置模块具体用于，依据调整后的基准缓存时间，选择服务器或缓存节点的缓存设置接口，重新设置所述文件的基准缓存时间。
本发明实施例提供了一种设置文件缓存时间的方法与装置，首先设置文件的基准缓存时间；然后获取所述文件的访问信息，依据所述访问信息计算访问频率，并依据计算后获得的所述访问频率，调整所述基准缓存时间；根据调整后基准缓存时间，重新设置所述文件的基准缓存时间。实现动态调整文件的缓冲时间，合理分配缓存资源，防止发生由于文件的缓存时间设置过长或过短，占用过多缓存资源，减少文件回源的次数，节省带宽和服务器端资源。
附图说明
图1为本发明实施例一提供的一种设置文件缓存时间的方法的流程示意图；
图2为本发明实施例二提供的一种设置文件缓存时间的装置的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
由于现有技术中，文件的缓存时间不能动态设置，如果文件的缓存时间过长，会占据较多的缓存容量，缓存容量不足时，会随机丢弃文件释放缓存容量。当用户再次请求访问被丢弃的文件时，需要向服务器请求重新发送文件，增加了文件的回源次数。如果文件的缓存时间较短，当用户再次访问时，被访问的文件已经被丢弃，同样需要向服务器请求重新发送文件，增加了文件的回源次数。
有鉴于此，本发明实施例提供了一种设置文件缓存时间的方法及装置，以解决由于文件的缓存时间不能动态设置，造成文件的次数多，浪费带宽和服务器端资源的技术问题。
实施例一
图1为本发明实施例一提供的一种设置文件缓存时间的方法的流程示意图，本实施例可适用于将文件从服务器缓存到本地情况，该方法可以由设置文件缓存时间的装置来执行，具体包括如下步骤：
步骤S101，设置文件的基准缓存时间。
在步骤S101中，可以依据文件的修改时间和修改频率设置基准缓存时间，具体的，如果修改频率超过高与预设的频率，则可以设置较短的基准缓存时间；如果修改频率低于预设频率，则可以设置较长的基准缓存时间。
步骤S102，获取文件的访问信息，依据访问信息计算访问频率，并依据计算后获得的访问频率，调整基准缓存时间；
在步骤S102中，文件的访问信息可以包括：访问时间和访问次数，可以依据访问时间和访问次数计算访问频率。如果计算后获得的访问频率高于预设的访问频率，则延长基准缓存时间；如果计算后获得的访问频率低于预设的访问频率，则缩短基准缓存时间。
步骤S103，根据调整后的基准缓存时间，重新设置文件的基准缓存时间。
在步骤S103中，依据调整后基准缓存时间，可以选择服务器或缓存节点的缓存设置接口，重新设置文件的基准缓存时间。
通过本发明实施例一提供的一种设置文件缓存时间的方法，实现动态调整文件的缓冲时间，合理分配缓存资源，防止发生由于文件的缓存时间设置过长或过短，占用过多缓存资源，减少文件回源的次数，节省带宽和服务器端资源。
实施例二
图2为本发明实施例二提供的一种设置文件缓存时间的装置的结构示意图。
本发明实施例二提供了一种设置文件缓存时间的装置，如图2所示，包括：基准缓冲时间设置模块21、基准缓冲时间调整模块22和基准缓存时间重新设置模块23。
其中，基准缓冲时间设置模块21，用于设置文件的基准缓存时间；基准缓冲时间调整模块22，用于获取文件的访问信息，依据访问信息计算访问频率，并依据计算后获得的访问频率，调整基准缓存时间；基准缓存时间重新设置模块23，用于根据调整后基准缓存时间，重新设置文件的基准缓存时间。
在基准缓冲时间设置模块21中，可以依据文件的修改时间和修改频率设置基准缓存时间。具体的，如果修改频率超过高与预设的频率，则可以设置较短的基准缓存时间；如果修改频率低于预设频率，则可以设置较长的基准缓存时间。
在基准缓冲时间调整模块22中，文件的访问信息可以包括：访问时间和访问次数，可以依据访问时间和访问次数计算访问频率。如果计算后获得的访问频率高于预设的访问频率，则延长基准缓存时间；如果计算后获得的访问频率低于预设的访问频率，则缩短基准缓存时间。
基准缓存时间重新设置模块23具体用于，依据调整后的基准缓存时间，选择服务器或缓存节点的缓存设置接口，重新设置文件的基准缓存时间。
通过本发明实施例二提供的一种设置文件缓存时间的装置，实现动态调整文件的缓冲时间，合理分配缓存资源，防止发生由于文件的缓存时间设置过长或过短，占用过多缓存资源，减少文件回源的次数，节省带宽和服务器端资源。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (8)

1.一种设置文件缓存时间的方法，其特征在于，包括：
步骤S101，设置文件的基准缓存时间；
步骤S102，获取所述文件的访问信息，依据所述访问信息计算访问频率，并依据计算后获得的所述访问频率，调整所述基准缓存时间；
步骤S103，根据调整后的基准缓存时间，重新设置所述文件的基准缓存时间；
其中，在步骤S101中，依据文件的修改时间和修改频率设置基准缓存时间，如果修改频率超过预设频率，则设置第一基准缓存时间；如果修改频率低于预设频率，则设置第二基准缓存时间；所述第一基准缓存时间短于所述第二基准缓存时间。
2.根据权利要求1所述的方法，其特征在于，所述依据计算后获得的所述访问频率，调整所述基准缓存时间包括：
如果计算后获得的所述访问频率高于预设的访问频率，则延长所述基准缓存时间；
如果计算后获得的所述访问频率低于预设的访问频率，则缩短所述基准缓存时间。
3.根据权利要求1所述的方法，其特征在于，所述访问信息包括：访问时间和访问次数。
4.根据权利要求1所述的方法，其特征在于，所述根据调整后基准缓存时间，重新设置所述文件的基准缓存时间包括：
依据调整后的基准缓存时间，选择服务器或缓存节点的缓存设置接口，重新设置所述文件的基准缓存时间。
5.一种设置文件缓存时间的装置，其特征在于，包括：
基准缓冲时间设置模块，用于设置文件的基准缓存时间；
基准缓冲时间调整模块，用于获取所述文件的访问信息，依据所述访问信息计算访问频率，并依据计算后获得的所述访问频率，调整所述基准缓存时间；
基准缓存时间重新设置模块，用于根据调整后的基准缓存时间，重新设置所述文件的基准缓存时间；
其中，所述基准缓冲时间设置模块具体用于：依据文件的修改时间和修改频率设置基准缓存时间，如果修改频率超过预设频率，则设置第一基准缓存时间；如果修改频率低于预设频率，则设置第二基准缓存时间；所述第一基准缓存时间短于所述第二基准缓存时间。
6.根据权利要求5所述的装置，其特征在于，基准缓冲时间调整模块具体用于，如果计算后获得的所述访问频率高于预设的访问频率，则延长所述基准缓存时间；如果计算后获得的所述访问频率低于预设的访问频率，则缩短所述基准缓存时间。
7.根据权利要求5所述的装置，其特征在于，所述访问信息包括：访问时间和访问次数。
8.根据权利要求5所述的装置，其特征在于，基准缓存时间重新设置模块具体用于，依据调整后的基准缓存时间，选择服务器或缓存节点的缓存设置接口，重新设置所述文件的基准缓存时间。
CN201410360917.2A 2014-07-25 2014-07-25 一种设置文件缓存时间的方法与装置 Active CN104133880B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410360917.2A CN104133880B (zh) 2014-07-25 2014-07-25 一种设置文件缓存时间的方法与装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410360917.2A CN104133880B (zh) 2014-07-25 2014-07-25 一种设置文件缓存时间的方法与装置

Publications (2)

Publication Number Publication Date
CN104133880A CN104133880A (zh) 2014-11-05
CN104133880B true CN104133880B (zh) 2018-04-20

Family

ID=51806558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410360917.2A Active CN104133880B (zh) 2014-07-25 2014-07-25 一种设置文件缓存时间的方法与装置

Country Status (1)

Country Link
CN (1) CN104133880B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105335102B (zh) * 2015-10-10 2018-05-01 浪潮(北京)电子信息产业有限公司 一种缓存数据处理方法及装置
CN105354258B (zh) * 2015-10-22 2019-11-15 努比亚技术有限公司 一种更新网站数据缓存的装置及方法
CN106708417B (zh) * 2015-11-13 2020-08-11 阿里巴巴集团控股有限公司 缓存数据的管理方法及装置
CN105824902A (zh) * 2016-03-14 2016-08-03 乐视网信息技术（北京）股份有限公司 一种数据缓存方法及装置
CN107590023B (zh) * 2017-08-10 2020-10-02 深圳壹账通智能科技有限公司 数据处理方法、电子设备及计算机可读存储介质
CN108509323B (zh) * 2018-01-30 2021-10-08 深圳壹账通智能科技有限公司 基于日志分析的业务处理方法、装置及计算机设备
CN108647240B (zh) * 2018-04-04 2022-04-12 沈文策 一种统计访问量的方法、装置、电子设备及存储介质
CN109190070B (zh) * 2018-08-01 2021-10-15 北京奇艺世纪科技有限公司 一种数据处理方法、装置、系统及应用服务器
CN109299144B (zh) * 2018-08-22 2021-04-16 北京奇艺世纪科技有限公司 一种数据处理方法、装置、系统及应用服务器
CN109327716B (zh) * 2018-10-31 2020-09-11 北京达佳互联信息技术有限公司 延迟控制方法、延迟控制装置和计算机可读存储介质
CN111090389B (zh) * 2019-10-31 2021-06-29 苏州浪潮智能科技有限公司 一种缓存空间的释放方法、设备以及存储介质
CN111131856B (zh) * 2019-12-31 2022-03-11 北京奇艺世纪科技有限公司 一种缓存过期时间调整方法、装置、电子设备及存储介质
CN111813715A (zh) * 2020-06-29 2020-10-23 湖南快乐阳光互动娱乐传媒有限公司 一种基于被访问次数的数据缓存方法和装置
CN113093999B (zh) * 2021-05-07 2022-11-18 厦门市美亚柏科信息股份有限公司 一种基于自适应锁的缓存淘汰方法和系统
CN113612823A (zh) * 2021-07-22 2021-11-05 北京金山云网络技术有限公司 内容分发网络的缓存时长调整方法、装置和存储介质
CN114327672B (zh) * 2021-12-14 2024-04-05 中国平安财产保险股份有限公司 数据缓存时间设置方法、装置、计算机设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101499073A (zh) * 2008-01-29 2009-08-05 国际商业机器公司 基于访问频率的连续存储数据的存储管理方法和系统
CN102523285A (zh) * 2011-12-15 2012-06-27 杭州电子科技大学 一种基于对象分布式文件系统的存储缓存方法
CN102902730A (zh) * 2012-09-10 2013-01-30 新浪网技术(中国)有限公司 基于数据缓存的读数据方法及装置
CN103023998A (zh) * 2012-11-29 2013-04-03 网宿科技股份有限公司 基于内容分发网络边缘节点的临时跳转纠错方法和系统
CN103118133A (zh) * 2013-02-28 2013-05-22 浙江大学 基于文件访问频次的混合云存储方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101068341B (zh) * 2007-06-01 2010-08-04 中兴通讯股份有限公司 流媒体调度系统及其媒体文件调度方法
JP2009187376A (ja) * 2008-02-07 2009-08-20 Canon Inc ファイル管理装置、ファイル管理方法、及びプログラム
CN101520689B (zh) * 2009-04-17 2012-10-03 成都市华为赛门铁克科技有限公司 一种计算机存储设备控制方法、控制器及存储设备
CN102789469B (zh) * 2011-05-20 2016-01-06 腾讯科技（深圳）有限公司 页面更新方法及系统
CN103281397A (zh) * 2013-06-13 2013-09-04 苏州联讯达软件有限公司 一种基于时间戳和访问密度的数据缓存方法及系统
CN103916474B (zh) * 2014-04-04 2018-05-22 北京搜狗科技发展有限公司 缓存时间的确定方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101499073A (zh) * 2008-01-29 2009-08-05 国际商业机器公司 基于访问频率的连续存储数据的存储管理方法和系统
CN102523285A (zh) * 2011-12-15 2012-06-27 杭州电子科技大学 一种基于对象分布式文件系统的存储缓存方法
CN102902730A (zh) * 2012-09-10 2013-01-30 新浪网技术(中国)有限公司 基于数据缓存的读数据方法及装置
CN103023998A (zh) * 2012-11-29 2013-04-03 网宿科技股份有限公司 基于内容分发网络边缘节点的临时跳转纠错方法和系统
CN103118133A (zh) * 2013-02-28 2013-05-22 浙江大学 基于文件访问频次的混合云存储方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"信息中心网络中的内置缓存技术研究";张国强 等;《软件学报》;20131101;全文 *
"普适计算中基于上下文信息的缓存管理算法";陈慕冰 等;《小型微型计算机系统》;20071031;第28卷(第10期);全文 *

Also Published As

Publication number Publication date
CN104133880A (zh) 2014-11-05

Similar Documents

Publication Publication Date Title
CN104133880B (zh) 一种设置文件缓存时间的方法与装置
CN102439938B (zh) 用于按照媒体播放器的需要控制实时流的下载速率的方法
CN113037869B (zh) 用于内容分发网络系统的回源的方法和装置
CN105354258B (zh) 一种更新网站数据缓存的装置及方法
CN106791889B (zh) 一种视频处理方法及系统、分布式对象存储系统
CN107241374B (zh) 负载平衡系统、负载平衡装置及拓朴管理方法
CN103312629A (zh) 一种cdn流量分配方法、设备及系统
CN102204324A (zh) 提高移动互联网用户访问速度的方法及设备
CN102629938A (zh) 对网络视频加载进行视频加速的方法和系统
US20200320154A1 (en) A webpage loading method, webpage loading system and server
CN103200231B (zh) 策略控制方法及系统
CN103401946A (zh) Http上传加速方法和系统
CN103414657A (zh) 一种跨数据中心的资源调度方法、超级调度中心和系统
CN109962961A (zh) 一种内容分发网络cdn服务节点的重定向方法及系统
CN105898391A (zh) 在线媒体服务的带宽分配方法及系统
EP2503762A1 (en) Method, apparatus and system for cache collaboration
CN110401731B (zh) 用于分配内容分发节点的方法和装置
CN102547393B (zh) 移动互联网视频内容交互系统及其方法
CN101895550B (zh) 一种应用于互联网网站的兼容动静态内容的缓冲加速方法
JP2021522583A (ja) サーバー構成方法および装置
CN110874314A (zh) 压测方法、装置、设备和介质
CN103763371A (zh) 一种动态控制移动端应用缓存的方法
CN106131129B (zh) 全局负载均衡的数据同步时间管理的方法和装置
CN104133881B (zh) 一种调整文件缓存时间的方法与装置
CN104244334A (zh) 一种确定网络服务质量的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 705-708, room two, No. 121, north south of the Five Ridges Avenue, Chancheng District, Guangdong, Foshan, 528000

Applicant after: GUANGDONG RUIJIANG CLOUD COMPUTING CO., LTD.

Address before: Chancheng District of Guangdong city of Foshan province south of the Five Ridges 528000 Avenue North 121 East International A District Office 7-8

Applicant before: Guangdong Efly Network Co., Ltd.

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant