CN105868017B - 一种资源缓存方法及装置 - Google Patents
一种资源缓存方法及装置 Download PDFInfo
- Publication number
- CN105868017B CN105868017B CN201510030383.1A CN201510030383A CN105868017B CN 105868017 B CN105868017 B CN 105868017B CN 201510030383 A CN201510030383 A CN 201510030383A CN 105868017 B CN105868017 B CN 105868017B
- Authority
- CN
- China
- Prior art keywords
- resource
- caching
- time
- setting
- requested number
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Abstract
本发明提供一种资源缓存方法及装置。所述方法包括如下步骤:确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;缩短所述第一资源被请求次数的统计周期;若所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件,缩短所述第一资源的缓存时效。本发明所提供的方法和装置能够根据实际资源请求数目对资源的缓存进行更为科学合理的处理,使得缓存资源的同时缓存空间得到更为有效的利用。
Description
技术领域
本发明涉及网络技术,尤其涉及一种资源缓存方法及装置。
背景技术
现有的网络缓存系统都采用被动缓存方式,通过对用户的请求资源次数进行计算,采用不同的算法存储资源和置换资源,通过优化存储资源和置换资源的算法来提高缓存命中率。算法是缓存系统的核心,是根据评判后设置的具有一定灵活度和自学习能力的固定规则,同时管理员也会根据实际缓存效果对算法进行调优。然而,资源是有时效性的,资源的需求可能在短暂的时间内发生较为巨大的变化,例如,秒杀、抢购等,用户对网络资源的请求可能在急剧升高后急剧下降,此时若按照现有技术所采用的缓存算法本身已无法完成识别,难以根据实际情况对资源缓存进行有效的处理,造成用途不大的资源停留在缓存空间中,对缓存空间造成浪费。
发明内容
有鉴于此,本发明提供一种资源缓存方法及装置,能够根据实际资源请求数目对资源的缓存进行更为科学合理的处理,使得缓存资源的同时缓存空间得到更为有效的利用。
基于上述目的本法买那个提供的资源缓存方法,包括如下步骤:
确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
缩短所述第一资源被请求次数的统计周期;
若所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件,缩短所述第一资源的缓存时效。
可选的,所述方法还包括:
根据第二资源的被请求次数增长趋势信息和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
将所述第二资源加入缓存。
可选的,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源的步骤之后,还包括:
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
可选的,将所述第二资源加入缓存的步骤具体包括:
当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
可选的,缩短所述资源的缓存时效之后,还包括:
当满足下述条件时则进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
可选的,缩短所述资源的缓存时效的步骤之后,还包括:
获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
将第四资源主动加入缓存。
可选的,所述方法还包括:
根据设定的参数,获取需要主动缓存的第五资源;
将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
同时,本发明还提供一种资源缓存装置,包括:
判断目标确定模块:用于确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
统计周期管理模块:用于缩短所述第一资源被请求次数的统计周期;
缓存时效管理模块:用于在所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件的情况下,缩短所述第一资源的缓存时效。
可选的,所述方法还包括:
主动缓存判断模块:用于根据第二资源的被请求次数增长趋势信息被和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
第一主动缓存模块:用于将所述第二资源加入缓存。
可选的,所述装置还包括:
主动缓存时间设定第一模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
主动缓存时间设定第二模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
可选的,所述主动缓存模块具体包括:
第一主动缓存单元:用于当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
第二主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
第三主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
可选的,所述统计周期管理模块在满足下述条件时进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
可选的,所述装置还包括:
第四资源获取模块:用于获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
第四资源主动缓存模块:用于将第四资源主动加入缓存。
可选的,所述装置还包括:
第五资源主动获取模块:用于根据设定的参数,获取需要主动缓存的第五资源;
第二主动缓存模块:用于将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
从上面所述可以看出,本发明及其实施例所提供的资源缓存方法及装置,相对于现有技术中的在资源的被请求次数超过设定的缓存条件对应的次数之后将资源加入缓存的方式,能够根据资源的相关信息进行自学习,判断资源的缓存必要性,从而将时效较短的资源在较短的时间内移出缓存,提高缓存的空间利用率。同时本发明实施例提供的方法和装置,能够将被请求次数未达到设定的缓存条件、但被请求次数增长趋势较快且在最近时间内持续增长的资源主动加入缓存,此外还对资源的缓存时效进行调整,能够更加有效地管理缓存中的资源。
附图说明
图1为本发明实施例所提供的资源缓存方法流程示意图;
图2为本发明实施例所提供的资源缓存装置结构示意图。
具体实施方式
为了给出有效的实现方案,本发明提供了下述实施例,以下结合说明书附图对本发明实施例进行说明。
本发明首先提供一种资源缓存方法,如图1所示,包括如下步骤:
步骤101:确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
步骤102:缩短所述第一资源被请求次数的统计周期;
步骤103:若所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件,缩短所述第一资源的缓存时效。
从上面所述可以看出,本发明提供的资源缓存方法,可以有效地针对网络实际使用过程中资源请求数在急剧增高以后突然下降的情况,在网络实际运行过程中,诸如秒杀、抢购等场景下,用户对资源的请求数会在短时间内急剧增高,当检测到所述资源的请求数在设定的时间内被请求的次数满足缓存条件时,将资源加入缓存,并且由于该资源在短时间内增长率超过设定的限值,本发明会相应缩短资源的被请求次数的统计周期,以应对这种状况。在秒杀、抢购等可能出现资源被请求数急剧增加然后又急剧降低的情况下,本发明所提供的方法能够有效管理资源缓存的时间,提高缓存的利用率。
在本发明具体实施例中,若第一资源在较短的时间内被请求数急剧增加,那么当第一资源的被请求数目增加到一定数值时,即资源被请求的次数满足预设的缓存条件时,第一资源被加入缓存。当检测到所述第一资源在较短时间内被请求次数增长率过高时,将第一资源作为判断目标,检测第一资源在更短时间内的被请求数增长率,判断是否需要缩短第一资源的缓存时效。
在本发明具体实施例中,所述第一资源在统计周期内的增长率的下降程度高于设定的下降程度判断条件,其中所述下降程度判断条件可以是统计周期内初始增长率与结尾增长率之差为某一第二限值。例如,设定下降程度判断条件为:在统计周期内被请求次数的增长率下降10%,那么若实际情况下第一资源的被请求数增长率下降超过10%,则可确定第一资源在统计周期内的增长率的下降程度高于设定的下降程度判断条件。
所述下降程度判断条件也可以是统计周期内增长率的下降率为某一第三限值。例如,设定下降程度判断条件为:在统计周期内第一资源的被请求次数增长率的下降率为10%。那么若实际情况下,在统计周期初始时,第一资源的被请求次数增长率为20%;在统计周期结束时,第一资源的被请求次数增长率为18%,在统计周期内,第一资源的被请求次数增长率的下降率为10%,达到了下降程度判断条件,可确定第一资源在统计周期内的增长率下降程度不低于设定的下降程度判断条件。
在本发明具体实施例中,缩短所述第一资源的缓存时效时,可以根据第一资源在当前统计周期内的被请求次数增长率的下降程度缩小第一资源的缓存时效。例如,当第一资源在统计周期内的被请求次数增长率下降的百分点为n时,将第一资源的缓存时效缩小n个百分点;当第一资源在统计周期内的被请求次数增长率的下降率为a时,将第一资源的缓存时效缩小后的值为缩小之前的时效值乘以a。
在本发明具体实施例中,在将资源加入缓存、或将资源从缓存中清除的同时,会将资源的相关信息进行记录和收集,对这些相关信息进行自学习,预测资源的被请求次数变化,将可能在短时间内被请求次数急剧增高的资源主动加入缓存。
在本发明一些实施例中,所述方法还包括:
所述方法还包括:
根据第二资源的被请求次数增长趋势信息和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
将所述第二资源加入缓存。
现有技术中网络资源缓存均采用被动缓存的方式,通过对用户的请求资源次数进行统计,当用户对资源的请求数目达到设定值时,将该资源加入缓存。本发明实施例中,还提供了一种主动缓存的方式,通过检测资源被请求次数的变化趋势,判断资源是否需要主动加入缓存。在实际应用中,用户对某一资源的请求数达到设定值时,该资源会被加入缓存,当该资源在缓存中存在一定的时间之后,会被移出缓存。但是在大多数情况下,用户对资源的需求是不断变化的,用户对资源的需求可能在资源在加入缓存之后、资源的缓存时效结束之前减少,而用户对其它资源的需求正在上涨,为了能够及时有效地对资源进行缓存,需要在缓存时主动感知用户对资源需求的变化。
在类似于秒杀、抢购等实际场景下,用户对资源的需求可能在某一时间点大量增高,但是在用户对资源的请求次数增加到能够加入缓存的次数限值之前,可能用户对资源的请求次数的变化率会有较大的升高。对于其他一些资源,例如网络上的电视剧、视频资源等,可能从资源产生到资源的请求次数达到加入缓存的次数限值需要一定的时间,但是可能当前缓存中存在剩余空间,或在缓存空间中存在的其他资源用户需求量已降低,此时主动将资源加入缓存,有利于在资源的请求数目急剧增加的时候用户能够更加及时地在缓存中获得资源。
在本发明具体实施例中,对资源缓存时将资源的相关信息进行记录,使得系统可以对相关信息进行学习,从而来判断是否需要主动缓存。例如,在资源的被请求次数未达到缓存条件时,对于被请求次数平稳持续上升的资源对资源的增长趋势进行自学习,可预测资源的被请求次数达到缓存条件的时间点,在前述时间点之前的恰当时候将该资源预先存储在缓存中,以避免因为缓存时间较长而导致用户对资源需求量较多时无法及时通过缓存提供该资源。
在本发明一些实施例中,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源的步骤之后,还包括:
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
在实际应用中,若是资源被确定为待主动缓存的资源,那么说明该资源需求时间较长,或在较长时间内用户对该资源的需求持续不降低,那么相比用户在较短的时间内需求次数较多的资源而言,这一类资源需要在较长时间内存在于缓存中。因此,在本发明上述实施例中,将资源的被请求次数增长趋势信息作为依据,判断资源是否需要长时间保存在内存中。如此,减少了内存中的资源置换、存放、清除次数,同时也进一步提高缓存的效率。
在本发明一些实施例中,将所述第二资源加入缓存的步骤具体包括:
当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
在本发明的具体实施例中,缓存中存储的资源可能在用户较短时间的需求过后,被请求次数不再增加;当资源的被请求次数不再增加或增长趋势变缓时,该资源可能不再是用户所需求的资源,也可能该资源的被请求次数按照一定的周期出现反复的增长或降低。例如,电视剧、电视节目视频提供网站,可能在视频资源更新之后,用户对资源的需求量出现较大幅度的增高,在视频资源下一次更新之前,用户对资源的需求较低甚至没有。在这种情况下,需要同时感知资源被确定为待主动缓存的资源的次数、资源被请求次数、资源被请求次数增长趋势,对这些信息进行自学习,根据自学习的结果对多个资源进行缓存。
在本发明具体实施例中,对于一个具体资源,系统记录有该资源的相关信息,包括资源的被请求次数增长趋势信息、资源被判定为待主动缓存的资源次数以及时间、资源被请求次数,根据资源被判定为待主动缓存的资源次数以及时间,可以得知该资源在最近时间段内被确定为待主动缓存的资源的次数。在具体实施例中,设置第四时间段为以当前时间点为终点的任意时间段,可以对资源的被请求次数增长趋势、资源在最近时间段内被确定为待主动缓存的资源次数、资源被请求次数分别设置一定的算法,例如赋予一定的权重值,然后将三者按照一定算法计算之和叠加,作为所述缓存权重。
在本发明一些实施例中,缩短所述资源的缓存时效之后,还包括:
当满足下述条件时则进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
在本发明具体实施例中,当在设定的第一时间内、资源被请求次数满足预设的缓存条件,且所述被请求次数的增长率超过设定的第一限值时,例如,第一资源被请求次数增长了1倍,那么将第一资源的统计周期缩小至原来的二分之一;若第一资源的被请求次数在新的统计周期内又增长到原来的三倍,那么将第一资源的统计周期缩小至原来的三分之一。
在本发明一些实施例中,缩短所述资源的缓存时效的步骤之后,还包括:
获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
将第四资源主动加入缓存。
在一些实际情况下,例如抢购,现有技术中大多数抢购网站会按照一定的时间间隔不断推出新的抢购商品,因而对于这样的网络资源而言,用户的请求次数会按照一定周期出现急剧增高以及急剧降低。通过本发明上述实施例的技术方案,可以预测该抢购网站可能会在后续时间内被请求次数急剧增高的资源,从而在资源的被请求次数急剧增高之前将该资源主动加入缓存,避免该资源的被请求次数急剧增高时不能及时将该资源加入缓存的情况。
在本发明的一些实施例中,所述方法还包括:
根据设定的参数,获取需要主动缓存的第五资源;
将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
在本发明具体实施例中,网络管理方可能通过一些渠道获取某一资源在特定的时间点将出现被请求次数大幅度增长的信息,在这种情况下,设置一些参数,在设定的时间点,对设定网站信息来源的设定资源进行主动缓存,可以在资源的被请求次数大幅度增加之前将资源缓存,以免因缓存速度较慢导致用户请求该资源时获取资源速度受到影响。
同时,本发明提供一种资源缓存装置,结构如图2所示,包括:
判断目标确定模块:用于确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
统计周期管理模块:用于缩短所述第一资源被请求次数的统计周期;
缓存时效管理模块:用于在所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件的情况下,缩短所述第一资源的缓存时效。
在本发明一些实施例中,所述方法还包括:
主动缓存判断模块:用于根据第二资源的被请求次数增长趋势信息和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
第一主动缓存模块:用于将所述第二资源加入缓存。
在本发明的一些实施例中,所述装置还包括:
主动缓存时间设定第一模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
主动缓存时间设定第二模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
在本发明的一些实施例中,所述主动缓存模块具体包括:
第一主动缓存单元:用于当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
第二主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
第三主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
在本发明的一些实施例中,所述统计周期管理模块在满足下述条件时进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
在本发明的一些实施例中,所述装置还包括:
第四资源获取模块:用于获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
第四资源主动缓存模块:用于将第四资源主动加入缓存。
在本发明的一些实施例中,所述装置还包括:
第五资源主动获取模块:用于根据设定的参数,获取需要主动缓存的第五资源;
第二主动缓存模块:用于将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
从上面所述可以看出,本发明及其实施例所提供的资源缓存方法及装置,相对于现有技术中的在资源的被请求次数超过设定的缓存条件对应的次数之后将资源加入缓存的方式,能够根据资源的相关信息进行自学习,判断资源的缓存必要性,从而将时效较短的资源在较短的时间内移出缓存,提高缓存的空间利用率。同时本发明实施例提供的方法和装置,能够将被请求次数未达到设定的缓存条件、但被请求次数增长趋势较快且在最近时间内持续增长的资源主动加入缓存,此外还对资源的缓存时效进行调整,能够更加有效地管理缓存中的资源。
应当理解,本说明书所描述的多个实施例仅用于说明和解释本发明,并不用于限定本发明。并且在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (14)
1.一种资源缓存方法,其特征在于,包括如下步骤:
确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
缩短所述第一资源被请求次数的统计周期;
若所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件,缩短所述第一资源的缓存时效。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据第二资源的被请求次数增长趋势信息和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
将所述第二资源加入缓存。
3.根据权利要求2所述的方法,其特征在于,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源的步骤之后,还包括:
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
4.根据权利要求2所述的方法,其特征在于,将所述第二资源加入缓存的步骤具体包括:
当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
5.根据权利要求1所述的方法,其特征在于,缩短所述资源的缓存时效之后,还包括:
当满足下述条件时则进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
6.根据权利要求1所述的方法,其特征在于,缩短所述资源的缓存时效的步骤之后,还包括:
获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
将第四资源主动加入缓存。
7.根据权利要求1-6中任意一项所述的方法,其特征在于,所述方法还包括:
根据设定的参数,获取需要主动缓存的第五资源;
将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
8.一种资源缓存装置,其特征在于,包括:
判断目标确定模块:用于确定在设定的第一时间内、资源被请求的次数满足预设的缓存条件且所述被请求的次数的增长率超过设定的第一限值的第一资源为判断目标;
统计周期管理模块:用于缩短所述第一资源被请求次数的统计周期;
缓存时效管理模块:用于在所述第一资源在统计周期内的增长率的下降程度不低于设定的下降程度判断条件的情况下,缩短所述第一资源的缓存时效。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
主动缓存判断模块:用于根据第二资源的被请求次数增长趋势信息和被请求次数记录,确定在设定的第二时间内所述资源被请求次数的增长率超过设定第二限值的第二资源为待主动缓存的资源;
第一主动缓存模块:用于将所述第二资源加入缓存。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
主动缓存时间设定第一模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数超过设定的第一等级时,将所述第二资源的缓存释放时间进行相应的延长;
主动缓存时间设定第二模块:用于当根据所述第二资源的被请求次数增长趋势信息判断所述第二资源在设定时间内被确定为待主动缓存的资源的次数低于设定的第二等级时,将所述第二资源的缓存释放时间进行相应的缩短。
11.根据权利要求9所述的装置,其特征在于,所述主动缓存模块具体包括:
第一主动缓存单元:用于当所述第二资源已加入缓存、且缓存中存在足够空间时,将所述第二资源直接加入缓存;
第二主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在距离缓存时效的时间小于设定的第三时间的资源,则在缓存中将距离缓存时效的时间最短的资源置换为所述第二资源;
第三主动缓存单元:用于当所述第二资源尚未加入缓存、且缓存中不存在足够空间时,在已缓存的资源中,若存在缓存权重值小于所述第二资源的缓存权重值的资源,则将缓存权重值最小的资源置换为所述第二资源;
所述缓存权重为根据资源的增长趋势信息和资源在设定的第四时间内被判定为待主动缓存的资源的次数以及被请求次数、按照设定算法计算的值。
12.根据权利要求8所述的装置,其特征在于,所述统计周期管理模块在满足下述条件时进一步缩短所述第一资源被请求次数的统计周期:
所述第一资源在当前被请求次数统计周期内的被请求次数增长率超过设定的限值。
13.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第四资源获取模块:用于获取网站信息来源与所述第一资源的网站信息来源相同、且资源分类与所述第一资源相关的第四资源;
第四资源主动缓存模块:用于将第四资源主动加入缓存。
14.根据权利要求8-13中任意一项所述的装置,其特征在于,所述装置还包括:
第五资源主动获取模块:用于根据设定的参数,获取需要主动缓存的第五资源;
第二主动缓存模块:用于将第五资源按照设定参数中所指示的时间加入缓存;
所述设定的参数包括:第五资源的网站信息来源、第五资源的标签信息、第五资源加入缓存的时间点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510030383.1A CN105868017B (zh) | 2015-01-21 | 2015-01-21 | 一种资源缓存方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510030383.1A CN105868017B (zh) | 2015-01-21 | 2015-01-21 | 一种资源缓存方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105868017A CN105868017A (zh) | 2016-08-17 |
CN105868017B true CN105868017B (zh) | 2019-04-05 |
Family
ID=56622973
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510030383.1A Expired - Fee Related CN105868017B (zh) | 2015-01-21 | 2015-01-21 | 一种资源缓存方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105868017B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111104586B (zh) * | 2018-10-25 | 2023-04-07 | 北京国双科技有限公司 | 信息增长度的确定方法、装置、存储介质及处理器 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103268321A (zh) * | 2013-04-19 | 2013-08-28 | 中国建设银行股份有限公司 | 高并发交易数据处理方法和装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001344153A (ja) * | 2000-05-30 | 2001-12-14 | Nec Corp | マルチプロセッサシステムのキャッシュメモリ制御装置 |
-
2015
- 2015-01-21 CN CN201510030383.1A patent/CN105868017B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103268321A (zh) * | 2013-04-19 | 2013-08-28 | 中国建设银行股份有限公司 | 高并发交易数据处理方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN105868017A (zh) | 2016-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104182801B (zh) | 一种预测网站访问量的方法及设备 | |
CN106888381B (zh) | 一种数据资源存储方法及装置 | |
CN109190070A (zh) | 一种数据处理方法、装置、系统及应用服务器 | |
CN109787915B (zh) | 网络访问的流量控制方法、装置、电子设备及存储介质 | |
CN102681999A (zh) | 一种用户行为信息收集及信息发送方法及装置 | |
CN107391137B (zh) | 电子地图显示方法、装置和系统 | |
CN104822068A (zh) | 流媒体代理缓存替换方法及装置 | |
CN112311578B (zh) | 基于深度强化学习的vnf调度方法及装置 | |
CN103150245B (zh) | 确定数据实体的访问特性的方法和存储控制器 | |
CN105703927A (zh) | 一种资源分配方法、网络设备和网络系统 | |
CN107292388A (zh) | 一种基于神经网络的热点数据的预测方法及系统 | |
CN102624865A (zh) | 集群负载预测方法及分布式集群管理系统 | |
CN107346267A (zh) | 一种基于numa架构的cpu性能优化方法和装置 | |
CN105099798A (zh) | 一种基于指标体系的主站运行在线监测与评估方法 | |
CN103713852B (zh) | 一种信息处理方法、服务平台及电子设备 | |
CN112329997A (zh) | 电力需求负荷预测方法及系统、电子设备和存储介质 | |
CN109413694A (zh) | 一种基于内容流行度预测的小小区缓存方法及装置 | |
CN105868017B (zh) | 一种资源缓存方法及装置 | |
CN104239230B (zh) | 一种数据块迁移方法及装置 | |
Ben Hassine et al. | Popularity prediction–based caching in content delivery networks | |
CN111078735B (zh) | 一种查询请求处理方法及装置 | |
CN111401772A (zh) | 客服请求分配方法、装置及设备 | |
CN109120424A (zh) | 一种带宽调度方法及装置 | |
CN107707597A (zh) | 一种突发热点访问均衡处理方法及装置 | |
CN104298670B (zh) | 进行层级式数据读取的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190405 Termination date: 20210121 |