CN114036195A - 一种数据请求处理方法、装置、服务器和存储介质 - Google Patents
一种数据请求处理方法、装置、服务器和存储介质 Download PDFInfo
- Publication number
- CN114036195A CN114036195A CN202111330999.2A CN202111330999A CN114036195A CN 114036195 A CN114036195 A CN 114036195A CN 202111330999 A CN202111330999 A CN 202111330999A CN 114036195 A CN114036195 A CN 114036195A
- Authority
- CN
- China
- Prior art keywords
- target
- data
- request
- identifier
- cache
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 21
- 230000004044 response Effects 0.000 claims abstract description 114
- 238000000034 method Methods 0.000 claims abstract description 15
- 238000012545 processing Methods 0.000 claims description 24
- 230000015654 memory Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 5
- 238000001514 detection method Methods 0.000 claims description 4
- 230000015556 catabolic process Effects 0.000 abstract description 4
- 230000003287 optical effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种数据请求处理方法、装置、服务器和存储介质,该方法包括:接收客户端发送的目标数据请求,目标数据请求包括目标请求标识;检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据;若存在目标缓存数据,则从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间;若目标强制过期标识为第一标识,则从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。通过本发明实施例的技术方案,可以解决缓存被击穿而导致性能下降的问题。
Description
技术领域
本发明实施例涉及计算机技术,尤其涉及一种数据请求处理方法、装置、服务器和存储介质。
背景技术
随着计算机技术的快速发展,往往存在高并发请求的情况。为了提高用户访问速度,通常是将数据库中访问热度较高的数据存储至缓存中,以便后续直接从缓存中获得响应数据,提高访问速度。
目前,当数据库中的数据发生修改时,会直接将缓存中的旧数据进行清除,以便及时回收这些内存,提高缓存的高效利用。然而,在缓存中的旧数据被清除之后,会导致缓存被击穿,使得大量请求会直接查询数据库,导致数据库压力增大,耗时增高,性能下降。
发明内容
本发明实施例提供了一种数据请求处理方法、装置、服务器和存储介质,以解决缓存被击穿而导致性能下降的问题。
第一方面,本发明实施例提供了一种数据请求处理方法,包括:
接收客户端发送的目标数据请求,所述目标数据请求包括目标请求标识;
检测具有预设缓存结构的缓存中是否存在所述目标请求标识对应的目标缓存数据;
若存在所述目标缓存数据,则从所述目标缓存数据中获取所述目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
若所述目标强制过期标识为第一标识,则从所述目标缓存数据中获取所述目标请求标识对应的目标响应数据,并在当前请求时间大于或等于所述目标逻辑过期时间时,对所述目标缓存数据进行异步更新。
第二方面,本发明实施例还提供了一种数据请求处理装置,包括:
目标数据请求接收模块,用于接收客户端发送的目标数据请求,所述目标数据请求包括目标请求标识;
目标缓存数据检测模块,用于检测具有预设缓存结构的缓存中是否存在所述目标请求标识对应的目标缓存数据;
过期信息获取模块,用于若存在所述目标缓存数据,则从所述目标缓存数据中获取所述目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
目标响应数据获取模块,用于若所述目标强制过期标识为第一标识,则从所述目标缓存数据中获取所述目标请求标识对应的目标响应数据,并在当前请求时间大于或等于所述目标逻辑过期时间时,对所述目标缓存数据进行异步更新。
第三方面,本发明实施例还提供了一种服务器,所述服务器包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例所提供的数据请求处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明实施例所提供的数据请求处理方法。
本发明实施例通过预先针对每个请求的响应数据是否需要进行强制过期以及响应数据所允许延迟更新的最大延迟时长设置每个请求标识对应的强制过期标识和逻辑过期时间。若目标请求标识对应的目标强制过期标识为第一标识,即不需要强制过期,则直接从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新,从而通过基于强制过期标识和逻辑过期时间进行异步更新的方式可以在满足业务需求的同时保证缓存中始终有数据,避免缓存被击穿,降低数据库压力,提高性能。
附图说明
图1是本发明实施例一提供的一种数据请求处理方法的流程图;
图2是本发明实施例二提供的一种数据请求处理方法的流程图;
图3是本发明实施例三提供的一种数据请求处理装置的结构示意图;
图4是本发明实施例四提供的一种服务器的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种数据请求处理方法的流程图,本实施例可适用于高并发场景下,对数据请求进行响应处理的情况。该方法可以由数据请求处理装置来执行,该装置可以由软件和/或硬件的方式来实现,集成于服务器中。如图1所示,该方法具体包括以下步骤:
S110、接收客户端发送的目标数据请求,目标数据请求包括目标请求标识。
其中,目标数据请求可以是指大量客户端当前发送的各个待处理数据请求中的任一数据请求。目标请求标识可以用于唯一标识目标数据请求,以便区分不同的数据请求。
具体地,服务器可以接收到客户端发送的当前待处理的目标数据请求。
S120、检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据。
其中,预设缓存结构可以是预先设置的用于存储缓存数据的数据结构。示例性地,预设缓存结构可以为键值对结构。每个键值对信息中的key键信息为请求标识,相应的value值信息为该请求标识对应的缓存数据。缓存数据可以包括:强制过期标识、逻辑过期时间和响应数据。强制过期标识可以用于表征是否需要对缓存的响应数据进行强制过期。例如,强制过期标识可以包括第一标识和第二标识。第一标识可以是指不需要强制过期的标识。第二标识可以是指需要强制过期的标识,即请求获得的响应数据必须是实时数据。逻辑过期时间可以基于响应数据所允许延迟更新的最大延迟时长进行设置。
具体地,可以在缓存初始化时,将数据库中访问热度较高的各个响应数据以及相应的强制过期标识和逻辑过期时间直接存储到具有预设缓存结构的缓存中;也可以基于请求进行响应数据的缓存,以便提高缓存利用效率。例如,在首次接收到某个请求标识对应的数据请求时,从数据库中获取该请求标识对应的响应数据,并基于业务需求配置该响应数据对应的强制过期标识和逻辑过期时间后进行缓存,从而在数据访问时再进行缓存可以保证缓存的高效利用。当接收到目标数据请求时,可以检测缓存中是否存在目标请求标识所对应的目标缓存数据,以便确定是否可以直接从缓存中获取目标响应数据。
示例性地,S120可以包括:检测缓存中是否存在目标请求标识对应的目标键信息;若存在,则将目标键信息对应的目标值信息作为目标缓存数据。具体地,可以将目标请求标识与缓存中的各个key键信息进行匹配,若匹配成功,则表明存在目标缓存数据,此时将匹配成功的目标键信息对应的目标值信息作为目标缓存数据;若匹配失败,则表明目标数据请求为首次请求,当前缓存中还未缓存目标缓存数据,即确定不存在目标缓存数据。
S130、若存在目标缓存数据,则从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间。
其中,目标强制过期标识可以用于表征是否需要对缓存的目标响应数据进行强制过期。目标逻辑过期时间可以基于目标响应数据所允许延迟更新的最大延迟时长进行设置。
具体地,在缓存中存在目标请求标识对应的目标缓存数据时,可以直接从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间。
S140、若目标强制过期标识为第一标识,则从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。
其中,当前请求时间可以实时当前接收到目标数据请求的时间。
具体地,当目标强制过期标识为第一标识时,表明无需对缓存的目标响应数据进行强制过期,此时可以直接从缓存的目标缓存数据中获得目标请求标识对应的目标响应数据并返回至客户端,完成数据请求响应操作。本实施例可以同时检测当前请求时间是否大于或等于目标逻辑过期时间,若是,则表明已经到达允许延迟更新的延时时间,此时可以触发对目标缓存数据进行异步更新的操作,从而可以在保证响应效率的同时进行缓存数据的及时更新。本实施例通过基于逻辑过期时间进行异步更新的方式可以在满足业务需求的同时保证缓存中始终有数据,避免缓存被击穿,降低数据库压力,提高性能。
需要说明的是,本实施例仅对服务器端的数据请求处理方式进行改进,无需做业务层面的改进,从而使得业务无感知,降低了切换成本。
示例性地,S140中的“对目标缓存数据进行异步更新”,可以包括:通过异步线程,从数据库中获取目标请求标识对应的最新响应数据,并基于最新响应数据对目标缓存数据中的目标响应数据和目标逻辑过期时间进行更新。
其中,最新响应数据可以是指数据库中当前存储的目标请求标识对应的响应数据。最新响应数据可能是当前还未修改的原有响应数据,也可能是修改后的新响应数据。
具体地,可以开启一个异步线程,通过该异步线程,从数据库中获取目标请求标识对应的最新响应数据,并基于最新响应数据对缓存的目标缓存数据中的目标响应数据和目标逻辑过期时间进行更新覆盖,以保证缓存的目标响应数据为最新响应数据,使得其他数据请求可以从缓存中获取最新响应数据,并重新计算最新响应数据对应的目标逻辑过期时间。
示例性地,基于最新响应数据对目标缓存数据中的目标响应数据和目标逻辑过期时间进行更新,可以包括:基于最新响应数据,对目标缓存数据中的目标响应数据进行更新;基于当前更新时间和目标请求标识对应的逻辑有效时长,确定最新逻辑过期时间,并基于最新逻辑过期时间,对目标缓存数据中的目标逻辑过期时间进行更新。
其中,逻辑有效时长可以是指缓存的响应数据延迟更新的时长。逻辑有效时长可以基于目标响应数据所允许延迟更新的最大延迟时长进行设置。例如,逻辑有效时长可以小于或等于最大延迟时长。当前更新时间可以是指更新缓存的目标响应数据的时间。
具体地,可以将目标缓存数据中的目标响应数据更新为从数据库中获得的最新响应数据,并将当前更新时间与逻辑有效时长进行相加,获得的时间确定为最新逻辑过期时间,并将目标缓存数据中的目标逻辑过期时间更新为最新逻辑过期时间,从而每异步更新一次缓存中的目标响应数据,相应的目标逻辑过期时间也需要更新一次。
需要说明的是,本实施例是在接收到目标数据请求后,在目标强制过期标识为第一标识时,才会触发对目标缓存数据的异步更新操作,相比于定时触发异步更新操作而言,可以避免没有数据请求就触发异步更新操作而导致的资源浪费情况。
本实施例的技术方案,过预先针对每个请求的响应数据是否需要进行强制过期以及响应数据所允许延迟更新的最大延迟时长设置每个请求标识对应的强制过期标识和逻辑过期时间。若目标请求标识对应的目标强制过期标识为第一标识,即不需要强制过期,则直接从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新,从而通过基于强制过期标识和逻辑过期时间进行异步更新的方式可以在满足业务需求的同时保证缓存中始终有数据,避免缓存被击穿,降低数据库压力,提高性能。
在上述技术方案的基础上,在对S140之后,还可以包括:基于当前更新时间和目标请求标识对应的实际有效时长,确定最新实际过期时间,并基于最新实际过期时间,对目标请求标识对应的目标实际过期时间进行更新;其中,目标实际过期时间是用于表征删除目标请求标识和目标缓存数据的时间;目标实际过期时间大于目标逻辑过期时间。
其中,实际有效时长可以是指缓存的键值对信息对应的有效时长。本实施例中的实际有效时长大于逻辑有效时长。当前更新时间可以是指更新缓存的目标响应数据的时间。
具体地,可以将当前更新时间与实际有效时长进行相加,获得的时间确定为最新实际过期时间,并将目标请求标识对应的目标实际过期时间更新为最新实际过期时间,从而每更新一次缓存中的目标响应数据,相应的目标实际过期时间也更新一次。由于目标逻辑过期时间小于目标实际过期时间,从而在未到达目标实际过期时间时就会对目标实际过期时间进行一次更新,所以永远也不会到达目标实际过期时间,使得整个键值对信息永远都不会过期,即不会删除目标请求标识和目标缓存数据,使得缓存中始终有数据,进一步避免了缓存被击穿的情况。
实施例二
图2为本发明实施例二提供的一种数据请求处理方法的流程图,本实施例在上述实施例的基础上,对缓存中不存在目标请求标识对应的目标缓存数据时的处理方式进行了详细描述,并且还对目标强制过期标识为第二标识时的处理方式进行了详细描述其中与上述各实施例相同或相应的术语的解释在此不再赘述。
参见图2,本实施例提供的数据请求处理方法具体包括以下步骤:
S210、接收客户端发送的目标数据请求,目标数据请求包括目标请求标识。
S220、检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据,若是,则执行步骤S230,若否,则执行步骤S280。
S230、从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间。
S240、检测目标强制过期标识是第一标识还是第二标识,若是第一标识,则执行步骤S250;若是第二标识,则执行步骤S260。
S250、从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。
S260、对服务器集群中目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第一数据请求。
具体地,在高并发场景下,存在多个请求标识均为目标请求标识的当前数据请求,并且可以利用分布式集群对这些当前数据请求进行响应处理。当目标请求标识对应的目标强制过期标识为第二标识时,表明当前需要对目标响应数据进行强制过期,由于缓存的响应数据为旧响应数据,从而不能直接从缓存中获取响应数据,此时可以对各个当前数据请求进行分布式自旋锁,保证在服务器集群中同一时刻只有一个数据请求(即第一数据请求)可以进行数据库查询操作,以降低数据库压力。
S270、基于第一数据请求,从数据库中获取目标请求标识对应的最新响应数据,并基于最新响应数据对目标缓存数据中的目标响应数据进行更新,并在更新完成后,将目标强制过期标识从第二标识更新为第一标识。
具体地,处理第一数据请求的服务器可以从数据库中获取目标请求标识对应的最新响应数据返回至相应的客户端,并将缓存的目标缓存数据中的目标响应数据更新为最新响应数据,以保证缓存的响应数据为最新响应数据。在响应数据更新完成后,可以将目标强制过期标识从第二标识更新为第一标识,以保证目标数据请求等其他数据请求可以直接从缓存中获得最新响应数据。
需要说明的是,针对不允许延迟更新的响应数据,即实时数据,在数据库中存储的响应数据发生修改时,需要将缓存的该响应数据对应的强制过期标识从第一标识更新为第二标识,以进行强制过期,避免从缓存中获取旧的响应数据。
S280、对服务器集群中目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第二数据请求。
具体地,在缓存中不存在目标请求标识对应的目标缓存数据时,表明此次请求为首次请求,此时可以对多个请求标识均为目标请求标识的当前数据请求进行分布式自旋锁,保证在服务器集群中同一时刻只有一个数据请求(即第二数据请求)可以进行数据库查询操作,以降低数据库压力。
S290、基于第二数据请求,从数据库中获取目标请求标识对应的目标响应数据,并确定目标请求标识对应的目标缓存数据,并将目标请求标识和目标缓存数据存储至缓存中。
具体地,处理第二数据请求的服务器可以从数据库中获取目标请求标识对应的最新响应数据返回至相应的客户端,并基于该响应数据是否需要进行强制过期以及不需要强制过期时所允许延迟更新的最大延迟时长,配置该目标请求标识对应的目标强制过期标识和目标逻辑过期时间,从而获得目标请求标识对应的包含目标强制过期标识、目标逻辑过期时间和目标响应数据的目标缓存数据,并以键值对的方式可以将目标请求标识和目标缓存数据存储至缓存中,从而针对目标数据请求等其他数据请求可以通过返回执行步骤S230的操作从缓存中获得目标响应数据。
本实施例可以在服务器使用缓存失效时保证缓存的命中率,提高服务器稳定性,并且可以减少高并发场景下缓存击穿造成并发锁竞争问题或者数据库压力大问题。
本实施例的技术方案,通过在目标强制过期标识为第二标识或者缓存中不存在目标请求标识对应的目标缓存数据时,对服务器集群中目标请求标识对应的各个当前数据请求进行分布式自旋锁的方式,可以进一步避免缓存被击穿,降低数据库压力,提高性能。
以下是本发明实施例提供的数据请求处理装置的实施例,该装置与上述各实施例的数据请求处理方法属于同一个发明构思,在数据请求处理装置的实施例中未详尽描述的细节内容,可以参考上述数据请求处理方法的实施例。
实施例三
图3为本发明实施例三提供的一种数据请求处理装置的结构示意图,本实施例可适用于高并发场景下,对数据请求进行响应处理的情况。如图3所示,该装置具体包括:目标数据请求接收模块310、目标缓存数据检测模块320、过期信息获取模块330和目标响应数据获取模块340。
其中,目标数据请求接收模块310,用于接收客户端发送的目标数据请求,目标数据请求包括目标请求标识;目标缓存数据检测模块320,用于检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据;过期信息获取模块330,用于若存在目标缓存数据,则从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间;目标响应数据获取模块340,用于若目标强制过期标识为第一标识,则从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。
可选地,目标响应数据获取模块340,包括:
异步更新单元,用于:通过异步线程,从数据库中获取目标请求标识对应的最新响应数据,并基于最新响应数据对目标缓存数据中的目标响应数据和目标逻辑过期时间进行更新。
可选地,异步更新单元,具体用于:基于最新响应数据,对目标缓存数据中的目标响应数据进行更新;基于当前更新时间和目标请求标识对应的逻辑有效时长,确定最新逻辑过期时间,并基于最新逻辑过期时间,对目标缓存数据中的目标逻辑过期时间进行更新。
可选地,该装置还包括:
目标实际过期时间更新模块,用于:在对目标缓存数据进行异步更新之后,基于当前更新时间和目标请求标识对应的实际有效时长,确定最新实际过期时间,并基于最新实际过期时间,对目标请求标识对应的目标实际过期时间进行更新;
其中,目标实际过期时间是用于表征删除目标请求标识和目标缓存数据的时间;目标实际过期时间大于目标逻辑过期时间。
可选地,预设缓存结构为键值对结构;每个键值对信息中的键信息为请求标识,值信息为缓存数据,缓存数据包括:强制过期标识、逻辑过期时间和响应数据;
目标缓存数据检测模块320,具体用于:检测缓存中是否存在目标请求标识对应的目标键信息;若存在,则将目标键信息对应的目标值信息作为目标缓存数据。
可选地,该装置还包括:
第一数据请求确定模块,用于若目标强制过期标识为第二标识,则对服务器集群中目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第一数据请求;
数据更新模块,用于基于第一数据请求,从数据库中获取目标请求标识对应的最新响应数据,并基于最新响应数据对目标缓存数据中的目标响应数据进行更新,并在更新完成后,将目标强制过期标识从第二标识更新为第一标识。
可选地,该装置还包括:
第二数据请求确定模块,用于若缓存中不存在目标请求标识对应的目标缓存数据,则对服务器集群中目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第二数据请求;
目标缓存数据存储模块,用于基于第二数据请求,从数据库中获取目标请求标识对应的目标响应数据,并确定目标请求标识对应的目标缓存数据,并将目标请求标识和目标缓存数据存储至缓存中。
本发明实施例所提供的数据请求处理装置可执行本发明任意实施例所提供的数据请求处理方法,具备执行数据请求处理方法相应的功能模块和有益效果。
值得注意的是,上述数据请求处理装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
实施例四
图4为本发明实施例四提供的一种服务器的结构示意图。图4示出了适于用来实现本发明实施方式的示例性服务器12的框图。图4显示的服务器12仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图4所示,服务器12以通用计算设备的形式表现。服务器12的组件可以包括但不限于:一个或者多个处理器或者处理单元16,系统存储器28,连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。
服务器12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被服务器12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
系统存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(RAM)30和/或高速缓存存储器32。服务器12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图4未显示,通常称为“硬盘驱动器”)。尽管图4中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。系统存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40,可以存储在例如系统存储器28中,这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
服务器12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该服务器12交互的设备通信,和/或与使得该服务器12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且,服务器12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器20通过总线18与服务器12的其它模块通信。应当明白,尽管图中未示出,可以结合服务器12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序,从而执行各种功能应用以及数据处理,例如实现本发实施例所提供的一种数据请求处理方法步骤,该方法包括:
接收客户端发送的目标数据请求,目标数据请求包括目标请求标识;
检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据;
若存在目标缓存数据,则从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
若目标强制过期标识为第一标识,则从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。
当然,本领域技术人员可以理解,处理器还可以实现本发明任意实施例所提供的数据请求处理的技术方案。
实施例五
本实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的数据请求处理方法步骤,该方法包括:
接收客户端发送的目标数据请求,目标数据请求包括目标请求标识;
检测具有预设缓存结构的缓存中是否存在目标请求标识对应的目标缓存数据;
若存在目标缓存数据,则从目标缓存数据中获取目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
若目标强制过期标识为第一标识,则从目标缓存数据中获取目标请求标识对应的目标响应数据,并在当前请求时间大于或等于目标逻辑过期时间时,对目标缓存数据进行异步更新。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于:电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本领域普通技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个计算装置上,或者分布在多个计算装置所组成的网络上,可选地,他们可以用计算机装置可执行的程序代码来实现,从而可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件的结合。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种数据请求处理方法,其特征在于,包括:
接收客户端发送的目标数据请求,所述目标数据请求包括目标请求标识;
检测具有预设缓存结构的缓存中是否存在所述目标请求标识对应的目标缓存数据;
若存在所述目标缓存数据,则从所述目标缓存数据中获取所述目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
若所述目标强制过期标识为第一标识,则从所述目标缓存数据中获取所述目标请求标识对应的目标响应数据,并在当前请求时间大于或等于所述目标逻辑过期时间时,对所述目标缓存数据进行异步更新。
2.根据权利要求1所述的方法,其特征在于,所述对所述目标缓存数据进行异步更新,包括:
通过异步线程,从数据库中获取所述目标请求标识对应的最新响应数据,并基于所述最新响应数据对所述目标缓存数据中的所述目标响应数据和所述目标逻辑过期时间进行更新。
3.根据权利要求2所述的方法,其特征在于,所述基于所述最新响应数据对所述目标缓存数据中的所述目标响应数据和所述目标逻辑过期时间进行更新,包括:
基于所述最新响应数据,对所述目标缓存数据中的所述目标响应数据进行更新;
基于当前更新时间和所述目标请求标识对应的逻辑有效时长,确定最新逻辑过期时间,并基于所述最新逻辑过期时间,对所述目标缓存数据中的所述目标逻辑过期时间进行更新。
4.根据权利要求1所述的方法,其特征在于,在对所述目标缓存数据进行异步更新之后,还包括:
基于当前更新时间和所述目标请求标识对应的实际有效时长,确定最新实际过期时间,并基于所述最新实际过期时间,对所述目标请求标识对应的目标实际过期时间进行更新;
其中,所述目标实际过期时间是用于表征删除所述目标请求标识和所述目标缓存数据的时间;所述目标实际过期时间大于所述目标逻辑过期时间。
5.根据权利要求1所述的方法,其特征在于,所述预设缓存结构为键值对结构;每个键值对信息中的键信息为请求标识,值信息为缓存数据,所述缓存数据包括:强制过期标识、逻辑过期时间和响应数据;
所述检测具有预设缓存结构的缓存中是否存在所述目标请求标识对应的目标缓存数据,包括:
检测缓存中是否存在所述目标请求标识对应的目标键信息;
若存在,则将所述目标键信息对应的目标值信息作为目标缓存数据。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述方法还包括:
若所述目标强制过期标识为第二标识,则对服务器集群中所述目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第一数据请求;
基于所述第一数据请求,从数据库中获取所述目标请求标识对应的最新响应数据,并基于所述最新响应数据对所述目标缓存数据中的目标响应数据进行更新,并在更新完成后,将所述目标强制过期标识从所述第二标识更新为所述第一标识。
7.根据权利要求1-5任一项所述的方法,其特征在于,所述方法还包括:
若所述缓存中不存在所述目标请求标识对应的目标缓存数据,则对服务器集群中所述目标请求标识对应的各个当前数据请求进行分布式自旋锁,确定唯一一个处于未锁定状态的第二数据请求;
基于所述第二数据请求,从数据库中获取所述目标请求标识对应的目标响应数据,并确定所述目标请求标识对应的目标缓存数据,并将所述目标请求标识和所述目标缓存数据存储至缓存中。
8.一种数据请求处理装置,其特征在于,包括:
目标数据请求接收模块,用于接收客户端发送的目标数据请求,所述目标数据请求包括目标请求标识;
目标缓存数据检测模块,用于检测具有预设缓存结构的缓存中是否存在所述目标请求标识对应的目标缓存数据;
过期信息获取模块,用于若存在所述目标缓存数据,则从所述目标缓存数据中获取所述目标请求标识对应的目标强制过期标识和目标逻辑过期时间;
目标响应数据获取模块,用于若所述目标强制过期标识为第一标识,则从所述目标缓存数据中获取所述目标请求标识对应的目标响应数据,并在当前请求时间大于或等于所述目标逻辑过期时间时,对所述目标缓存数据进行异步更新。
9.一种服务器,其特征在于,所述服务器包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据请求处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的数据请求处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111330999.2A CN114036195A (zh) | 2021-11-11 | 2021-11-11 | 一种数据请求处理方法、装置、服务器和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111330999.2A CN114036195A (zh) | 2021-11-11 | 2021-11-11 | 一种数据请求处理方法、装置、服务器和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114036195A true CN114036195A (zh) | 2022-02-11 |
Family
ID=80143947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111330999.2A Pending CN114036195A (zh) | 2021-11-11 | 2021-11-11 | 一种数据请求处理方法、装置、服务器和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114036195A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116361309A (zh) * | 2023-05-31 | 2023-06-30 | 北京集度科技有限公司 | 数据查询系统和缓存数据更新方法 |
CN118170970A (zh) * | 2024-03-05 | 2024-06-11 | 深圳市道旅旅游科技股份有限公司 | 一种酒店查询请求的处理方法、系统、设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150052320A1 (en) * | 2013-08-14 | 2015-02-19 | International Business Machines Corporation | Reducing data backup time during incremental snapshots |
CN107943594A (zh) * | 2016-10-13 | 2018-04-20 | 北京京东尚科信息技术有限公司 | 数据获取方法和装置 |
CN109491928A (zh) * | 2018-11-05 | 2019-03-19 | 深圳乐信软件技术有限公司 | 缓存控制方法、装置、终端及存储介质 |
CN111259034A (zh) * | 2020-02-17 | 2020-06-09 | 腾讯科技(深圳)有限公司 | 一种缓存数据管理方法和相关装置 |
CN113010552A (zh) * | 2021-03-02 | 2021-06-22 | 腾讯科技(深圳)有限公司 | 数据处理方法、系统、计算机可读介质及电子设备 |
-
2021
- 2021-11-11 CN CN202111330999.2A patent/CN114036195A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150052320A1 (en) * | 2013-08-14 | 2015-02-19 | International Business Machines Corporation | Reducing data backup time during incremental snapshots |
CN107943594A (zh) * | 2016-10-13 | 2018-04-20 | 北京京东尚科信息技术有限公司 | 数据获取方法和装置 |
CN109491928A (zh) * | 2018-11-05 | 2019-03-19 | 深圳乐信软件技术有限公司 | 缓存控制方法、装置、终端及存储介质 |
CN111259034A (zh) * | 2020-02-17 | 2020-06-09 | 腾讯科技(深圳)有限公司 | 一种缓存数据管理方法和相关装置 |
CN113010552A (zh) * | 2021-03-02 | 2021-06-22 | 腾讯科技(深圳)有限公司 | 数据处理方法、系统、计算机可读介质及电子设备 |
Non-Patent Citations (3)
Title |
---|
G. J. AKASH; OJUS THOMAS LEE; S. D. MADHU KUMAR; PRIYA CHANDRAN; ALFREDO CUZZOCREA: "RAPID: A Fast Data Update Protocol in Erasure Coded Storage Systems for Big Data", 2017 17TH IEEE/ACM INTERNATIONAL SYMPOSIUM ON CLUSTER, CLOUD AND GRID COMPUTING (CCGRID), 31 December 2017 (2017-12-31) * |
李滨;侯小牛;常德海;陈欣;: ".Net环境下空间数据缓存方案的设计与实现", 海洋测绘, no. 03, 25 May 2009 (2009-05-25) * |
赵振宇;孙顺利;牛纪桢;: "索引替换策略在ERP缓存中的实现", 微处理机, no. 02, 15 April 2009 (2009-04-15) * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116361309A (zh) * | 2023-05-31 | 2023-06-30 | 北京集度科技有限公司 | 数据查询系统和缓存数据更新方法 |
CN116361309B (zh) * | 2023-05-31 | 2023-09-05 | 北京集度科技有限公司 | 数据查询系统和缓存数据更新方法 |
CN118170970A (zh) * | 2024-03-05 | 2024-06-11 | 深圳市道旅旅游科技股份有限公司 | 一种酒店查询请求的处理方法、系统、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109684307B (zh) | 一种数据存储方法、装置、设备及存储介质 | |
CN109491928B (zh) | 缓存控制方法、装置、终端及存储介质 | |
CN109710190B (zh) | 一种数据存储方法、装置、设备及存储介质 | |
US9350826B2 (en) | Pre-fetching data | |
CN114036195A (zh) | 一种数据请求处理方法、装置、服务器和存储介质 | |
CN106021445A (zh) | 一种加载缓存数据的方法及装置 | |
CN111444147B (zh) | 一种数据页创建方法、装置、终端设备及存储介质 | |
US8190857B2 (en) | Deleting a shared resource node after reserving its identifier in delete pending queue until deletion condition is met to allow continued access for currently accessing processor | |
CN111737564B (zh) | 一种信息查询方法、装置、设备及介质 | |
CN112307119A (zh) | 数据同步方法、装置、设备及存储介质 | |
CN109582649B (zh) | 一种元数据存储方法、装置、设备及可读存储介质 | |
CN112579307A (zh) | 一种物理锁资源的分配检测方法、装置及电子设备 | |
CN113760976A (zh) | 业务的处理方法、装置、设备及存储介质 | |
CN115408391A (zh) | 一种数据库表变更方法、装置、设备和存储介质 | |
CN112395141B (zh) | 一种数据页管理方法、装置、电子设备及存储介质 | |
CN112437125B (zh) | 信息并发处理方法、装置、电子设备及存储介质 | |
CN113282626A (zh) | 基于Redis的缓存数据的方法、装置、计算机设备及存储介质 | |
CN111240810B (zh) | 一种事务管理方法、装置、设备和存储介质 | |
CN113760950B (zh) | 指标数据查询方法、装置、电子设备以及存储介质 | |
CN114518833B (zh) | 用于存储管理的方法、电子设备和计算机程序产品 | |
CN115587119A (zh) | 一种数据库查询方法、装置、电子设备及存储介质 | |
CN111405015B (zh) | 一种数据处理方法、装置、设备及存储介质 | |
CN111061744B (zh) | 图数据的更新方法、装置、计算机设备及存储介质 | |
CN114637969A (zh) | 目标对象的鉴权方法及装置 | |
CN112395316A (zh) | 一种数据查询方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |