CN111125247A

CN111125247A - 一种redis客户端缓存方法、装置、设备及存储介质

Info

Publication number: CN111125247A
Application number: CN201911244701.9A
Authority: CN
Inventors: 范得原
Original assignee: Beijing Inspur Data Technology Co Ltd
Current assignee: Beijing Inspur Data Technology Co Ltd
Priority date: 2019-12-06
Filing date: 2019-12-06
Publication date: 2020-05-08

Abstract

本发明公开了一种redis客户端缓存方法、装置、设备及存储介质，该方法包括：监控对redis数据库中各数据的访问，并基于监控得到的信息确定出所述redis数据库中的热点数据；将所述热点数据发送至与所述redis数据库对应的客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问；如果所述redis数据库中的热点数据发生变化，则将所述热点数据发生的变化同步至所述客户端，以使所述客户端缓存的热点数据与所述redis数据库中的热点数据相同。本申请通过这种客户端缓存热点数据的方式，能够大大减少客户端到redis数据库中进行数据访问的次数，进而有效减轻redis数据库的压力。

Description

一种redis客户端缓存方法、装置、设备及存储介质

技术领域

本发明涉及redis数据库技术领域，更具体地说，涉及一种redis客户端缓存方法、装置、设备及存储介质。

背景技术

redis是当下非常流行的一种内存存储数据库，因其读写性能高的特点被大量用于网站服务端缓存，以减轻传统后台数据库(如MySQL、Oracle等)的压力。但是Redis在高并发量下仍存在性能瓶颈，如客户端每次从服务器redis数据库中读取10kb数据，每秒10000请求，那么服务端网速大约是100Mb/s(10*10000/1024)，已经是千兆网卡承载的最大流量，高峰期时此数值将进一步增长。

发明内容

本发明的目的是提供一种redis客户端缓存方法、装置、设备及存储介质，能够大大减少客户端到redis数据库中进行数据访问的次数，进而有效减轻redis数据库的压力。

为了实现上述目的，本发明提供如下技术方案：

一种redis客户端缓存方法，包括：

监控对redis数据库中各数据的访问，并基于监控得到的信息确定出所述redis数据库中的热点数据；

将所述热点数据发送至与所述redis数据库对应的客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问；

如果所述redis数据库中的热点数据发生变化，则将所述热点数据发生的变化同步至所述客户端，以使所述客户端缓存的热点数据与所述redis数据库中的热点数据相同。

优选的，还包括：

如果所述客户端与具有所述redis数据库的服务器之间断开连接，则在该连接重新建立后，删除所述客户端缓存的全部热点数据，并将所述redis数据库中的热点数据均发送至所述客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问。

优选的，在所述客户端与所述服务器之间的连接重新建立之后，还包括：

如果所述客户端与所述服务器之间断开连接的时长达到预设时长，则执行删除所述客户端缓存的全部热点数据的步骤，如果所述客户端与所述服务器之间断开连接的时长未达到预设时长，则判断在所述客户端与所述服务器之间断开连接时所述redis数据库中的热点数据是否发生变化，如果发生变化，则将发生的变化同步至所述客户端，如果未发生变化，则确定无需进行热点数据的同步。

优选的，还包括：

接收所述客户端发送的热点数据请求，并基于所述热点数据请求将热点数据发送至所述客户端或者将所述热点数据发生的变化同步至所述客户端。

优选的，将所述热点数据发生的变化同步至所述客户端，包括：

如果存在变为失效的普通数据的热点数据，则指示所述客户端删除该变为失效的普通数据的热点数据，如果存在新的热点数据，则指示所述客户端缓存该新的热点数据。

一种redis客户端缓存装置，包括：

监控模块，用于：监控对redis数据库中各数据的访问，并基于监控得到的信息确定出所述redis数据库中的热点数据；

第一发送模块，用于：将所述热点数据发送至与所述redis数据库对应的客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问；

同步模块，用于：如果所述redis数据库中的热点数据发生变化，则将所述热点数据发生的变化同步至所述客户端，以使所述客户端缓存的热点数据与所述redis数据库中的热点数据相同。

优选的，还包括：

第二发送模块，用于：如果所述客户端与具有所述redis数据库的服务器之间断开连接，则在该连接重新建立后，删除所述客户端缓存的全部热点数据，并将所述redis数据库中的热点数据均发送至所述客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问。

优选的，还包括：

判断模块，用于：在所述客户端与所述服务器之间的连接重新建立之后，如果所述客户端与所述服务器之间断开连接的时长达到预设时长，则执行删除所述客户端缓存的全部热点数据的步骤，如果所述客户端与所述服务器之间断开连接的时长未达到预设时长，则判断在所述客户端与所述服务器之间断开连接时所述redis数据库中的热点数据是否发生变化，如果发生变化，则将发生的变化同步至所述客户端，如果未发生变化，则确定无需进行热点数据的同步。

一种redis客户端缓存设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上任一项所述redis客户端缓存方法的步骤。

一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上任一项所述redis客户端缓存方法的步骤。

本发明提供了一种redis客户端缓存方法、装置、设备及存储介质，该方法包括：监控对redis数据库中各数据的访问，并基于监控得到的信息确定出所述redis数据库中的热点数据；将所述热点数据发送至与所述redis数据库对应的客户端，以指示所述客户端将接收到的热点数据缓存至本地内存中供访问；如果所述redis数据库中的热点数据发生变化，则将所述热点数据发生的变化同步至所述客户端，以使所述客户端缓存的热点数据与所述redis数据库中的热点数据相同。本申请公开的技术方案中，将redis数据库中的热点数据发送至客户端，以指示客户端对接收的热点数据进行保存，并且在热点数据发生变化时将发生的变化同步至客户端，使得客户端的热点数据与redis数据库中的热点数据保持一致，而热点数据为最可能被访问的数据，因此客户端在需要访问热点数据时，能够直接由本地内存中进行访问，无需再到具有redis数据库中进行访问，从而通过这种客户端缓存热点数据的方式大大减少客户端到redis数据库中进行数据访问的次数，进而有效减轻redis数据库的压力。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种redis客户端缓存方法的流程图；

图2为本发明实施例提供的一种redis客户端缓存装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1，其示出了本发明实施例提供的一种redis客户端缓存方法的流程图，可以包括：

S11：监控对redis数据库中各数据的访问，并基于监控得到的信息确定出redis数据库中的热点数据。

本发明实施例提供的一种redis客户端缓存方法的执行主体可以为对应的redis客户端缓存装置，而该redis客户端缓存装置可以设置于具有redis数据库的服务器内，因此redis客户端缓存方法的执行主体可以为服务器，以下以redis客户端缓存方法为服务器进行具体说明。

服务器监控对redis数据库中包含的各个数据的访问，如果对某数据的访问频率达到预先设定的频率阈值，则认为该数据为热点数据，也即可能被频繁访问(包括读操作及写操作等)的数据；具体来说，访问频率可以为设定的某段时间内对某数据的访问次数，或者该访问次数除以对应的时间段，当然根据实际需要进行的其他设定也均在本发明的保护范围之内。另外，服务器中可以设置缓存队列，从而通过该缓存队列实现热点数据的缓存。

S12：将热点数据发送至与redis数据库对应的客户端，以指示客户端将接收到的热点数据缓存至本地内存中供访问。

将热点数据发送给redis数据库对应的客户端，与redis数据库对应的客户端也即为需要访问redis数据库的客户端；将热点数据发送给应的客户端后，客户端将接收到的热点数据缓存在本地内存中，从而在客户端需要访问这些热点数据时，无需到redis数据库中访问，而是可以直接在本地内存中进行这些热点数据的访问，从而大大减少了redis数据库的访问量。

S13：如果redis数据库中的热点数据发生变化，则将热点数据发生的变化同步至客户端，以使客户端缓存的热点数据与redis数据库中的热点数据相同。

另外，对redis数据库中的数据的访问需要实时进行监控，从而在redis数据库中包含的热点数据发生变化时，能够立即获知热点数据发生变化的情况，进而将热点数据发生的变化实时同步给客户端，使得客户端中缓存的热点数据与redis数据库中最新的包含的热点数据相同，方便客户端对热点数据的访问，也即本实施例中保持redis数据库及客户端中的热点数据的一致性。

本申请公开的技术方案中，将redis数据库中的热点数据发送至客户端，以指示客户端对接收的热点数据进行保存，并且在热点数据发生变化时将发生的变化同步至客户端，使得客户端的热点数据与redis数据库中的热点数据保持一致，而热点数据为最可能被访问的数据，因此客户端在需要访问热点数据时，能够直接由本地内存中进行访问，无需再到具有redis数据库中进行访问，从而通过这种客户端缓存热点数据的方式大大减少客户端到redis数据库中进行数据访问的次数，进而有效减轻redis数据库的压力。

本发明实施例提供的一种redis客户端缓存方法，还可以包括：

如果客户端与具有redis数据库的服务器之间断开连接，则在该连接重新建立后，删除客户端缓存的全部热点数据，并将redis数据库中的热点数据均发送至客户端，以指示客户端将接收到的热点数据缓存至本地内存中供访问。

需要说明的是，客户端可以定期向服务器发送心跳信号，从而使得服务器可以获知其与客户端的连接情况，如果自上次接收客户端发送的心跳信号后经过一定时长(可以根据实际需要进行设定)还未接收到客户端发送的心跳信号，则认为客户端已经与服务器之间断开连接，此时在连接重建建立之后，为了保证客户端中包含的热点数据的有效性，可以直接删除客户端中缓存的所有热点数据后，将当前redis数据库中的所有热点数据发送至客户端，以使其对接收的热点数据进行缓存。

本发明实施例提供的一种redis客户端缓存方法，在客户端与服务器之间的连接重新建立之后，还可以包括：

如果客户端与服务器之间断开连接的时长达到预设时长，则执行删除客户端缓存的全部热点数据的步骤，如果客户端与服务器之间断开连接的时长未达到预设时长，则判断在客户端与服务器之间断开连接时redis数据库中的热点数据是否发生变化，如果发生变化，则将发生的变化同步至客户端，如果未发生变化，则确定无需进行热点数据的同步。

其中，预设时长可以根据实际需要进行设定，如5分钟、10分钟等，如果客户端与服务器之间断开连接的时间达到预设时长，则说明客户端与服务器之间断开连接的时间比较长，redis数据库中热点数据变化的可能性非常大，因此可以直接删除客户端的热点数据并发送新的热点数据给客户端，否则，则说明客户端与服务器之间断开连接的时间比较短，redis数据库中热点数据发生变化的可能性比较小，即使发生变化，发生变化的热点数据的数量也可能很小，因此为了避免通信资源的浪费，可以将在热点数据发生变化时将变化的数据同步给客户端，未发生变化时则无需进行热点数据的同步。

接收客户端发送的热点数据请求，并基于热点数据请求将热点数据发送至客户端或者将热点数据发生的变化同步至客户端。

服务器在确定热点数据发生变化时，可以直接将发生的变化同步给客户端，但是在有特殊情况，如服务器工作较繁忙长时间未同步热点数据的变化给客户端时，客户端也可以主动发送热点数据请求给服务器，以请求服务器将redis数据库中当前包含的全部热点数据发送给客户端，或者将热点数据发生的变化同步给客户端，从而进一步保证了客户端与redis数据库中热点数据的一致性。

本发明实施例提供的一种redis客户端缓存方法，将热点数据发生的变化同步至客户端，可以包括：

如果存在变为失效的普通数据的热点数据，则指示客户端删除该变为失效的普通数据的热点数据，如果存在新的热点数据，则指示客户端缓存该新的热点数据。

需要说明的是，热点数据发生变化时，如果是热点数据变为普通数据，则可以发送相应的失效通知给客户端，以指示客户端将相应的热点数据进行删除，如果是确定出新的热点数据，则可以将新的热点数据发送给客户端，以指示客户端直接存储新的热点数据，当然如果热点数据本身发生修改，但是仍然为热点数据，也可以将该热点数据发送给客户端，以指示客户端利用该热点数据替换已经缓存的旧的热点数据，从而进一步保证了客户端与redis数据库中热点数据的一致性。另外，客户端可以通过运行ZREM命令删除变为普通数据的热点数据；客户端可以定期删除其存储的变为普通数据的热点数据，还可以接收失效通知后则删除，并在删除成功后向服务器发送热点数据请求；还可以根据实际需要进行其他设定，均在本发明保护范围之内。

下面以门户网站首页阅读量最高的20条新闻为例进行说明，服务器实时监控前20条阅读量最高的新闻地址并在redis数据库中缓存，等待客户端请求。服务器通过redis的有序集合实现，运行ZREVRANGE read.highest 0 19取出前20条访问地址；客户端首次访问服务器时会在本地缓存这20条新闻地址，这样客户端再次打开网页时直接从本地缓存读取数据，减缓服务器请求压力，具体来说，可以在客户端运行ZADD read.highest保存地址；由于访问量会一直变化，一旦某条地址访问量增高，代替了之前20条地址中的某条，过期消息发送装置就将此条地址过期的消息发送到客户端，通知客户端此条地址不再有效。

可见，通过本发明公开的技术方案，设计redis客户端缓存功能，减少客户端对redis服务器的请求频率，使redis数据库可以具备更高的读写性能，减轻了服务器高峰时段的流量压力。并且设置服务器热点数据的过期策略，或者说是失效策略。防止客户端获取无效数据。

本发明实施例还提供了一种redis客户端缓存装置，如图2所示，具体可以包括：

监控模块11，用于：监控对redis数据库中各数据的访问，并基于监控得到的信息确定出redis数据库中的热点数据；

第一发送模块12，用于：将热点数据发送至与redis数据库对应的客户端，以指示客户端将接收到的热点数据缓存至本地内存中供访问；

同步模块13，用于：如果redis数据库中的热点数据发生变化，则将热点数据发生的变化同步至客户端，以使客户端缓存的热点数据与redis数据库中的热点数据相同。

本发明实施例提供的一种redis客户端缓存装置，还可以包括：

第二发送模块，用于：如果客户端与具有redis数据库的服务器之间断开连接，则在该连接重新建立后，删除客户端缓存的全部热点数据，并将redis数据库中的热点数据均发送至客户端，以指示客户端将接收到的热点数据缓存至本地内存中供访问。

判断模块，用于：在客户端与服务器之间的连接重新建立之后，如果客户端与服务器之间断开连接的时长达到预设时长，则执行删除客户端缓存的全部热点数据的步骤，如果客户端与服务器之间断开连接的时长未达到预设时长，则判断在客户端与服务器之间断开连接时redis数据库中的热点数据是否发生变化，如果发生变化，则将发生的变化同步至客户端，如果未发生变化，则确定无需进行热点数据的同步。

接收模块，用于：接收客户端发送的热点数据请求，并基于热点数据请求将热点数据发送至客户端或者将热点数据发生的变化同步至客户端。

本发明实施例提供的一种redis客户端缓存装置，同步模块、判断模块及接收模块均可以包括：

同步单元，用于：如果存在变为失效的普通数据的热点数据，则指示客户端删除该变为失效的普通数据的热点数据，如果存在新的热点数据，则指示客户端缓存该新的热点数据。

本发明实施例还提供了一种redis客户端缓存设备，可以包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序时实现如上任一项redis客户端缓存方法的步骤。

本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上任一项redis客户端缓存方法的步骤。

需要说明的是，本发明实施例提供的一种redis客户端缓存装置、设备及存储介质中相关部分的说明请参见本发明实施例提供的一种redis客户端缓存方法中对应部分的详细说明，在此不再赘述。另外，本发明实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。

对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims

1.一种redis客户端缓存方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，还包括：

3.根据权利要求2所述的方法，其特征在于，在所述客户端与所述服务器之间的连接重新建立之后，还包括：

4.根据权利要求3所述的方法，其特征在于，还包括：

5.根据权利要求4所述的方法，其特征在于，将所述热点数据发生的变化同步至所述客户端，包括：

6.一种redis客户端缓存装置，其特征在于，包括：

7.根据权利要求6所述的装置，其特征在于，还包括：

8.根据权利要求7所述的装置，其特征在于，还包括：

9.一种redis客户端缓存设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述redis客户端缓存方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述redis客户端缓存方法的步骤。