CN113542326B - 分布式系统的数据缓存方法及装置、服务器、存储介质 - Google Patents

Abstract

一种分布式系统的数据缓存方法及装置、服务器、存储介质，分布式系统包括：服务器、分别与服务器耦接的客户端、若干个数据源及缓存子系统，所述方法包括：判断缓存子系统中是否存在访问请求对应的第一标识，访问请求由客户端发送；当缓存子系统中存在访问请求对应的第一标识时，判断访问请求对应的缓存数据的数据源是否发生过数据更新；当访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取访问请求在发生过数据更新的数据源中对应的更新访问数据；根据更新访问数据，得到目标访问数据，并返回目标访问数据；将更新访问数据添加至缓存子系统中。上述方案，当数据源发生过更新时，能够提高访问效率。

Description

分布式系统的数据缓存方法及装置、服务器、存储介质

技术领域

本发明实施例涉及数据缓存领域，尤其涉及一种分布式系统的数据缓存方法及装置、服务器、存储介质。

背景技术

在分布式系统的数据通常不是集中在一处，而是分布于不同场所的设备上，也即存在多个数据源。为了提高数据访问的效率及性能等，分布式系统的数据访问过程中，分布式系统缓存技术是提高数据访问性能的有效手段，也即有访问请求时，可以直接从缓存中获取对应的数据。

然而，在多数据源情况下，任何一个数据源的更新都会导致整个缓存数据失效，需要重新访问所有的数据源以获取最新的访问数据，导致访问效率较低。

发明内容

本发明实施例解决的技术问题是当数据源发生过更新时，导致访问效率较低的问题。

为解决上述技术问题，本发明实施例提供一种分布式系统的数据缓存方法，所述分布式系统包括：服务器、分别与所述服务器耦接的客户端、若干个数据源及缓存子系统，所述分布式系统的数据缓存方法包括：判断缓存子系统中是否存在访问请求对应的第一标识，所述访问请求由客户端发送；当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新；当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据；根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据；将所述更新访问数据添加至所述缓存子系统中。

可选的，所述根据所述更新访问数据，得到目标访问数据，包括：当所述访问请求对应的缓存数据的所有数据源中部分数据源发生过数据更新时，获取所述访问请求在发生过数据更新的部分数据源分别对应的更新访问数据；对于未发生过数据更新的数据源，在所述缓存子系统上获取所述访问请求对应的缓存数据；将所述更新访问数据与在所述缓存子系统上获取所述访问请求对应的缓存数据进行组合，得到所述目标访问数据。

可选的，所述分布式系统的数据缓存方法还包括：当所述访问请求在缓存子系统中不存在对应的第一标识时，访问分布式系统的所有数据源；获取所述访问请求对应的目标访问数据；将所述目标访问数据添加至所述缓存子系统中。

可选的，所述分布式系统的数据缓存方法还包括：判断所述访问请求对应的缓存数据的数据源是否发生过数据更新，包括：判断所述访问请求对应的缓存数据的数据源的第二标识是否在数据源更新列表中；当所述访问请求对应的缓存数据的数据源的第二标识在数据源更新列表中时，确定数据源发生过数据更新；当所述访问请求对应的缓存数据的数据源的第二标识不在数据源更新列表中时，确定数据源未发生过数据更新。

可选的，所述分布式系统的数据缓存方法还包括：当接收到数据源更新通知时，将所述数据源更新通知中的发生过数据更新的数据源的第二标识信息添加至所述数据源更新列表中。

可选的，所述分布式系统的数据缓存方法还包括：当所述数据源更新通知中发生过数据更新的数据源中所有更新访问数据均已添加至所述缓存子系统中时，将所述发生过数据更新的数据源对应的第二标识从所述数据源更新列表中删除。

可选的，将所述缓存子系统中的数据按照所对应的数据源，进行分类存放。

本发明实施例还提供一种分布式系统的数据缓存装置，包括：第一判断单元，用于判断缓存子系统中是否存在访问请求对应的第一标识，所述访问请求由客户端发送；第二判断单元，用于当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新；获取单元，用于当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据；处理单元，用于根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据；添加单元，用于将所述更新访问数据添加至所述缓存子系统中；其中，分布式系统包括：服务器、分别与所述服务器耦接的所述客户端、若干个所述数据源及所述缓存子系统。

本发明实施例还提供一种服务器，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述任一分布式系统的数据缓存方法的步骤。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质为非易失性存储介质或非瞬态存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述任一分布式系统的数据缓存方法的步骤。

与现有技术相比，本发明实施例的技术方案具有以下有益效果：

当缓存子系统中存在访问请求对应的第一标识时，可以判断访问请求对应的缓存数据的数据源是否发生过数据更新，若访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取对应的更新访问数据，进而根据更新访问数据得到目标访问数据，并将更新访问数据添加至缓存子系统中。因此，当分布式系统中的数据源发生过更新时，只需访问发生过数据更新的数据源，无需访问全部的数据源，减少数据源的访问次数，从而可以提高多数据源分布式系统的数据访问的效率及性能。

附图说明

图1是本发明实施例中的一种分布式系统的结构示意图；

图2本发明实施例中的一种分布式系统的数据缓存方法的流程图；

图3是本发明实施例中的一种分布式系统的数据缓存示意图；

图4是本发明实施例中的一种数据源更新列表的示意图；

图5是本发明实施例中的一种分布式系统的数据缓存装置的结构示意图。

具体实施方式

如上所述，在多数据源情况下，任何一个数据源的更新都会导致整个缓存数据失效，需要重新访问所有的数据源以获取最新的访问数据，导致访问效率较低。

本发明实施例中，当缓存子系统中存在访问请求对应的第一标识时，判断访问请求对应的缓存数据的数据源是否发生过数据更新，若访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取对应的更新访问数据，进而根据更新访问数据得到目标访问数据，并将更新访问数据添加至缓存子系统中。因此，当分布式系统中的数据源发生过更新时，只需访问发生过数据更新的数据源，无需访问全部的数据源，减少数据源的访问次数，从而可以提高多数据源分布式系统的数据访问的效率及性能。

为使本发明实施例的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。

本发明实施例提供一种分布式系统的数据缓存方法，分布式系统的数据缓存方法可以用于分布式系统。参照图1，给出了本发明实施例中的一种分布式系统的结构示意图。分布式系统可以包括客户端11、服务器12、若干个数据源13及缓存子系统14。

在具体实施中，客户端11与服务器12耦接，用户可以通过客户端11向服务器12发送访问请求。服务器12分别与若干个数据源13以及缓存子系统14耦接，服务器12可以根据访问请求访问数据源13，从数据源13中获取访问请求对应的访问数据，或者从缓存子系统14中获取访问请求对应的访问数据。当服务器12首次收到某个访问请求时，从访问的数据源13获取到访问请求对应的访问数据之后，可以记录访问数据所对应的数据源13，并将访问请求对应的访问数据以及对应的数据源13的标识信息等缓存至缓存子系统14。

参照图2，给出了本发明实施例中的一种分布式系统的数据缓存方法的流程图，该方法可以由分布式系统中的服务器执行，例如由图1中的服务器12执行。具体地，所述方法可以包括如下步骤：

步骤21，判断缓存子系统中是否存在访问请求对应的第一标识。

在具体实施中，服务器在首次接收到客户端发送的访问请求之后，可以访问分布式系统的所有的数据源，获取访问请求对应的访问数据，记录访问数据的来源，也即对应的数据源。可以由服务器将将访问请求对应的第一标识以及访问数据存储在缓存子系统，或者有服务器控制缓存子系统中的相关控制器将将访问请求对应的第一标识以及访问数据存储在缓存子系统。此后，每次接收到客户端发送的访问请求之后，先判断缓存子系统中是否存在访问请求对应的第一标识。

在具体实施中，访问请求对应的第一标识可以为访问请求对应的关键词，也可以为从访问请求中抽取的信息对应的编号，可以理解的是，还可以采用其他信息作为第一标识，只需满足第一标识与访问请求一一对应即可。

步骤22，当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新。

在本发明实施例中，当缓存子系统中存在访问请求对应的第一标识时，则判断访问请求对应的缓存数据的数据源是否发生过数据更新。

在具体实施中，可以采用双层标识的方式索引缓存子系统中的缓存数据。如采用第一标识索引访问请求，采用第二标识索引数据源。设置数据源更新列表，数据源更新列表用于记录发生数据更新的数据源。

在本发明实施例中，可以采用如下方式判断所述访问请求对应的缓存数据的数据源是否发生过数据更新：

判断所述访问请求对应的缓存数据的数据源的第二标识是否在数据源更新列表中。当所述访问请求对应的缓存数据的数据源的第二标识在数据源更新列表中时，确定数据源发生过数据更新；当所述访问请求对应的缓存数据的数据源的第二标识不在数据源更新列表中时，确定数据源未发生过数据更新。

在具体实施中，可以根据数据源更新通知更新或维护数据源更新列表。具体而言，当接收到数据源更新通知时，将所述数据源更新通知中的发生过数据更新的数据源的第二标识信息添加至所述数据源更新列表中。

在具体实施中，当检测到数据源更新通知中发生过数据更新的数据源中所有更新访问数据均已添加至所述缓存子系统中时，将所述发生过数据更新的数据源对应的第二标识从所述数据源更新列表中删除，以使得数据源更新列表的实时性及正确性，进一步提高数据访问效率。

在本发明实施例中，可以将数据源更新通知中发生过数据更新的数据源在缓存子系统中的对应的数据进行失效处理，而未发生过数据更新的数据源在缓存子系统中对应的缓存数据则不进行失效处理。

在本发明实施例中，也可以将数据源更新通知中的发生过数据更新的数据源对应的更新数据同步更新至缓存子系统中，从而当有访问请求时，可以直接从缓存子系统中获取对应的缓存数据，以提高数据处理效率。

步骤23，当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据。

在具体实施中，当访问请求对应的缓存数据的数据源发生过数据更新时，存在访问请求对应的缓存数据的所有数据源均更新以及访问请求对应的缓存数据的所有数据源中的部分数据源更新的情况。访问发生过数据更新的数据源，获取访问请求在发生过数据更新的数据源中对应的更新访问数据。

步骤24，根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据。

在具体实施中，根据更新访问数据，得到目标访问数据，可以包括如下几种情况：

在本发明一实施例中，当访问请求对应的缓存数据的所有数据源均发生过数据更新时，将访问每个数据更新后的数据源得到的更新访问数据进行组合，得到目标数据。

在本发明另一实施例中，当访问请求对应的缓存数据的所有数据源中部分数据源发生过数据更新时，获取访问请求在发生过数据更新的部分数据源分别对应的更新访问数据。对于未发生过数据更新的数据源，在缓存子系统上获取访问请求对应的缓存数据，将更新访问数据与在缓存子系统上获取访问请求对应的缓存数据进行组合，得到目标访问数据。

在具体实施中，得到目标访问数据之后，可以返回目标访问数据。

步骤25，将所述更新访问数据添加至所述缓存子系统中。

在具体实施中，可以将更新访问数据添加至缓存子系统中，从而使得下次接收到该访问请求中，若该访问请求对应的数据源没有进一步更新的情况下，可以直接从缓存子系统获取对应的访问数据，而无需进行数据源的访问，以进一步提高数据访问效率。

在本发明实施例中，缓存子系统中的数据可以按照各数据对应的数据源，进行分类存放，例如，所有对应数据源A的缓存数据均分到数据源A的类别下，所述有对应数据源B的缓存数据均分到数据源B的类别下。

例如，接收到客户端首次发送的访问请求R1时，访问分布式系统的所有数据源，得到访问数据对应数据源A、数据源B及数据源C。将访问请求R1、R1对应的访问数据以及访问数据来源数据源A、数据源B及数据源C均储存于缓存子系统中，如图3给出的本发明实施例中的一种分布式系统的数据缓存示意图。当数据源A的数据更新时，将数据源A添加至数据源更新列表中，如图4给出的本发明实施例中的一种数据源更新列表示意图。当下一次收到R1请求时，只需要访问数据源A，并从数据源A获取更新访问数据，不需要再次访问数据源B及数据源C。

由上可知，当缓存子系统中存在访问请求对应的第一标识时，判断访问请求对应的缓存数据的数据源是否发生过数据更新，若访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取对应的更新访问数据，进而根据更新访问数据得到目标访问数据，并将更新访问数据添加至缓存子系统中。因此，当分布式系统中的数据源发生过更新时，只需访问发生过数据更新的数据源，无需访问全部的数据源，减少数据源的访问次数，从而可以提高多数据源分布式系统的数据访问的效率及性能。

在具体实施中，当缓存子系统中未发生过所述访问请求对应的第一标识时，则访问分布式系统的所有数据源，从所有数据源中获取访问请求对应的访问数据，并将所述目标访问数据添加至缓存子系统中。

参照图5，本发明实施例还提供一种分布式系统的数据缓存装置，分布式系统的数据缓存装置50可以包括：

第一判断单元51，用于判断缓存子系统中是否存在访问请求对应的第一标识；

第二判断单元52，用于当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新；

获取单元53，用于当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据；

处理单元54，用于根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据；

添加单元55，用于将所述更新访问数据添加至所述缓存子系统中；

其中，其中，分布式系统包括：服务器、分别与所述服务器耦接的所述客户端、若干个所述数据源及所述缓存子系统。

在具体实施中，分布式系统的数据缓存装置50的工作原理及工作流程，可以参照本发明上述实施例提供的分布式系统的数据缓存方法中的描述。

本发明实施例还提供一种服务器，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述任一种分布式系统的数据缓存方法的步骤。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质为非易失性存储介质或非瞬态存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述任一种分布式系统的数据缓存方法的步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于任一计算机可读存储介质中，存储介质可以包括：ROM、RAM、磁盘或光盘等。

虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (10)

1.一种分布式系统的数据缓存方法，其特征在于，所述分布式系统包括：服务器、分别与所述服务器耦接的客户端、多个数据源及缓存子系统，所述分布式系统的数据缓存方法包括：

判断缓存子系统中是否存在访问请求对应的第一标识，所述访问请求由客户端发送；

当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新；

当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据；

根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据；

将所述更新访问数据添加至所述缓存子系统中；

其中，还包括：在首次接收到所述客户端发送的访问请求之后，访问所述分布式系统的所有的数据源，获取所述访问请求对应的访问数据，记录所述访问数据的来源，也即对应的数据源，将所述访问请求对应的第一标识以及所述访问数据存储在缓存子系统，所述访问请求与所述第一标识一一对应。

2.如权利要求1所述的分布式系统的数据缓存方法，其特征在于，所述根据所述更新访问数据，得到目标访问数据，包括：

当所述访问请求对应的缓存数据的所有数据源中部分数据源发生过数据更新时，获取所述访问请求在发生过数据更新的部分数据源分别对应的更新访问数据；

对于未发生过数据更新的数据源，在所述缓存子系统上获取所述访问请求对应的缓存数据；

将所述更新访问数据与在所述缓存子系统上获取所述访问请求对应的缓存数据进行组合，得到所述目标访问数据。

3.如权利要求1所述的分布式系统的数据缓存方法，其特征在于，还包括：

当所述访问请求在缓存子系统中不存在对应的第一标识时，访问分布式系统的所有数据源；

获取所述访问请求对应的目标访问数据；

将所述目标访问数据添加至所述缓存子系统中。

4.如权利要求1所述的分布式系统的数据缓存方法，其特征在于，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新，包括：

判断所述访问请求对应的缓存数据的数据源的第二标识是否在数据源更新列表中；

当所述访问请求对应的缓存数据的数据源的第二标识在数据源更新列表中时，确定数据源发生过数据更新；

当所述访问请求对应的缓存数据的数据源的第二标识不在数据源更新列表中时，确定数据源未发生过数据更新。

5.如权利要求4所述的分布式系统的数据缓存方法，其特征在于，还包括：

当接收到数据源更新通知时，将所述数据源更新通知中的发生过数据更新的数据源的第二标识信息添加至所述数据源更新列表中。

6.如权利要求5所述的分布式系统的数据缓存方法，其特征在于，还包括：

当所述数据源更新通知中发生过数据更新的数据源中所有更新访问数据均已添加至所述缓存子系统中时，将所述发生过数据更新的数据源对应的第二标识从所述数据源更新列表中删除。

7.如权利要求1所述的分布式系统的数据缓存方法，其特征在于，将所述缓存子系统中的数据按照所对应的数据源，进行分类存放。

8.一种分布式系统的数据缓存装置，其特征在于，包括：

第一判断单元，用于判断缓存子系统中是否存在访问请求对应的第一标识，所述访问请求由客户端发送；

第二判断单元，用于当所述缓存子系统中存在所述访问请求对应的第一标识时，判断所述访问请求对应的缓存数据的数据源是否发生过数据更新；获取单元，用于当所述访问请求对应的缓存数据的数据源发生过数据更新时，访问发生过数据更新的数据源，获取所述访问请求在所述发生过数据更新的数据源中对应的更新访问数据；

处理单元，用于根据所述更新访问数据，得到目标访问数据，并返回所述目标访问数据；

添加单元，用于将所述更新访问数据添加至所述缓存子系统中；

其中，分布式系统包括：服务器、分别与所述服务器耦接的所述客户端、多个所述数据源及所述缓存子系统；

其中，还包括：用于在首次接收到所述客户端发送的访问请求之后，访问所述分布式系统的所有的数据源，获取所述访问请求对应的访问数据，记录所述访问数据的来源，也即对应的数据源，将所述访问请求对应的第一标识以及所述访问数据存储在缓存子系统，所述访问请求与所述第一标识一一对应的单元。

9.一种服务器，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至7任一项所述的分布式系统的数据缓存方法的步骤。

10.一种计算机可读存储介质，计算机可读存储介质为非易失性存储介质或非瞬态存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行权利要求1至7中任一项所述的分布式系统的数据缓存方法的步骤。

Images