CN103793485A - 客户端基于缓存数据实现查询网络数据的方法 - Google Patents

Abstract

一种客户端基于缓存数据实现查询网络数据的方法，先配置一数据库、中间件、一均衡器及一缓存器，所述缓存器包括一数据缓存和一交换缓存；所述方法包括加载缓存数据步骤、上报数据更新步骤、更新缓存数据步骤及数据校验步骤等。本发明的有益效果在于：降低系统频繁访问远程数据的需要，保障本地内存数据与远程数据的一致性，使互联网数据检索，如同本机数据库检索一样快速，而不会受网络速度的不稳定性制约；无须额外部署多余的节点代理服务器，避免了不断增加服务器代理节点的成本投入。

Description

客户端基于缓存数据实现查询网络数据的方法

技术领域

本发明具体涉及一种客户端基于缓存数据实现查询网络数据的方法。

背景技术

随着计算机网络技术的成熟和应用普及，越来越多的用户和企业开始使用计算机管理一些事务。PC机的资源没有大型、中型甚至小型主机丰富，但将多台PC机联成网，必然会增加资源含量，各个用户都在网络上来共享所有资源。根据客户／服务器（Client/Server简记为C／S）体系结构的概念，至少用两台计算机来分别充当客户机和服务器角色。

进入了分布式样计算的时代后，C／S架构的系统面对B/S运用程序，面临着重大的挑战，虽然在瘦客户端、易维护等方面B/S更具优势，但是很多分布式运用，需要C／S的架构软件才能满足。其次，由于C/S在网络数据库交互中，只需要数据交互，不需要传输网页界面、布局、交互脚本等内容，在速度上往往比B/S系统更快速。但是，随着B/S系统缓存技术运用以后，这个明显的优势被不断的拉进。为了提升C／S的分布式运用效率，B/S与C／S混合（即WebService+Client）日益成为了一种主流架构之一。

在现有的C/S集中分布式管理系统中（如OA、CRM等），用户在客户端的每次查询操作，都需要客户端通过中间件（Webservice、RMI等）从数据库中读取数据，回传到客户端。客户针对一个或多个事务流程的查询，将进行多次的同样操作，如果在用户数高并发的情形下，这样的查询将会更加频繁，将会造成客户端数据显示的延迟加载。

其次，越来越多的分布式运用，并不仅仅是在局域网内运用，很多的运用都通过了广域网（Internet）进行集中式的管理。例如一些网络运用软件、集团跨区域管理系统等。Internet速率的不稳定性和其他网络因素很容易造成数据传输的延迟、丢包、粘包、断网等异常，造成客户端数据显示延迟加载或响应异常。现有技术中也出现了采用增加服务器代理节点的方式来解决上面的问题，但是所造成的结果是信息化建设成本的不断增高，维护难度加大。

发明内容

本发明所要解决的技术问题在于提供一种客户端基于缓存数据实现查询网络数据的方法，使互联网数据检索，如同本机数据库检索一样快速。

本发明是通过以下技术方案解决上述技术问题的：

本发明的有益效果在于：一种客户端基于缓存数据实现查询网络数据的方法，先配置一数据库、中间件、一均衡器以及一缓存器，所述缓存器包括一数据缓存和一交换缓存；所述方法包括加载缓存数据步骤，具体为：

步骤1：所述均衡器向中间件发出缓存数据请求，中间件从数据库获取数据并发送给均衡器；

步骤2：均衡器将所述数据写入客户端的虚拟缓存，同时识别其中的常用数据，并将常用数据写入所述数据缓存；

步骤3：客户端的运用程序向均衡器发出查询数据请求，均衡器判断所查询数据是否为常用数据，若是，则从所述数据缓存中读取并输出读取结果给所述运用程序；若否，则从所述虚拟缓存中查询并输出查询结果给所述运用程序。

进一步地，还包括上报数据更新步骤，具体为：

步骤4：所述运用程序向均衡器发送数据更新请求，均衡器再将所述请求发送到中间件；

步骤5：中间件对数据库中的相应数据进行更新操作，并把操作结果返回均衡器，同时把数据库中已更新数据的更新日志广播给其他客户端；

步骤6：均衡器判断被更新的数据是否为常用数据，若是，则分别修改所述数据缓存和虚拟缓存中的相应数据，并把操作结果返回给运用程序；若否，则直接更新所述虚拟缓存的相应数据，并把操作结果返回给运用程序。

进一步地，还包括更新缓存数据步骤，具体为：

步骤7：当中间件广播更新日志时，均衡器接收更新日志，并逐条写入所述交换缓存；

步骤8：均衡器逐一判断所述更新日志是否为常用数据，若是，则均衡器将交换缓存中的更新日志异步写入所述数据缓存，对数据缓存中的相应数据进行更新；若否，则均衡器将交换缓存中的更新日志异步写入所述虚拟缓存，对所述虚拟缓存中的相应数据进行更新。

进一步地，还包括缓存数据校验步骤，具体为：

步骤9：当客户端的运用程序再次启动时，均衡器向中间件发出验证数据请求，该请求中包含了上次更新日志的版本信息；

步骤10：中间件根据所述版本信息查询数据库，判断是否有新版本日志，若是，则将所有新版本日志发送给均衡器，并执行步骤11；若否，则结束流程；

步骤11：均衡器将新版本日志逐条放入交换缓存，然后异步将交换缓存中的新版本日志写入所述虚拟缓存，并将其中的常用数据从所述虚拟缓存读入数据缓存。

降低系统频繁访问远程数据的需要，保障本地内存数据与远程数据的一致性，使互联网数据检索，如同本机数据库检索一样快速，而不会受网络速度的不稳定性制约；无须额外部署多余的节点代理服务器，避免了不断增加服务器代理节点的成本投入。

附图说明

下面参照附图结合实施例对本发明作进一步的描述。

图1为本发明中客户端加载缓存数据的流程图。

图2为本发明中运用程序查询缓存数据的流程图。

图3为本发明中运用程序上报数据更新的流程图。

图4为本发明中客户端更新缓存数据的流程图。

图5为本发明中客户端缓存数据效验的流程图。

具体实施方式

一种客户端基于缓存数据实现查询网络数据的方法，先配置一数据库、中间件、一均衡器、一缓存器，所述缓存器包括一数据缓存和一交换缓存；所述均衡器和缓存器均位于客户端上，所述数据库位于服务器上。

所述数据缓存用于缓存常用数据。

所述交换缓存用于存储接收到的更新消息广播，并将广播逐一写入本地虚拟缓存。数据内容采用JSON格式存储，以Ley-Value方式缓存。

均衡器：

负责调配数据缓存、交换缓存、数据请求和输出等事件处理。均衡器能够在初始化的时候，通过向中间件获取数据，将常用数据存储所述数据缓存，同时加密写入客户端的虚拟缓存中。

均衡器负责对运用程序发出的数据查询请求，在数据缓存或本地虚拟缓存中检索，并输出给运用程序。

负责实时接收中间件广播出来的数据更新消息，并将消息加入交换缓存中。

在每次运用程序启动前，与中间件进行缓存数据的比对，对有更新变化的数据，请求中间件获取并将数据加入交换缓存；异步将交换缓存中的数据写入所述虚拟缓存。

所述客户端基于缓存数据实现查询网络数据的方法包括加载缓存数据步骤、上报数据更新步骤、更新缓存数据步骤及数据校验步骤等。

请参阅图1和图2，所述加载缓存数据步骤具体为：

步骤1：所述均衡器向中间件发出缓存数据请求，中间件从数据库获取数据并发送给均衡器；

步骤2：均衡器将所述数据写入客户端的虚拟缓存，同时识别其中的常用数据，并将常用数据写入所述数据缓存；所述常用数据是指在一预设周期内达到预设查询次数以上的数据。

步骤3：客户端的运用程序向均衡器发出查询数据请求，均衡器判断所查询数据是否为常用数据，若是，则从所述数据缓存中读取并输出读取结果给所述运用程序；若否，则从所述虚拟缓存中查询并输出查询结果给所述运用程序。即此时客户端查询数据只需从本机的所述数据缓存或虚拟缓存中查询即可，不需再通过网络查询远端的数据库。

运用程序仅在首次运行时进行数据的加载，完成加载后，数据的查询将不再依赖远程网络数据，完全实现本地数据高速查询。

请参阅图3，所述上报数据更新步骤具体为：

步骤4：所述运用程序向均衡器发送数据更新请求，均衡器再将所述请求发送到中间件；

步骤5：中间件对数据库中的相应数据进行更新操作，并把操作结果返回均衡器，同时把数据库中已更新数据的更新日志广播给其他客户端；

步骤6：均衡器判断被更新的数据是否为常用数据，若是，则分别修改所述数据缓存和虚拟缓存中的相应数据，并把操作结果返回给运用程序；若否，则直接更新所述虚拟缓存的相应数据，并把操作结果返回给运用程序。

请参阅图4，均衡器保持与服务器上的数据库之间的通讯调度，能够及时发现远程服务器中最新的文件更新广播，保障本地内存数据与远程数据的一致性。所述更新缓存数据步骤具体为：

步骤7：当中间件广播更新日志时，均衡器接收更新日志，并逐条写入所述交换缓存；

步骤8：均衡器逐一判断所述更新日志是否为常用数据，若是，则均衡器将交换缓存中的更新日志异步写入所述数据缓存，对数据缓存中的相应数据进行更新；若否，则均衡器清除交换缓存中的旧日志，同时将交换缓存中的更新日志异步写入所述虚拟缓存，对所述虚拟缓存中的相应数据进行更新。

所述缓存数据校验步骤具体为：

步骤9：当客户端的运用程序再次启动时，均衡器向中间件发出验证数据请求，该请求中包含了上次更新日志的版本信息；

步骤10：中间件根据所述版本信息查询数据库，判断是否有新版本日志，若是，则将所有新版本日志发送给均衡器，并执行步骤11；若否，则结束流程；

步骤11：均衡器将新版本日志逐条放入交换缓存，然后异步将交换缓存中的新版本日志写入所述虚拟缓存，并将其中的常用数据从所述虚拟缓存读入数据缓存。

Claims (4)

1.一种客户端基于缓存数据实现查询网络数据的方法，其特征在于：先配置一数据库、中间件、一均衡器以及一缓存器，所述缓存器包括一数据缓存和一交换缓存；所述方法包括加载缓存数据步骤，具体为：

步骤1：所述均衡器向中间件发出缓存数据请求，中间件从数据库获取数据并发送给均衡器；

步骤2：均衡器将所述数据写入客户端的虚拟缓存，同时识别其中的常用数据，并将常用数据写入所述数据缓存；

步骤3：客户端的运用程序向均衡器发出查询数据请求，均衡器判断所查询数据是否为常用数据，若是，则从所述数据缓存中读取并输出读取结果给所述运用程序；若否，则从所述虚拟缓存中查询并输出查询结果给所述运用程序。

2.如权利要求1所述的客户端基于缓存数据实现查询网络数据的方法，其特征在于：还包括上报数据更新步骤，具体为：

步骤4：所述运用程序向均衡器发送数据更新请求，均衡器再将所述请求发送到中间件；

步骤5：中间件对数据库中的相应数据进行更新操作，并把操作结果返回均衡器，同时把数据库中已更新数据的更新日志广播给其他客户端；

步骤6：均衡器判断被更新的数据是否为常用数据，若是，则分别修改所述数据缓存和虚拟缓存中的相应数据，并把操作结果返回给运用程序；若否，则直接更新所述虚拟缓存的相应数据，并把操作结果返回给运用程序。

3.如权利要求2所述的客户端基于缓存数据实现查询网络数据的方法，其特征在于：还包括更新缓存数据步骤，具体为：

步骤7：当中间件广播更新日志时，均衡器接收更新日志，并逐条写入所述交换缓存；

步骤8：均衡器逐一判断所述更新日志是否为常用数据，若是，则均衡器将交换缓存中的更新日志异步写入所述数据缓存，对数据缓存中的相应数据进行更新；若否，则均衡器将交换缓存中的更新日志异步写入所述虚拟缓存，对所述虚拟缓存中的相应数据进行更新。

4.如权利要求1所述的客户端基于缓存数据实现查询网络数据的方法，其特征在于：还包括缓存数据校验步骤，具体为：

步骤9：当客户端的运用程序再次启动时，均衡器向中间件发出验证数据请求，该请求中包含了上次更新日志的版本信息；

步骤10：中间件根据所述版本信息查询数据库，判断是否有新版本日志，若是，则将所有新版本日志发送给均衡器，并执行步骤11；若否，则结束流程；

步骤11：均衡器将新版本日志逐条放入交换缓存，然后异步将交换缓存中的新版本日志写入所述虚拟缓存，并将其中的常用数据从所述虚拟缓存读入数据缓存。

Images