CN105554143A - 一种高可用缓存服务器及其数据处理方法和系统 - Google Patents
一种高可用缓存服务器及其数据处理方法和系统 Download PDFInfo
- Publication number
- CN105554143A CN105554143A CN201510997006.5A CN201510997006A CN105554143A CN 105554143 A CN105554143 A CN 105554143A CN 201510997006 A CN201510997006 A CN 201510997006A CN 105554143 A CN105554143 A CN 105554143A
- Authority
- CN
- China
- Prior art keywords
- data
- server
- availability cache
- cache server
- access request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
- H04L67/63—Routing a service request depending on the request content or context
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及数据处理领域,特别是一种高可用缓存服务器的数据处理方法,所述高可用缓存服务器与客户端、一个或者多个业务服务器通过公网连接,还与备用缓存服务器数据连接,所述方法包括:接收所述客户端发送的数据访问请求;判断是否存在与所述数据访问请求对应的数据;若判断存在,向所述客户端发送与所述数据访问请求对应的数据;若判断不存在,向所述一个或者多个业务服务器发送所述数据访问请求,接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据。
Description
技术领域
本发明涉及数据处理技术领域,特别是涉及一种高可用缓存服务器及其数据处理方法和系统。
背景技术
随着云计算技术的发展,能够提供高并发、高输入输出的高可用系统得到了广泛的应用。其中,高可用性(HighAvailability)是指通过尽量缩短因日常维护操作和突发的系统崩溃所导致的停机时间,以提高系统和应用的可用性。在高可用系统中,通常具有主服务器和从服务器,由主服务器接受客户端的访问请求。当主服务器连接大量客户端时,主服务器端的出口会由于客户端的大量访问请求产生大量的数据流量,占用了大量的网络带宽。这对主服务器的数据处理能力和网络带宽提出了很高的要求,造成主服务器负载的增加。
发明内容
为解决上述技术问题,本发明公开了一种高可用缓存服务器及其数据处理方法和系统,可以降低主服务器的数量处理流量,降低主服务器负载,提高数据处理效率。
技术方案如下:
根据本发明实施例的第一方面,公开了一种高可用缓存服务器的数据处理方法,所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接,所述方法包括:
所述高可用缓存服务器接收所述客户端发送的数据访问请求;
所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;
若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据;
若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求,接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,所述高可用缓存服务器存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
进一步地,所述高可用缓存服务器存储的所述数据包括下述任意一种或者多种:
图片数据、认证数据、授权数据或者与客户端对应的会话数据。
进一步地,所述方法还包括:
所述高可用缓存服务器接收所述客户端发送的数据写入请求或者数据删除请求;
所述高可用缓存服务器将所述数据写入请求或者数据删除请求发送给所述一个或者多个业务服务器;
所述高可用缓存服务器接收并所保存与所述客户端数据写入请求或者数据删除请求对应的数据操作结果。
进一步地,所述方法还包括:
当所述高可用缓存服务器在预设时间内未接收到针对存储的各数据对应的数据操作请求时,删除所述数据。
进一步地,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器,所述方法还包括:
所述高可用缓存服务器获取并存储所述主业务服务器的内存状态数据。
进一步地,所述方法还包括:
所述高可用缓存服务器接收所述从业务服务器的数据同步请求;所述数据同步请求是所述从业务服务器在确定所述主业务服务器发生故障时发送的;
所述高可用缓存服务器向所述从业务服务器发送所述主业务服务器的内存状态数据,以便所述从业务服务器根据所述主业务服务器的内存状态数据恢复业务数据。
进一步地,所述方法还包括:
所述高可用缓存服务器获取并存储所述从业务服务器升级为主业务服务器后的内存状态数据;
当接收到所述异地灾备主服务器或者从服务器发送的数据同步请求时,向所述异地灾备主服务器或者异地灾备从服务器发送所述内存状态数据,以便所述异地灾备主服务器或者异地灾备从服务器根据所述内存状态数据恢复业务数据。
根据本发明实施例的第二方面,公开了一种高可用缓存服务器,所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接,所述高可用缓存服务器包括:
第一接收单元,用于接收所述高可用缓存服务器接收所述客户端发送的数据访问请求;
判断单元,用于所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;
第一发送单元,用于若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据;
第二发送单元,用于若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求;
第二接收单元,用于接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据;
第三发送单元,用于向所述客户端发送所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据;
存储单元,用于确定所述数据符合预设的存储条件时,存储所述数据;
第四发送单元,用于向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
再一方面,本发明实施例还公开了一种高可用数据处理系统,包括客户端、高可用缓存服务器、备用缓存服务器、一个或者多个业务服务器,其中:
所述客户端用于向所述高可用缓存服务器发送数据访问请求,以及,接收所述高可用缓存服务器发送的与所述数据访问请求对应的数据;
所述高可用缓存服务器用于接收所述客户端发送的数据访问请求,判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;若判断存在与所述数据访问请求对应的数据向所述客户端发送与所述数据访问请求对应的数据;若判断不存在与所述数据访问请求对应的数据,向所述业务服务器发送所述数据访问请求,接收所述业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步;
所述一个或者多个业务服务器用于接收所述高可用缓存服务器发送的数据访问请求,以及,向所述高可用缓存服务器发送与所述数据访问请求对应的数据;
所述备用缓存服务器用于获取所述高可用缓存服务器存储的符合预设存储条件的数据以实现与所述高可用缓存服务器的数据同步。
进一步地,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器,其中:
所述高可用缓存服务器还用于获取并存储所述主业务服务器的内存状态数据,以及在接收到所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送的数据同步请求时,向所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送所述主业务服务器的内存状态数据;
所述从业务服务器用于在确定所述主业务服务器发生故障时,向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备主服务器用于在确定所述主业务服务器和所述从业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备从服务器用于在确定所述主业务服务器、所述从业务服务器、所述异地灾备主业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据。
本发明实施例的一个方面能够达到的有益效果为:本发明实施例提供的方法或者装置中,客户端直接向高可用缓存服务器请求数据,若高可用缓存服务器存在客户端请求的数据,直接向客户端返回所述数据,无需再访问服务器。由于客户端直接向高可用缓存服务器请求数据,有效减少了主业务服务器的数据流量,降低了带宽占用,提升了整个系统的处理性能。此外,高可用缓存服务器保存了客户端与服务器之间交互的数据以及各业务服务器之间的共享数据,并通过备用缓存服务器进行备份,进一步提高了数据安全,提高了系统的数据处理效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的高可用缓存服务器的数据处理方法流程示意图;
图2为本发明实施例提供的高可用缓存服务器示意图;
图3为本发明一实施例提供的高可用数据处理系统示意图;
图4为本发明又一实施例提供的高可用数据处理系统示意图。
具体实施方式
本发明公开了一种高可用缓存服务器及其数据处理方法和系统,可以降低主服务器的数量处理流量,降低主服务器负载,提高数据处理效率。
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
参见图1,为本发明实施例提供的高可用缓存服务器的数据处理方法流程示意图。所示方法可以应用于如图2所述的高可用缓存服务器中,还可以应用于如图3或者图4所示的高可用数据处理系统中。所述高可用数据处理系统可以包括客户端、高可用缓存服务器、一个或者多个业务服务器。所述一个或多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器。所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接。其中,所述客户端(Client)与服务器(英文名称为Server)相对应,用于为客户提供本地服务,包括但不限于网页浏览器、电子邮件客户端、即时通讯软件的客户端或者其他应用程序等。
所示方法例如可以包括:
S101,所述高可用缓存服务器接收所述客户端发送的数据访问请求。
在本发明提供的高可用数据处理系统中,单独设立了高可用缓存服务器,用于存储高可用数据处理系统中的各种缓存数据和共享文件,例如各个高可用或者负载均衡的各业务服务器之间、以及客户端与服务器之间交互的数据。所述客户端调用高可用缓存服务器中的数据。所述数据包括但不限于图片数据、认证数据、授权数据或者与客户端对应的会话数据(session)、各业务服务器的内存状态数据等。所述会话数据又可以包括用户的登录信息,例如用户名、用户标识、用户密码、用户头像、用户临时存储数据等数据。所述高可用缓存服务器搭建到外部网络上,无需大家到某一个局域网内部。所述高可用缓存服务器可以采用主备模式,即高可用缓存服务器还具有一个备用缓存服务器,以便高可用缓存服务器故障时,所述备用缓存服务器提供数据存储服务。
与现有技术客户端直接访问业务服务器不同的是,在本发明实施例中,客户端直接向高可用缓存服务器发送数据访问请求。由高可用缓存服务器直接响应用户的数据访问请求,由此有效减少了客户端对业务服务器的访问带来的流量浪费和带宽占用,有效降低了业务服务器的数据处理负担,提高了业务服务器的数据处理效率。
S102,所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据。
S103,若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据。
S104,若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求,接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,所述高可用缓存服务器存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
若高可用缓存服务器判断不存在于所述数据访问请求对应的数据,则向业务服务器发送请求,以请求上述数据。业务服务器在接收到所述数据访问请求后,会进行相应的查询、筛选、合并、转换处理,将处理后的结果数据发送给高可用缓存服务器,由高可用缓存服务器向客户端返回所述结果数据,所述结果数据与所述数据访问请求相对应。
所述高可用缓存服务器在接收到所述业务服务器发送的数据后,还对所述数据进行判断,判断是否符合预设的存储条件。所述预设的存储条件可以包括:是否是预设的数据类型、是否符合预设的数据大小等,具体的存储条件可以根据需要设置,在此不进行限定。若所述高可用缓存服务器确定所述数据符合预设的存储条件时,存储所述数据。
较佳地,所述高可用缓存服务器自身也是高可用的,亦即所述高可用缓存服务器还与备用缓存服务器数据连接,所述备用缓存服务器接收高可用缓存服务器缓存的数据,并存储。当确定高可用缓存服务器故障时,所述备用缓存服务器取代所述高可用缓存服务器,实现数据的存储、响应客户端以及业务服务器的数据请求。
在一些实施方式中,所述高可用缓存服务器接收所述客户端发送的数据写入请求或者数据删除请求,将所述数据写入请求或者数据删除请求发送给所述一个或者多个业务服务器,由所述一个或者多个业务服务器对所述数据写入请求或者数据删除请求对应的数据进行处理。所述一个或者多个业务服务器将与数据写入请求或者数据删除请求对应的数据操作结果发送给所述高可用缓存服务器。所述高可用缓存服务器接收并所保存与所述客户端数据写入请求或者数据删除请求对应的数据操作结果。
在一些实施方式中,为了减少内存占用、提高数据处理效率,当所述高可用缓存服务器在预设时间内未接收到针对存储的各数据对应的数据操作请求时,删除所述数据。也就是说,当高可用缓存服务器存储的数据在满足一定条件时将被删除,例如在预设时间内未被访问,则没有缓存的必要,则会被删除。
在一些实施方式中,例如容灾性的高可用数据处理系统中,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器。其中,所述从业务服务器为所述主业务服务器的本地灾备服务器;所述异地灾备主业务服务器、异地灾备从业务服务器为所述主业务服务器的异地灾备服务器。在这种数据处理系统中,各业务服务器的缓存数据或者内存状态数据由所述高可用缓存服务器存储,不再需要各业务服务器再同步数据,同时也不担心某一个业务服务器宕机后,影响整个系统的数据缓存和共享,这是因为所述高可用缓存服务器自身也是高可用的。特别是在发生异常情况时,例如主业务服务器宕机,从业务服务器接管业务时,从业务服务器直接从所述高可用缓存服务器中获取数据,没有任何延迟和额外流量的产生。在这种实施方式中,所述高可用缓存服务器获取并存储所述主业务服务器的内存状态数据。当所述从业务服务器在确定所述主业务服务器发生故障时,向所述高可用缓存服务器发送数据同步请求。所述高可用缓存服务器接收所述从业务服务器的数据同步请求,获取主业务服务器的内存状态数据,向所述从业务服务器发送所述主业务服务器的内存状态数据,以便所述从业务服务器根据所述主业务服务器的内存状态数据恢复业务数据。进一步地,所述高可用缓存服务器获取并存储所述从业务服务器升级为主业务服务器后的内存状态数据。当接收到所述异地灾备主服务器或者从服务器发送的数据同步请求时,向所述异地灾备主服务器或者异地灾备从服务器发送所述内存状态数据,以便所述异地灾备主服务器或者异地灾备从服务器根据所述内存状态数据恢复业务数据。
以上对本发明实施例提供的数据处理方法进行了详细地介绍,下面介绍与所述方法对应的装置。
参见图2,为本发明实施例提供的高可用缓存服务器示意图。
一种高可用缓存服务器200,所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接,所述高可用缓存服务器包括:
第一接收单元201,用于接收所述高可用缓存服务器接收所述客户端发送的数据访问请求。
判断单元202,用于所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据。
第一发送单元203,用于若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据。
第二发送单元204,用于若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求。
第二接收单元205,用于接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据。
第三发送单元206,用于向所述客户端发送所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据。
存储单元207,用于确定所述数据符合预设的存储条件时,存储所述数据。
第四发送单元208,用于向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
进一步地,所述高可用缓存服务器的存储单元存储的所述数据包括下述任意一种或者多种:图片数据、认证数据、授权数据或者与客户端对应的会话数据。
进一步地,所述高可用缓存服务器还包括:
第三接收单元,用于接收所述客户端发送的数据写入请求或者数据删除请求;
第五发送单元,用于将所述数据写入请求或者数据删除请求发送给所述一个或者多个业务服务器;
第四接收单元,用于接收并所保存与所述客户端数据写入请求或者数据删除请求对应的数据操作结果。
进一步地,所述高可用缓存服务器还包括:
删除单元,用于当在预设时间内未接收到针对存储的各数据对应的数据操作请求时,删除所述数据。
进一步地,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器,所述高可用缓存服务器还包括:
第一获取单元,用于获取并存储所述主业务服务器的内存状态数据。
进一步地,所述高可用缓存服务器还包括:
第五接收单元,用于接收所述从业务服务器的数据同步请求;所述数据同步请求是所述从业务服务器在确定所述主业务服务器发生故障时发送的;
第六发送单元,用于向所述从业务服务器发送所述主业务服务器的内存状态数据,以便所述从业务服务器根据所述主业务服务器的内存状态数据恢复业务数据。
进一步地,所述高可用缓存服务器还包括:
第二获取单元,用于获取并存储所述从业务服务器升级为主业务服务器后的内存状态数据;
第七发送单元,用于当接收到所述异地灾备主服务器或者从服务器发送的数据同步请求时,向所述异地灾备主服务器或者异地灾备从服务器发送所述内存状态数据,以便所述异地灾备主服务器或者异地灾备从服务器根据所述内存状态数据恢复业务数据。
参见图3,为本发明一实施例提供的高可用数据处理系统示意图。
一种高可用数据处理系统,包括客户端100、高可用缓存服务器200、备用缓存服务器300、一个或者多个业务服务器400,其中:
所述客户端100用于向所述高可用缓存服务器发送数据访问请求,以及,接收所述高可用缓存服务器发送的与所述数据访问请求对应的数据;
所述高可用缓存服务器200用于接收所述客户端发送的数据访问请求,判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;若判断存在与所述数据访问请求对应的数据向所述客户端发送与所述数据访问请求对应的数据;若判断不存在与所述数据访问请求对应的数据,向所述业务服务器发送所述数据访问请求,接收所述业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步;
所述一个或者多个业务服务器400用于接收所述高可用缓存服务器发送的数据访问请求,以及,向所述高可用缓存服务器发送与所述数据访问请求对应的数据;
所述备用缓存服务器300用于获取所述高可用缓存服务器存储的符合预设存储条件的数据以实现与所述高可用缓存服务器的数据同步。
参见图4,为本发明又一实施例提供的高可用数据处理系统示意图。
一种高可用数据处理系统,包括客户端100、高可用缓存服务器200、备用缓存服务器300、主业务服务器A,从业务服务器B、异地灾备主业务服务器C、异地灾备从业务服务器D。
其中,所述客户端100用于向所述高可用缓存服务器发送数据访问请求,以及,接收所述高可用缓存服务器发送的与所述数据访问请求对应的数据;
所述高可用缓存服务器200用于接收所述客户端发送的数据访问请求,判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;若判断存在与所述数据访问请求对应的数据向所述客户端发送与所述数据访问请求对应的数据;若判断不存在与所述数据访问请求对应的数据,向所述业务服务器发送所述数据访问请求,接收所述业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步;
所述主业务服务器用于接收所述高可用缓存服务器发送的数据访问请求,以及,向所述高可用缓存服务器发送与所述数据访问请求对应的数据;
所述备用缓存服务器用于获取所述高可用缓存服务器存储的符合预设存储条件的数据以实现与所述高可用缓存服务器的数据同步。
所述高可用缓存服务器还用于获取并存储所述主业务服务器的内存状态数据,以及在接收到所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送的数据同步请求时,向所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送所述主业务服务器的内存状态数据;
所述从业务服务器用于在确定所述主业务服务器发生故障时,向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备主服务器用于在确定所述主业务服务器和所述从业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备从服务器用于在确定所述主业务服务器、所述从业务服务器、所述异地灾备主业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据。
在本发明提供的高可用数据处理系统中,单独设立了数据存储和缓存的高可用缓存服务器。将每个高可用或者是负载均衡的各个业务服务器主机间,以及客户端到达服务器端的共同的session、图片、数据单元、认证数据等存储数据,存放在高可用缓存服务器中。这样做的优点是,能使得缓存或者变动比较频繁的文件得到共享。同时,在高可用变动时,比如主服务器宕机,.从服务器接管,没有任何延迟和额外流量的产生。缺点是,需要独立一套高可用缓存服务器。
上述各单元的功能可对应于图1对应的实施例详细描述的上述方法的处理步骤,于此不再赘述。需要说明的是,由于对方法实施例进行详细的阐述,对装置实施例的描述较为简单,本领域技术人员可以理解的是,可以参照方法实施例构造本发明的装置实施例。本领域技术人员在不付出创造性劳动下获取的其他实现方式均属于本发明的保护范围。
本领域技术人员可以理解的是,以上对方法和装置实施例进行了示例性说明,以上不视为对本发明的限制,本领域技术人员在不付出创造性劳动下获得的其他实现方式均属于本发明的保护范围。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本发明,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。以上所述仅是本发明的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种高可用缓存服务器的数据处理方法,其特征在于,所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接,所述方法包括:
所述高可用缓存服务器接收所述客户端发送的数据访问请求;
所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;
若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据;
若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求,接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,所述高可用缓存服务器存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
2.根据权利要求1所述的方法,其特征在于,所述高可用缓存服务器存储的所述数据包括下述任意一种或者多种:
图片数据、认证数据、授权数据或者与客户端对应的会话数据。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
所述高可用缓存服务器接收所述客户端发送的数据写入请求或者数据删除请求;
所述高可用缓存服务器将所述数据写入请求或者数据删除请求发送给所述一个或者多个业务服务器;
所述高可用缓存服务器接收并所保存与所述客户端数据写入请求或者数据删除请求对应的数据操作结果。
4.根据权利要求1至3任意一项所述的方法,其特征在于,所述方法还包括:
当所述高可用缓存服务器在预设时间内未接收到针对存储的各数据对应的数据操作请求时,删除所述数据。
5.根据权利要求1所述的方法,其特征在于,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器,所述方法还包括:
所述高可用缓存服务器获取并存储所述主业务服务器的内存状态数据。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
所述高可用缓存服务器接收所述从业务服务器的数据同步请求;所述数据同步请求是所述从业务服务器在确定所述主业务服务器发生故障时发送的;
所述高可用缓存服务器向所述从业务服务器发送所述主业务服务器的内存状态数据,以便所述从业务服务器根据所述主业务服务器的内存状态数据恢复业务数据。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
所述高可用缓存服务器获取并存储所述从业务服务器升级为主业务服务器后的内存状态数据;
当接收到所述异地灾备主服务器或者从服务器发送的数据同步请求时,向所述异地灾备主服务器或者异地灾备从服务器发送所述内存状态数据,以便所述异地灾备主服务器或者异地灾备从服务器根据所述内存状态数据恢复业务数据。
8.一种高可用缓存服务器,其特征在于,所述高可用缓存服务器与客户端通过公网连接,所述高可用缓存服务器还与一个或者多个业务服务器通过公网连接,所述高可用缓存服务器还与备用缓存服务器数据连接,所述高可用缓存服务器包括:
第一接收单元,用于接收所述高可用缓存服务器接收所述客户端发送的数据访问请求;
判断单元,用于所述高可用缓存服务器判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;
第一发送单元,用于若判断存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述客户端发送与所述数据访问请求对应的数据;
第二发送单元,用于若判断不存在与所述数据访问请求对应的数据,所述高可用缓存服务器向所述一个或者多个业务服务器发送所述数据访问请求;
第二接收单元,用于接收所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据;
第三发送单元,用于向所述客户端发送所述一个或者多个业务服务器发送的与所述数据访问请求对应的数据;
存储单元,用于确定所述数据符合预设的存储条件时,存储所述数据;
第四发送单元,用于向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步。
9.一种高可用数据处理系统,其特征在于,包括客户端、高可用缓存服务器、备用缓存服务器、一个或者多个业务服务器,其中:
所述客户端用于向所述高可用缓存服务器发送数据访问请求,以及,接收所述高可用缓存服务器发送的与所述数据访问请求对应的数据;
所述高可用缓存服务器用于接收所述客户端发送的数据访问请求,判断所述高可用缓存服务器是否存在与所述数据访问请求对应的数据;若判断存在与所述数据访问请求对应的数据向所述客户端发送与所述数据访问请求对应的数据;若判断不存在与所述数据访问请求对应的数据,向所述业务服务器发送所述数据访问请求,接收所述业务服务器发送的与所述数据访问请求对应的数据,向所述客户端发送所述数据,以及,当确定所述数据符合预设的存储条件时,存储所述数据并向所述备用缓存服务器发送所述数据,以便所述备用缓存服务器存储所述数据以实现与所述高可用缓存服务器的数据同步;
所述一个或者多个业务服务器用于接收所述高可用缓存服务器发送的数据访问请求,以及,向所述高可用缓存服务器发送与所述数据访问请求对应的数据;
所述备用缓存服务器用于获取所述高可用缓存服务器存储的符合预设存储条件的数据以实现与所述高可用缓存服务器的数据同步。
10.根据权利要求9所述的方法,其特征在于,所述一个或者多个业务服务器包括主业务服务器、从业务服务器、异地灾备主业务服务器、异地灾备从业务服务器,其中:
所述高可用缓存服务器还用于获取并存储所述主业务服务器的内存状态数据,以及在接收到所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送的数据同步请求时,向所述从业务服务器、异地灾备主业务服务器或者异地灾备从业务服务器发送所述主业务服务器的内存状态数据;
所述从业务服务器用于在确定所述主业务服务器发生故障时,向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备主服务器用于在确定所述主业务服务器和所述从业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据;
所述异地灾备从服务器用于在确定所述主业务服务器、所述从业务服务器、所述异地灾备主业务服务器发生故障时向所述高可用缓存服务器发送数据同步请求;接收所述高可用缓存服务器发送的所述主业务服务器的内存状态数据,根据所述主业务服务器的内存状态数据恢复业务数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510997006.5A CN105554143A (zh) | 2015-12-25 | 2015-12-25 | 一种高可用缓存服务器及其数据处理方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510997006.5A CN105554143A (zh) | 2015-12-25 | 2015-12-25 | 一种高可用缓存服务器及其数据处理方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105554143A true CN105554143A (zh) | 2016-05-04 |
Family
ID=55833075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510997006.5A Pending CN105554143A (zh) | 2015-12-25 | 2015-12-25 | 一种高可用缓存服务器及其数据处理方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105554143A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105827738A (zh) * | 2016-05-27 | 2016-08-03 | 浪潮(北京)电子信息产业有限公司 | 一种高可用架构下容灾同步方法及系统 |
CN106060004A (zh) * | 2016-05-09 | 2016-10-26 | 深圳市永兴元科技有限公司 | 数据库访问方法及数据库代理节点 |
CN106790563A (zh) * | 2016-12-27 | 2017-05-31 | 浙江省公众信息产业有限公司 | 分布式存储系统和方法 |
CN108763315A (zh) * | 2018-04-26 | 2018-11-06 | 北京易代储科技有限公司 | 数据统计管理方法及装置 |
CN108881175A (zh) * | 2018-05-28 | 2018-11-23 | 合肥工业大学 | 一种基于区块链的防篡改电子病历系统 |
CN109831486A (zh) * | 2019-01-02 | 2019-05-31 | 技创智能科技(上海)有限公司 | 多客户端的后台数据服务器系统及数据处理方法 |
CN111258822A (zh) * | 2020-01-15 | 2020-06-09 | 广州虎牙科技有限公司 | 数据处理方法、服务器和计算机可读存储介质 |
CN111586438A (zh) * | 2020-04-27 | 2020-08-25 | 北京文香信息技术有限公司 | 一种业务数据的处理方法、装置及系统 |
CN114363358A (zh) * | 2021-12-30 | 2022-04-15 | 南京中孚信息技术有限公司 | 文档分发方法、装置、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006133344A2 (en) * | 2005-06-07 | 2006-12-14 | Yahoo! Inc | Prefetching content based on a mobile user profile |
CN101876924A (zh) * | 2009-04-30 | 2010-11-03 | 升东网络科技发展(上海)有限公司 | 数据库故障自动检测及转移方法 |
CN102012931A (zh) * | 2010-12-01 | 2011-04-13 | 北京瑞信在线系统技术有限公司 | 过滤式缓存方法及其装置、缓存系统 |
CN102629903A (zh) * | 2011-12-21 | 2012-08-08 | 奇智软件(北京)有限公司 | 一种互联网应用中的容灾备份系统及方法 |
CN104270271A (zh) * | 2011-12-21 | 2015-01-07 | 北京奇虎科技有限公司 | 一种互联网应用中的容灾备份系统及方法 |
-
2015
- 2015-12-25 CN CN201510997006.5A patent/CN105554143A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006133344A2 (en) * | 2005-06-07 | 2006-12-14 | Yahoo! Inc | Prefetching content based on a mobile user profile |
CN101876924A (zh) * | 2009-04-30 | 2010-11-03 | 升东网络科技发展(上海)有限公司 | 数据库故障自动检测及转移方法 |
CN102012931A (zh) * | 2010-12-01 | 2011-04-13 | 北京瑞信在线系统技术有限公司 | 过滤式缓存方法及其装置、缓存系统 |
CN102629903A (zh) * | 2011-12-21 | 2012-08-08 | 奇智软件(北京)有限公司 | 一种互联网应用中的容灾备份系统及方法 |
CN104270271A (zh) * | 2011-12-21 | 2015-01-07 | 北京奇虎科技有限公司 | 一种互联网应用中的容灾备份系统及方法 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106060004A (zh) * | 2016-05-09 | 2016-10-26 | 深圳市永兴元科技有限公司 | 数据库访问方法及数据库代理节点 |
CN105827738A (zh) * | 2016-05-27 | 2016-08-03 | 浪潮(北京)电子信息产业有限公司 | 一种高可用架构下容灾同步方法及系统 |
CN106790563B (zh) * | 2016-12-27 | 2019-11-15 | 浙江省公众信息产业有限公司 | 分布式存储系统和方法 |
CN106790563A (zh) * | 2016-12-27 | 2017-05-31 | 浙江省公众信息产业有限公司 | 分布式存储系统和方法 |
CN108763315A (zh) * | 2018-04-26 | 2018-11-06 | 北京易代储科技有限公司 | 数据统计管理方法及装置 |
CN108763315B (zh) * | 2018-04-26 | 2021-07-30 | 北京易代储科技有限公司 | 数据统计管理方法及装置 |
CN108881175A (zh) * | 2018-05-28 | 2018-11-23 | 合肥工业大学 | 一种基于区块链的防篡改电子病历系统 |
CN109831486A (zh) * | 2019-01-02 | 2019-05-31 | 技创智能科技(上海)有限公司 | 多客户端的后台数据服务器系统及数据处理方法 |
CN111258822A (zh) * | 2020-01-15 | 2020-06-09 | 广州虎牙科技有限公司 | 数据处理方法、服务器和计算机可读存储介质 |
CN111258822B (zh) * | 2020-01-15 | 2024-02-27 | 广州虎牙科技有限公司 | 数据处理方法、服务器和计算机可读存储介质 |
CN111586438A (zh) * | 2020-04-27 | 2020-08-25 | 北京文香信息技术有限公司 | 一种业务数据的处理方法、装置及系统 |
CN111586438B (zh) * | 2020-04-27 | 2021-08-17 | 安徽文香科技有限公司 | 一种业务数据的处理方法、装置及系统 |
CN114363358A (zh) * | 2021-12-30 | 2022-04-15 | 南京中孚信息技术有限公司 | 文档分发方法、装置、电子设备及存储介质 |
CN114363358B (zh) * | 2021-12-30 | 2024-03-12 | 南京中孚信息技术有限公司 | 文档分发方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105554143A (zh) | 一种高可用缓存服务器及其数据处理方法和系统 | |
US11647081B2 (en) | Method and system for reducing connections to a database | |
CN108023953B (zh) | Ftp服务的高可用实现方法和装置 | |
CN107734026A (zh) | 一种网络附加存储集群的设计方法、装置及设备 | |
CN105760519A (zh) | 一种集群文件系统及其文件锁分配方法 | |
CN108712457A (zh) | 基于Nginx反向代理的后端服务器动态负载调整方法及装置 | |
CN105187464A (zh) | 一种分布式存储系统中的数据同步方法、装置及系统 | |
CN105634832B (zh) | 一种服务器的备份方法和装置 | |
CN109151028A (zh) | 一种分布式存储系统容灾方法及装置 | |
CN106612339A (zh) | 域名更新方法、系统和主dns服务器 | |
CN101771548A (zh) | 文件同步方法及系统 | |
CN105208058A (zh) | 基于web会话共享的信息交互系统 | |
CN107688512A (zh) | 一种优化虚拟机数据备份方法和系统 | |
US9577959B2 (en) | Hierarchical caching system for lossless network packet capture applications | |
CN105069152A (zh) | 数据处理方法及装置 | |
CN104954444A (zh) | 一种迁移缓存数据的方法及设备 | |
TWI429232B (zh) | 備用伺服器、恢復用戶端在主用伺服器註冊的系統及方法 | |
CN111654525A (zh) | 混合云管理方法、装置、设备及介质 | |
CN111427703A (zh) | 工业数据实时展示方法及系统 | |
CN103780621A (zh) | 一种远程桌面共享方法及系统 | |
CN107168642B (zh) | 一种数据存储方法及系统 | |
CN112035062A (zh) | 云计算的本地存储的迁移方法、计算机设备及存储介质 | |
CN107491551B (zh) | 一种分布式文件系统实现客户端访问的方法及装置 | |
CN113518131B (zh) | 一种网络异常的传输数据容错处理方法、装置及系统 | |
CN109710183B (zh) | 一种数据同步方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160504 |