CN110311988A - 后端服务器的健康检查方法、负载均衡方法及装置 - Google Patents
后端服务器的健康检查方法、负载均衡方法及装置 Download PDFInfo
- Publication number
- CN110311988A CN110311988A CN201910694636.3A CN201910694636A CN110311988A CN 110311988 A CN110311988 A CN 110311988A CN 201910694636 A CN201910694636 A CN 201910694636A CN 110311988 A CN110311988 A CN 110311988A
- Authority
- CN
- China
- Prior art keywords
- load balancer
- end server
- health examination
- health
- result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/12—Network monitoring probes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1029—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers using data related to the state of servers by a load balancer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Debugging And Monitoring (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
本发明提供后端服务器的健康检查方法、负载均衡方法及装置,所述方法包括:定期获取健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间;根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。所述装置用于执行上述方法。本发明实施例提供的后端服务器的健康检查方法、负载均衡方法及装置,提高了健康检查的效率。
Description
技术领域
本发明涉及计算机技术领域,具体涉及后端服务器的健康检查方法、负载均衡方法及装置。
背景技术
随着移动互联网普及,用户访问量迅速增长,为满足用户的访问量将各种应用分布式部署在后端服务器上,并使用负载均衡器对用户请求进行分配。
服务器负载均衡是一种将客户端的访问流量均衡到多个后端服务器的技术,以实现对服务器负载的均衡效果。其中,健康检查是负载均衡服务中非常重要的功能,负载均衡器将用户请求分配到后端服务器上,需要通过健康检查来探测后端服务器是否能够正常提供服务,对于不可用的后端服务器要进行隔离,从而保证对用户请求的及时响应。现有技术中,对后端服务器的健康检查分为深度健康检查和非深度健康检查。其中,非深度健康检查仅验证后端服务器的连通性,性能消耗小,但后端服务器连通性正常并不能保证该服务器可以正常提供服务。而深度健康检查可以保证监控状态正常的后端服务器可以提供服务,因此深度健康检查的应用越来越广泛。现有的深度健康检查的处理方法,每个负载均衡器都会对各个后端服务器进行健康检查,负载均衡器会模拟用户请求,以确认后端服务器是否能够正常响应用户请求,并且每次健康检查时间间隔以秒为单位,以便能够在后端服务器宕机时尽快获知其状态并实施隔离。随着用户访问量的迅速增长,负载均衡器的数量也逐渐增多,从而导致健康检查对后端服务器造成了相当大的性能消耗。
因此,如何提出一种后端服务器的健康检查方法,能够减少对后端服务器的性能消耗,提高健康检查的效率成为本领域需要解决的重要课题。
发明内容
针对现有技术中的问题,本发明实施例提供后端服务器的健康检查方法、负载均衡方法及装置。
第一方面,本发明提出一种后端服务器的健康检查方法,包括:
健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
第二方面,本发明提供一种负载均衡方法,包括:
从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
第三方面,本发明提供一种后端服务器的健康检查装置,包括:
第一获取单元,用于定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
确定单元,用于根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
第一获得单元,用于根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
第四方面,本发明提供一种负载均衡装置,包括:
第二获取单元,用于从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
第二获得单元,用于根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
实施单元,用于根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
第五方面,本发明提供一种电子设备,包括第一存储器、第一处理器及存储在所述第一存储器上并可在第一处理器上运行的第一计算机程序,所述第一处理器执行所述第一计算机程序时实现如下后端服务器的健康检查方法:
健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
第六方面,本发明提供一种计算机可读存储介质,其上存储有第一计算机程序,所述第一计算机程序被第一处理器执行时实现实现如下后端服务器的健康检查方法:
健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
第七方面,本发明还提供一种电子设备,包括第二存储器、第二处理器及存储在所述第二存储器上并可在第二处理器上运行的第二计算机程序,所述第二处理器执行所述第二计算机程序时实现如下负载均衡方法:
从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
第八方面,本发明还提供一种计算机可读存储介质,其上存储有第二计算机程序,所述第二计算机程序被第二处理器执行时实现如下负载均衡方法:
从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
本发明实施例提供的后端服务器的健康检查方法、负载均衡方法及装置,由健康检查群组中的组长负载均衡器定期获取健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,再根据健康检查群组中每个负载均衡器对每个后端服务器的健康检查结果对应的检查时间,确定每个后端服务器的有效健康检查结果,然后根据每个后端服务器的有效健康检查结果,获得每个后端服务器的健康输出结果,由于减少了进行健康检查的负载均衡器的数量,减少大量负载均衡器对后端服务器进行重复的健康检查,减少了后端服务器的性能消耗,提高了健康检查的效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1是本发明第一实施例提供的后端服务器的健康检查系统的结构示意图。
图2是本发明第二实施例提供的后端服务器的健康检查方法的流程示意图。
图3是本发明第三实施例提供的后端服务器的健康检查方法的流程示意图。
图4是本发明第四实施例提供的后端服务器的健康检查方法的流程示意图。
图5是本发明第五实施例提供的负载均衡方法的流程示意图。
图6是本发明第六实施例提供的负载均衡方法的流程示意图。
图7是本发明第七实施例提供的后端服务器的健康检查装置的结构示意图。
图8是本发明第八实施例提供的后端服务器的健康检查装置的结构示意图。
图9是本发明第九实施例提供的后端服务器的健康检查装置的结构示意图。
图10是本发明第十实施例提供的后端服务器的健康检查装置的结构示意图。
图11是本发明第十一实施例提供的负载均衡装置的结构示意图。
图12是本发明第十二实施例提供的负载均衡装置的结构示意图。
图13是本发明第十三实施例提供的负载均衡装置的结构示意图。
图14是本发明第十四实施例提供的电子设备的实体结构示意图。
图15是本发明第十五实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
图1是本发明第一实施例提供的后端服务器的健康检查系统的结构示意图,如图1所示,本发明实施例提供的后端服务器的健康检查系统包括负载均衡器群组和后端服务器群组3,所述负载均衡器群组中的每个负载均衡器与和后端服务器群组3中的每个后端服务器通信连接,所述负载均衡器群组包括多个负载均衡器,后端服务器群组3包括多个后端服务器。所述负载均衡器群组包括健康检查群组1和普通群组2,从所述负载均衡器群组选出部分负载均衡器构成健康检查群组1,所述负载均衡器群组除了健康检查群组1以外的负载均衡器构成普通群组2。健康检查群组1用于对后端服务器群组3进行深度健康检查,获得后端服务器群组3中每个后端服务器的健康输出结果,普通群组2中的每个负载均衡器可以获取每个后端服务器的健康输出结果,根据每个后端服务器的健康输出结果实施负载均衡策略。其中,健康检查群组1中的负载均衡器在完成健康检查任务的前提下,也可以根据每个后端服务器的健康输出结果实施负载均衡策略。从健康检查群组1中选出一个负载均衡器作为组长负载均衡器,所述组长负载均衡器用于执行本发明实施例提供的后端服务器的健康检查方法。所述负载均衡器群组中的任意一个负载均衡器都可以执行本发明实施例提供的负载均衡方法。
图2是本发明第二实施例提供的后端服务器的健康检查方法的流程示意图,如图2所示,本发明实施例提供的后端服务器的健康检查方法包括:
S201、健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
具体地,健康检查群组中的每个负载均衡器都会周期性地对后端服务器集群中的每个后端服务器进行深度健康检查,得到所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果会记录检查时间,作为每个健康检查结果对应的检查时间。所述健康检查群组中的组长负载均衡器可以定期获得所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间。其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述健康检查群组中的负载均衡器的数量根据实际经验进行设置,本发明实施例不做限定。所述组长负载均衡器是从所述健康检查群组中预先选出的,例如可以采用Raft算法从所述健康检查群组的各个负载均衡器中获得一个负载均衡器作为组长负载均衡器。其中,健康检查群组中的每个负载均衡器进行深度健康检查的周期,根据实际需要进行设置,例如每隔1秒一次,本发明实施例不做限定。所述定期根据实际需要件设置,本发明实施例不做限定。可理解的是所述定期与深度健康检查的周期相匹配。
例如,所述健康检查群组中各个负载均衡器可以直接将对每个后端服务器健康检查结果以及对应的检查时间发送给所述组长负载均衡器。或者,所述健康检查群组中各个负载均衡器将获得的每个后端服务器健康检查结果以及对应的检查时间,发送到协商缓存区存储,所述组长负载均衡器可以定期从所述协商缓存区获得每个后端服务器健康检查结果以及对应的检查时间。其中,所述协商缓存区可以是预先设定的分布式缓存区。
S202、所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
具体地,所述组长负载均衡器获得所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果之后,会将所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果对应的时间戳t1与当前时间T1进行比较,如果检查时间t1与当前时间T1的差值小于第一时间阈值,那么检查时间t1对应的健康检查结果为一个有效的健康检查结果,如果检查时间t1与当前时间T1的差值大于等于第一时间阈值,那么检查时间t1对应的健康检查结果为一个无效的健康检查结果。对于每个所述后端服务器,所述组长负载均衡器会获得所述健康检查群组中的各个负载均衡器对每个后端服务器的有效健康检查结果,作为每个所述后端服务器的有效健康检查结果。可理解的是,每个所述后端服务器的有效健康检查结果可能包括所述健康检查群组中的多个负载均衡器对每个后端服务器的有效健康检查结果,也可能包括所述健康检查群组中的一个负载均衡器对每个后端服务器的有效健康检查结果,也可能为空。其中,所述第一时间阈值根据实际经验进行设置,本发明实施例不做限定。
S203、所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
具体地,所述组长负载均衡器获得每个所述后端服务器的有效健康检查结果之后,可以从每个所述后端服务器的有效健康检查结果中,获得每个所述后端服务器的健康输出结果。
例如,后端服务器A的有效健康检查结果中包括所述健康检查群组中10个负载均衡器对后端服务器A的有效健康检查结果,所述组长服务器根据多数原则,将其中超过5个相同的有效健康检查结果作为后端服务器A的健康输出结果。
本发明实施例提供的后端服务器的健康检查方法,由健康检查群组中的组长负载均衡器定期获取健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,再根据健康检查群组中每个负载均衡器对每个后端服务器的健康检查结果对应的检查时间,确定每个后端服务器的有效健康检查结果,然后根据每个后端服务器的有效健康检查结果,获得每个后端服务器的健康输出结果,由于减少了进行健康检查的负载均衡器的数量,减少大量负载均衡器对后端服务器进行重复的健康检查,减少了后端服务器的性能消耗,提高了健康检查的效率。
在上述各实施例的基础上,进一步地,本发明实施例提供的后端服务器的健康检查方法还包括:
所述组长负载均衡器将每个所述后端服务器的健康输出结果存储到输出缓存区并刷新更新时间,以供所述负载均衡器集群中的负载均衡器获取。
具体地,所述组长负载均衡器获得每个所述后端服务器的输出结果之后,可以将每个所述后端服务器的健康输出结果发送到输出缓存区存储,并在将每个所述后端服务器的健康输出结果存储到输出缓存区之后刷新更新时间。所述负载均衡器集群中的每个负载均衡器都可以访问所述输出缓存区,从所述输出缓存区获取到每个所述后端服务器的健康输出结果以及对应的更新时间,然后根据每个所述后端服务器的健康输出结果以及对应的更新时间实施负载均衡策略。其中,所述输出缓存区可以为分布式缓存区。利用输出缓存区存储每个所述后端服务器的健康输出结果以及对应的更新时间,方便所述负载均衡器集群中的负载均衡器获取每个所述后端服务器的健康输出结果以及对应的更新时间。
例如,各个所述后端服务器的健康输出结果在所述输出缓存区以一个更新时间和N个条目的形式存储,所述条目与所述后端服务器一一对应,每个条目包括一个所述后端服务器的健康输出结果和所述后端服务器的标识。
在上述各实施例的基础上,进一步地,所述健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间包括:
所述组长负载均衡器从协商缓存区获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间;其中,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中各个负载均衡器预先存储到所述协商缓存区的。
具体地,所述健康检查群组中各个负载均衡器将获得的对每个后端服务器的健康检查结果以及对应的检查时间发送到协商缓存区存储,所述组长负载均衡器再从协商缓存区读取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间。其中,所述协商缓存区可以是预先设定的分布式缓存区。
图3是本发明第三实施例提供的后端服务器的健康检查方法的流程示意图,如图3所示,在上述各实施例的基础上,进一步地,所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果包括:
S2031、所述组长负载均衡器统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量;
具体地,所述组长负载均衡器在获得每个所述后端服务器的有效健康检查结果之后,对于每个所述后端服务器,可以统计所述后端服务器的有效健康检查结果对应的负载均衡器的数量,如果所述后端服务器的有效健康检查结果包括所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果,那么所述后端服务器的有效健康检查结果对应的负载均衡器的数量就为M,M为大于等于0的整数。
S2032、所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量大于所述健康检查群组中的负载均衡器的总数量的一半,则统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
具体地,所述组长负载均衡器将所述后端服务器的有效健康检查结果对应的负载均衡器数量M与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果M大于Q,那么所述组长负载均衡器统计所述后端服务器的有效健康检查结果包括的所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果中相同检查结果的数量,由于所述有效健康检查结果为可用和不可用两种,可以统计出M个有效健康检查结果中有效检健康查结果为可用的有m个,有效健康检查结果为不可用的有n个,M=m+n。所述组长负载均衡器对比m和n,如果m大于n,那么所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量为m,如果n大于m,那么所述最多的相同的检查结果的数量为n。如果n等于m,所述最多的相同的检查结果的数量为n或者m。
S2033、所述组长负载均衡器若判断获知所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则将最多的相同的检查结果作为所述后端服务器的健康输出结果。
具体地,所述组长负载均衡器获得所述最多的相同的检查结果的数量X之后,将X与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果X大于Q,那么将最多的相同的检查结果作为所述后端服务器的健康输出结果。如果X小于或者等于Q,说明所述健康检查群组中有2Q-X个负载均衡器没能工作,所述组长负载均衡器可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。
例如,在判断出X大于Q之后,如果X=m,那么所述后端服务器的健康输出结果为可用,如果X=n,那么所述后端服务器的健康输出结果为不可用。
图4是本发明第四实施例提供的后端服务器的健康检查方法的流程示意图,如图4所示,在上述各实施例的基础上,进一步地,所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果包括:
S2034、所述组长负载均衡器统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量,并统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
具体地,所述组长负载均衡器在获得每个所述后端服务器的有效健康检查结果之后,对于每个所述后端服务器,可以统计所述后端服务器的有效健康检查结果对应的负载均衡器的数量,如果所述后端服务器的有效健康检查结果包括所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果,那么所述后端服务器的有效健康检查结果对应的负载均衡器的数量就为M,M为大于等于0的整数。
所述组长负载均衡器统计所述后端服务器的有效健康检查结果包括的所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果中相同检查结果的数量,由于所述有效健康检查结果为可用和不可用两种,可用统计出M个有效健康检查结果中有效健康检查结果为可用的有m个,有效健康检查结果为不可用的有n个,M=m+n。所述组长负载均衡器对比m和n,如果m大于n,那么所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量为m,如果n大于m,那么所述最多的相同的检查结果的数量为n。如果n等于m,所述最多的相同的检查结果的数量为n或者m。
S2035、所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量小于等于所述健康检查群组中的负载均衡器的总数量的一半,或者所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
具体地,所述组长负载均衡器将所述后端服务器的有效健康检查结果对应的负载均衡器数量M与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果M小于等于Q,那么说明所述健康检查群组中有2Q-M个负载均衡器没能工作,所述组长负载均衡器可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。或者,所述组长负载均衡器将所述最多的相同的检查结果的数量X与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果X小于等于Q,那么说明所述健康检查群组中有2Q-X个负载均衡器没能工作,所述组长负载均衡器可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。
图5是本发明第五实施例提供的负载均衡方法的流程示意图,如图5所示,本发明实施例提供的负载均衡方法,包括:
S501、从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
具体地,所述健康检查群组中的组长负载均衡器会将各个所述后端服务器的健康输出结果以存储到输出缓存区并刷新更新时间,所述负载均衡器集群中的每个负载均衡器都可以从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间。
S502、根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
具体地,所述负载均衡器获得各个所述后端服务器的健康输出结果对应的更新时间之后,会将各个所述后端服务器的健康输出结果对应的更新时间t2与当前时间T2进行比较,如果更新时间t2与当前时间T2的差值小于第二时间阈值,那么更新时间t2对应的各个所述后端服务器的健康输出结果为未超时的后端服务器的健康输出结果。
S503、根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
具体地,所述负载均衡器在获得未超时的后端服务器的健康输出结果之后,根据未超时的后端服务器的健康输出结果实施负载均衡策略。所述负载均衡器实施负载均衡策略的具体过程为现有技术,此处不进行赘述。
本发明实施例提供的负载均衡方法,能够从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间,然后根据各个后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果,再根据未超时的后端服务器的健康输出结果,实施负载均衡策略,由于可以从输出缓存区获取各个后端服务器的健康输出结果,不需要单独对各个后端服务器进行健康检查,提高了负载均衡的效率。
图6是本发明第六实施例提供的负载均衡方法的流程示意图,如图6所示,本发明实施例提供的负载均衡方法还包括:
S601、获取负载均衡器集群中每个负载均衡器的机房标签和IP地址;
具体地,所述负载均衡器可以获取负载均衡器集群中每个负载均衡器的机房标签和IP地址,所述机房标签与机房一一对应,所述机房标签用于标识所述负载均衡器所在的机房。其中,所述机房标签是预设的。
S602、根据所述负载均衡器集群中每个负载均衡器的机房标签和IP地址,以所述负载均衡器集群的机房为单位进行轮询,每次轮询获得每个所述机房IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器。
具体地,所述负载均衡器集群中的负载均衡器分布于K个机房,所述负载均衡器根据所述每个所述负载均衡器的机房标签可以确定每个所述负载均衡器所属的机房,所述负载均衡器以机房为单位进行轮询,每次轮询时从每个机房获得IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器,实现了从所述负载均衡器集群中选出所述预设数量的负载均衡器,所述预设数量的负载均衡器构成了所述健康检查群组。其中,所述预设数量根据实际经验进行设置,例如所述预设数量大于等于5且小于等于11,本发明实施例不做限定。
例如,所述负载均衡器集群包括1000个后端服务器,平均分布于10个机房,需要选出11个负载均衡器构成所述健康检查群组,依次从10个机房中获得每个机房IP地址最大负载均衡器,然后再从一个机房获取该机房中剩余的负载均衡器中IP地址最大的负载均衡器,从而获得构成所述健康检查群组的11个负载均衡器。
在上述各实施例的基础上,进一步地,所述负载均衡方法还包括:
若判断获知存在超时的后端服务器的健康输出结果,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
具体地,所述负载均衡器获得各个所述后端服务器的健康输出结果对应的更新时间之后,会将各个所述后端服务器的健康输出结果对应的更新时间t2与当前时间T2进行比较,如果更新时间t2与当前时间T2的差值小于第二时间阈值,那么更新时间t2对应的各个所述后端服务器的健康输出结果为超时的后端服务器的健康输出结果,说明存在超时的后端服务器的健康输出结果,所述健康检查群组没有正常工作,不能提供有效的后端服务器的健康输出结果,所述负载均衡器可以从所述负载均衡器集群中重新选出所述负载均衡器群组,重新选出所述健康检查群组的具体过程与步骤S601和S602中选出所述健康检查群组的过程类似,此处不进行赘述。重新选出所述健康检查群组之后,可以根据Raft算法从所述健康检查群组中重新选出一个负载均衡器作为组长负载均衡器。所述第二时间阈值根据实际经验进行设置,本发明实施例不做限定。
图7是本发明第七实施例提供的后端服务器的健康检查装置的结构示意图,如图7所示,本发明实施例提供的后端服务器的健康检查装置包括第一获取单元701、确定单元702和第一获得单元703,其中:
第一获取单元701用于定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;确定单元702用于根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;第一获得单元703用于根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
具体地,健康检查群组中的每个负载均衡器都会周期性地对后端服务器集群中的每个后端服务器进行深度健康检查,得到所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果会记录检查时间,作为每个健康检查结果对应的检查时间。第一获取单元701可以定期获得所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间。其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述健康检查群组中的负载均衡器的数量根据实际经验进行设置,本发明实施例不做限定。所述组长负载均衡器是从所述健康检查群组中预先选出的,例如可以采用Raft算法从所述健康检查群组的各个负载均衡器中获得一个负载均衡器作为组长负载均衡器。其中,健康检查群组中的每个负载均衡器进行深度健康检查的周期,根据实际需要进行设置,例如每隔1秒一次,本发明实施例不做限定。所述定期根据实际需要件设置,本发明实施例不做限定。可理解的是所述定期与深度健康检查的周期相匹配。
获得所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果之后,确定单元702会将所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果对应的时间戳t1与当前时间T1进行比较,如果检查时间t1与当前时间T1的差值小于第一时间阈值,那么检查时间t1对应的健康检查结果为一个有效的健康检查结果,如果检查时间t1与当前时间T1的差值大于等于第一时间阈值,那么检查时间t1对应的健康检查结果为一个无效的健康检查结果。对于每个所述后端服务器,确定单元702会获得所述健康检查群组中的各个负载均衡器对每个后端服务器的有效健康检查结果,作为每个所述后端服务器的有效健康检查结果。可理解的是,每个所述后端服务器的有效健康检查结果可能包括所述健康检查群组中的多个负载均衡器对每个后端服务器的有效健康检查结果,也可能包括所述健康检查群组中的一个负载均衡器对每个后端服务器的有效健康检查结果,也可能为空。其中,所述第一时间阈值根据实际经验进行设置,本发明实施例不做限定。
第一获得单元703获得每个所述后端服务器的有效健康检查结果之后,可以从每个所述后端服务器的有效健康检查结果中,获得每个所述后端服务器的健康输出结果。
本发明实施例提供的后端服务器的健康检查装置,能够定期获取健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,再根据健康检查群组中每个负载均衡器对每个后端服务器的健康检查结果对应的检查时间,确定每个后端服务器的有效健康检查结果,然后根据每个后端服务器的有效健康检查结果,获得每个后端服务器的健康输出结果,由于减少了进行健康检查的负载均衡器的数量,减少大量负载均衡器对后端服务器进行重复的健康检查,减少了后端服务器的性能消耗,提高了健康检查的效率。
图8是本发明第八实施例提供的后端服务器的健康检查装置的结构示意图,如图8所示,本发明实施例提供的后端服务器的健康检查装置还包括存储单元704,其中:
存储单元704用于所述组长负载均衡器将每个所述后端服务器的健康输出结果存储到输出缓存区并刷新更新时间,以供所述负载均衡器集群中的负载均衡器获取。
具体地,获得每个所述后端服务器的输出结果之后,存储单元704可以将每个所述后端服务器的健康输出结果发送到输出缓存区存储,并在将每个所述后端服务器的健康输出结果存储到输出缓存区之后刷新更新时间。所述负载均衡器集群中的每个负载均衡器都可以访问所述输出缓存区,从所述输出缓存区获取到每个所述后端服务器的健康输出结果以及对应的更新时间,然后根据每个所述后端服务器的健康输出结果以及对应的更新时间实施负载均衡策略。其中,所述输出缓存区可以为分布式缓存区。利用输出缓存区存储每个所述后端服务器的健康输出结果以及对应的更新时间,方便所述负载均衡器集群中的负载均衡器获取每个所述后端服务器的健康输出结果以及对应的更新时间。
在上述各实施例的基础上,进一步地,第一获取单元701具有用于:
从协商缓存区获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间;其中,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中各个负载均衡器预先存储到所述协商缓存区的。
具体地,所述健康检查群组中各个负载均衡器将获得的对每个后端服务器的健康检查结果以及对应的检查时间发送到协商缓存区存储,第一获取单元701再从协商缓存区读取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间。其中,所述协商缓存区可以是预先设定的分布式缓存区。
图9是本发明第九实施例提供的后端服务器的健康检查装置的结构示意图,如图9所示,在上述各实施例的基础上,进一步地,第一获得单元703包括获得子单元7031、第一统计子单元7032和判断子单元7033,其中:
获得子单元7031用于统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量;第一统计子单元7032用于在判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量大于所述健康检查群组中的负载均衡器的总数量的一半之后,统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;判断子单元7033用于在判断获知所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半之后,将最多的相同的检查结果作为所述后端服务器的健康输出结果。
具体地,在获得每个所述后端服务器的有效健康检查结果之后,对于每个所述后端服务器,获得子单元7031可以统计所述后端服务器的有效健康检查结果对应的负载均衡器的数量,如果所述后端服务器的有效健康检查结果包括所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果,那么所述后端服务器的有效健康检查结果对应的负载均衡器的数量就为M,M为大于等于0的整数。
第一统计子单元7032将所述后端服务器的有效健康检查结果对应的负载均衡器数量M与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果M大于Q,那么所述组长负载均衡器统计所述后端服务器的有效健康检查结果包括的所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果中相同检查结果的数量,由于所述有效健康检查结果为可用和不可用两种,可以统计出M个有效健康检查结果中有效检健康查结果为可用的有m个,有效健康检查结果为不可用的有n个,M=m+n。第一统计子单元7032对比m和n,如果m大于n,那么所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量为m,如果n大于m,那么所述最多的相同的检查结果的数量为n。如果n等于m,所述最多的相同的检查结果的数量为n或者m。
判断子单元7033获得所述最多的相同的检查结果的数量X之后,将X与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果X大于Q,那么将最多的相同的检查结果作为所述后端服务器的健康输出结果。如果X小于或者等于Q,说明所述健康检查群组中有2Q-X个负载均衡器没能工作,判断子单元7033可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。
图10是本发明第十实施例提供的后端服务器的健康检查装置的结构示意图,如图10所示,在上述各实施例的基础上,进一步地,获得单元703包括第二统计子单元7034和选出子单元7035,其中:
第二统计子单元7034用于统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量,并统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;选出子单元7035用于所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量小于等于所述健康检查群组中的负载均衡器的总数量的一半,或者所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
具体地,在获得每个所述后端服务器的有效健康检查结果之后,对于每个所述后端服务器,第二统计子单元7034可以统计所述后端服务器的有效健康检查结果对应的负载均衡器的数量,如果所述后端服务器的有效健康检查结果包括所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果,那么所述后端服务器的有效健康检查结果对应的负载均衡器的数量就为M,M为大于等于0的整数。
第二统计子单元7034统计所述后端服务器的有效健康检查结果包括的所述健康检查群组中的M个负载均衡器对所述后端服务器的有效健康检查结果中相同检查结果的数量,由于所述有效健康检查结果为可用和不可用两种,可用统计出M个有效健康检查结果中有效健康检查结果为可用的有m个,有效健康检查结果为不可用的有n个,M=m+n。第二统计子单元7034对比m和n,如果m大于n,那么所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量为m,如果n大于m,那么所述最多的相同的检查结果的数量为n。如果n等于m,所述最多的相同的检查结果的数量为n或者m。
选出子单元7035将所述后端服务器的有效健康检查结果对应的负载均衡器数量M与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果M小于等于Q,那么说明所述健康检查群组中有2Q-M个负载均衡器没能工作,所述组长负载均衡器可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。或者,所述组长负载均衡器将所述最多的相同的检查结果的数量X与所述健康检查群组中的负载均衡器的总数量的一半Q进行比较,如果X小于等于Q,那么说明所述健康检查群组中有2Q-X个负载均衡器没能工作,所述组长负载均衡器可以从所述负载均衡器集群中重新选出2Q个负载均衡器构成所述健康检查群组。
图11是本发明第十一实施例提供的负载均衡装置的结构示意图,如图11所示,本发明实施例提供的负载均衡装置包括第二获取单元1101、第二获得单元1102和实施单元1103,其中:
第二获取单元1101用于从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;第二获得单元1102用于根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;实施单元1103用于根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
具体地,所述健康检查群组中的组长负载均衡器会将各个所述后端服务器的健康输出结果以存储到输出缓存区并刷新更新时间,第二获取单元1101可以从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间。
第二获得单元1102获得各个所述后端服务器的健康输出结果对应的更新时间之后,会将各个所述后端服务器的健康输出结果对应的更新时间t2与当前时间T2进行比较,如果更新时间t2与当前时间T2的差值小于第二时间阈值,那么更新时间t2对应的各个所述后端服务器的健康输出结果为未超时的后端服务器的健康输出结果。
实施单元1103在获得未超时的后端服务器的健康输出结果之后,根据未超时的后端服务器的健康输出结果实施负载均衡策略。实施单元1103实施负载均衡策略的具体过程为现有技术,此处不进行赘述。
本发明实施例提供的负载均衡装置,能够从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间,然后根据各个后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果,再根据未超时的后端服务器的健康输出结果,实施负载均衡策略,由于可以从输出缓存区获取各个后端服务器的健康输出结果,不需要单独对各个后端服务器进行健康检查,提高了负载均衡的效率。
图12是本发明第十二实施例提供的负载均衡装置的结构示意图,如图12所示,本发明实施例提供的负载均衡装置还包括第三获取单元1104和轮询单元1105,其中:
第三获取单元1104用于获取负载均衡器集群中每个负载均衡器的机房标签和IP地址;轮询单元1105用于根据所述负载均衡器集群中每个负载均衡器的机房标签和IP地址,以所述负载均衡器集群的机房为单位进行轮询,每次轮询获得每个所述机房IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器。
具体地,第三获取单元1104可以获取负载均衡器集群中每个负载均衡器的机房标签和IP地址,所述机房标签与机房一一对应,所述机房标签用于标识所述负载均衡器所在的机房。其中,所述机房标签是预设的。
所述负载均衡器集群中的负载均衡器分布于K个机房,轮询单元1105根据所述每个所述负载均衡器的机房标签可以确定每个所述负载均衡器所属的机房,所述负载均衡器以机房为单位进行轮询,每次轮询时从每个机房获得IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器,实现了从所述负载均衡器集群中选出所述预设数量的负载均衡器,所述预设数量的负载均衡器构成了所述健康检查群组。其中,所述预设数量根据实际经验进行设置,例如所述预设数量大于等于5且小于等于11,本发明实施例不做限定。
图13是本发明第十三实施例提供的负载均衡装置的结构示意图,如图13所示,本发明实施例提供的负载均衡装置还包括重选单元1106,其中:
重选单元1106用于在判断获知存在超时的后端服务器的健康输出结果之后,从所述负载均衡器集群中重新选出所述负载均衡器群组。
具体地,获得各个所述后端服务器的健康输出结果对应的更新时间之后,重选单元1106会将各个所述后端服务器的健康输出结果对应的更新时间t2与当前时间T2进行比较,如果更新时间t2与当前时间T2的差值小于第二时间阈值,那么更新时间t2对应的各个所述后端服务器的健康输出结果为超时的后端服务器的健康输出结果,说明存在超时的后端服务器的健康输出结果,所述健康检查群组没有正常工作,不能提供有效的后端服务器的健康输出结果,所述负载均衡器可以从所述负载均衡器集群中重新选出所述负载均衡器群组,重新选出所述健康检查群组的具体过程与步骤S601和S602中选出所述健康检查群组的过程类似,此处不进行赘述。重新选出所述健康检查群组之后,可以根据Raft算法从所述健康检查群组中重新选出一个负载均衡器作为组长负载均衡器。所述第二时间阈值根据实际经验进行设置,本发明实施例不做限定。
本发明实施例提供的装置的实施例具体可以用于执行上述相应方法实施例的处理流程,其功能在此不再赘述,可以参照上述相应方法实施例的详细描述。
图14是本发明第十四实施例提供的电子设备的实体结构示意图,如图14所示,该电子设备可以包括:第一处理器(Processor)1401、第一通信接口(CommunicationsInterface)1402、第一存储器(Memory)1403和第一通信总线1404,其中,第一处理器1401,第一通信接口1402,第一存储器1403通过第一通信总线1404完成相互间的通信。第一处理器1401可以调用第一存储器1403中的逻辑指令,以执行如下方法,例如包括:健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
本实施例公开一种计算机程序产品,所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行如下方法,例如包括:健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
本实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储第一计算机程序,所述第一计算机程序使所述计算机执行如下方法,例如包括:健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
图15是本发明另一实施例提供的电子设备的实体结构示意图,如图15所示,该电子设备可以包括:第二处理器(Processor)1501、第二通信接口(CommunicationsInterface)1502、第二存储器(Memory)1503和第二通信总线1504,其中,第二处理器1501,第二通信接口1502,第二存储器1503通过第二通信总线1504完成相互间的通信。第二处理器1501可以调用第二存储器1503中的逻辑指令,以执行如下方法,例如包括:从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
本实施例公开一种计算机程序产品,所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行如下方法,例如包括:从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
本实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储第二计算机程序,所述第二计算机程序使所述计算机执行如下方法,例如包括:从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
此外,上述的第一存储器1403和第二存储器1503中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,装置,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
在本说明书的描述中,参考术语“一个实施例”、“一个具体实施例”、“一些实施例”、“例如”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (20)
1.一种后端服务器的健康检查方法,其特征在于,包括:
健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
所述组长负载均衡器根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
2.根据权利要求1所述的方法,其特征在于,还包括:
所述组长负载均衡器将每个所述后端服务器的健康输出结果存储到输出缓存区并刷新更新时间,以供所述负载均衡器集群中的负载均衡器获取。
3.根据权利要求1所述的方法,其特征在于,所述健康检查群组中的组长负载均衡器定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间包括:
所述组长负载均衡器从协商缓存区获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间;其中,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中各个负载均衡器预先存储到所述协商缓存区的。
4.根据权利要求1所述的方法,其特征在于,所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果包括:
所述组长负载均衡器统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量;
所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量大于所述健康检查群组中的负载均衡器的总数量的一半,则统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
所述组长负载均衡器若判断获知所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则将最多的相同的检查结果作为所述后端服务器的健康输出结果。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述组长负载均衡器根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果包括:
所述组长负载均衡器统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量,并统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量小于等于所述健康检查群组中的负载均衡器的总数量的一半,或者所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
6.一种负载均衡方法,其特征在于,包括:
从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
7.根据权利要求6所述的方法,其特征在于,还包括:
获取负载均衡器集群中每个负载均衡器的机房标签和IP地址;
根据所述负载均衡器集群中每个负载均衡器的机房标签和IP地址,以所述负载均衡器集群的机房为单位进行轮询,每次轮询获得每个所述机房IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器。
8.根据权利要求6或者7所述的方法,其特征在于,还包括:
若判断获知存在超时的后端服务器的健康输出结果,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
9.一种后端服务器的健康检查装置,其特征在于,包括:
第一获取单元,用于定期获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中的每个负载均衡器周期性地对每个后端服务器进行深度健康检查之后获得的;其中,所述健康检查群组是从所述负载均衡器集群中预先选出的,所述组长负载均衡器是从所述健康检查群组中预先选出的一个负载均衡器;
确定单元,用于根据所述健康检查群组中每个负载均衡器对每个所述后端服务器的健康检查结果对应的检查时间,确定每个所述后端服务器的有效健康检查结果;
第一获得单元,用于根据每个所述后端服务器的有效健康检查结果,获得每个所述后端服务器的健康输出结果。
10.根据权利要求9所述的装置,其特征在于,还包括存储单元,其中:
所述存储单元,用于所述组长负载均衡器将每个所述后端服务器的健康输出结果存储到输出缓存区并刷新更新时间,以供所述负载均衡器集群中的负载均衡器获取。
11.根据权利要求9所述的装置,其特征在于,所述第一获取单元具有用于:
从协商缓存区获取所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间;其中,所述健康检查群组中的每个负载均衡器对每个后端服务器的健康检查结果以及对应的检查时间是所述健康检查群组中各个负载均衡器预先存储到所述协商缓存区的。
12.根据权利要求9所述的装置,其特征在于,所述第一获得单元包括:
获得子单元,用于统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量;
第一统计子单元,用于在判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量大于所述健康检查群组中的负载均衡器的总数量的一半之后,统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
判断子单元,用于在判断获知所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半之后,将最多的相同的检查结果作为所述后端服务器的健康输出结果。
13.根据权利要求9至12任一项所述的装置,其特征在于,所述获得单元包括:
第二统计子单元,用于统计获得所述后端服务器的有效健康检查结果对应的负载均衡器的数量,并统计所述后端服务器的有效健康检查结果中最多的相同的检查结果的数量;
选出子单元,用于所述组长负载均衡器若判断获知所述后端服务器的有效健康检查结果对应的负载均衡器数量小于等于所述健康检查群组中的负载均衡器的总数量的一半,或者所述最多的相同的检查结果的数量大于所述健康检查群组中的负载均衡器的总数量的一半,则从所述负载均衡器集群中重新选出所述负载均衡器群组。
14.一种负载均衡装置,其特征在于,包括:
第二获取单元,用于从输出缓存区获取各个后端服务器的健康输出结果以及对应的更新时间;其中,各个所述后端服务器的健康输出结果以及对应的更新时间是预先存储的;
第二获得单元,用于根据各个所述后端服务器的健康输出结果对应的更新时间,获得未超时的后端服务器的健康输出结果;
实施单元,用于根据未超时的后端服务器的健康输出结果,实施负载均衡策略。
15.根据权利要求14所述的装置,其特征在于,还包括第三获取单元和轮询单元,其中:
第三获取单元,用于获取负载均衡器集群中每个负载均衡器的机房标签和IP地址;
轮询单元,用于根据所述负载均衡器集群中每个负载均衡器的机房标签和IP地址,以所述负载均衡器集群的机房为单位进行轮询,每次轮询获得每个所述机房IP地址最大的负载均衡器作为健康检查群组中一个负载均衡器,直到获得预设数量的负载均衡器。
16.根据权利要求14或者15所述的装置,其特征在于,还包括重选单元,其中:
所述重选单元,用于在判断获知存在超时的后端服务器的健康输出结果之后,从所述负载均衡器集群中重新选出所述负载均衡器群组。
17.一种电子设备,包括第一存储器、第一处理器及存储在所述第一存储器上并可在第一处理器上运行的第一计算机程序,其特征在于,所述第一处理器执行所述第一计算机程序时实现权利要求1至5任一项所述的方法。
18.一种计算机可读存储介质,其上存储有第一计算机程序,其特征在于,所述第一计算机程序被第一处理器执行时实现权利要求1至5任一项所述的方法。
19.一种电子设备,包括第二存储器、第二处理器及存储在所述第二存储器上并可在第二处理器上运行的第二计算机程序,其特征在于,所述第二处理器执行所述第二计算机程序时实现权利要求6至8任一项所述的方法。
20.一种计算机可读存储介质,其上存储有第二计算机程序,其特征在于,所述第二计算机程序被第二处理器执行时实现权利要求6至8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910694636.3A CN110311988B (zh) | 2019-07-30 | 2019-07-30 | 后端服务器的健康检查方法、负载均衡方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910694636.3A CN110311988B (zh) | 2019-07-30 | 2019-07-30 | 后端服务器的健康检查方法、负载均衡方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110311988A true CN110311988A (zh) | 2019-10-08 |
CN110311988B CN110311988B (zh) | 2022-01-28 |
Family
ID=68082366
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910694636.3A Active CN110311988B (zh) | 2019-07-30 | 2019-07-30 | 后端服务器的健康检查方法、负载均衡方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110311988B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110971482A (zh) * | 2019-11-05 | 2020-04-07 | 北京字节跳动网络技术有限公司 | 基于ebpf的后端服务器检测方法、装置及电子设备 |
CN111651329A (zh) * | 2020-06-08 | 2020-09-11 | 中国工商银行股份有限公司 | 针对应用的健康检查方法和装置、计算机系统和存储介质 |
CN114363213A (zh) * | 2022-03-01 | 2022-04-15 | 辽宁振兴银行股份有限公司 | 一种改进的负载均衡健康检查方法、系统及应用 |
CN114938377A (zh) * | 2022-04-20 | 2022-08-23 | 京东科技信息技术有限公司 | 后端服务器管理方法、装置、可读介质及电子设备 |
CN116800636A (zh) * | 2023-08-01 | 2023-09-22 | 北京志凌海纳科技有限公司 | 负载均衡中的被动健康检查方法、装置、设备及介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104394224A (zh) * | 2014-11-28 | 2015-03-04 | 无锡华云数据技术服务有限公司 | 一种负载均衡系统 |
CN106302595A (zh) * | 2015-06-02 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种对服务器进行健康检查的方法及设备 |
CN106797405A (zh) * | 2016-12-14 | 2017-05-31 | 华为技术有限公司 | 分布式负载均衡系统、健康检查方法和服务节点 |
US20170230261A1 (en) * | 2014-10-31 | 2017-08-10 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and device for checking health of link |
CN107181636A (zh) * | 2016-03-10 | 2017-09-19 | 阿里巴巴集团控股有限公司 | 一种负载均衡系统中的健康检查方法及装置 |
US9871712B1 (en) * | 2013-04-16 | 2018-01-16 | Amazon Technologies, Inc. | Health checking in a distributed load balancer |
CN109788012A (zh) * | 2017-11-14 | 2019-05-21 | 阿里巴巴集团控股有限公司 | 一种健康检查方法和装置、健康检查控制方法和控制器 |
-
2019
- 2019-07-30 CN CN201910694636.3A patent/CN110311988B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9871712B1 (en) * | 2013-04-16 | 2018-01-16 | Amazon Technologies, Inc. | Health checking in a distributed load balancer |
US20170230261A1 (en) * | 2014-10-31 | 2017-08-10 | Beijing Baidu Netcom Science And Technology Co., Ltd. | Method and device for checking health of link |
CN104394224A (zh) * | 2014-11-28 | 2015-03-04 | 无锡华云数据技术服务有限公司 | 一种负载均衡系统 |
CN106302595A (zh) * | 2015-06-02 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种对服务器进行健康检查的方法及设备 |
CN107181636A (zh) * | 2016-03-10 | 2017-09-19 | 阿里巴巴集团控股有限公司 | 一种负载均衡系统中的健康检查方法及装置 |
CN106797405A (zh) * | 2016-12-14 | 2017-05-31 | 华为技术有限公司 | 分布式负载均衡系统、健康检查方法和服务节点 |
EP3361675A1 (en) * | 2016-12-14 | 2018-08-15 | Huawei Technologies Co., Ltd. | Distributed load balancing system, health check method and service node |
CN109788012A (zh) * | 2017-11-14 | 2019-05-21 | 阿里巴巴集团控股有限公司 | 一种健康检查方法和装置、健康检查控制方法和控制器 |
Non-Patent Citations (2)
Title |
---|
MOHAMMED A. SAIFULLAH: "Scalable load balancing using enhanced server health monitoring and adimission control", 《2015 IEEE INTERNATIONAL CONFERENCE ON ENGINEERING AND TECHNOLOGY (ICETECH)》 * |
崔韵鹏: "WEB集群系统负载均衡技术及其算法研究", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110971482A (zh) * | 2019-11-05 | 2020-04-07 | 北京字节跳动网络技术有限公司 | 基于ebpf的后端服务器检测方法、装置及电子设备 |
CN110971482B (zh) * | 2019-11-05 | 2021-07-23 | 北京字节跳动网络技术有限公司 | 基于ebpf的后端服务器检测方法、装置及电子设备 |
CN111651329A (zh) * | 2020-06-08 | 2020-09-11 | 中国工商银行股份有限公司 | 针对应用的健康检查方法和装置、计算机系统和存储介质 |
CN111651329B (zh) * | 2020-06-08 | 2023-08-01 | 中国工商银行股份有限公司 | 针对应用的健康检查方法和装置、计算机系统和存储介质 |
CN114363213A (zh) * | 2022-03-01 | 2022-04-15 | 辽宁振兴银行股份有限公司 | 一种改进的负载均衡健康检查方法、系统及应用 |
CN114363213B (zh) * | 2022-03-01 | 2023-09-05 | 辽宁振兴银行股份有限公司 | 一种改进的负载均衡健康检查方法、系统及应用 |
CN114938377A (zh) * | 2022-04-20 | 2022-08-23 | 京东科技信息技术有限公司 | 后端服务器管理方法、装置、可读介质及电子设备 |
CN114938377B (zh) * | 2022-04-20 | 2024-05-17 | 京东科技信息技术有限公司 | 后端服务器管理方法、装置、可读介质及电子设备 |
CN116800636A (zh) * | 2023-08-01 | 2023-09-22 | 北京志凌海纳科技有限公司 | 负载均衡中的被动健康检查方法、装置、设备及介质 |
CN116800636B (zh) * | 2023-08-01 | 2024-01-23 | 北京志凌海纳科技有限公司 | 负载均衡中的被动健康检查方法、装置、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110311988B (zh) | 2022-01-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110311988A (zh) | 后端服务器的健康检查方法、负载均衡方法及装置 | |
Chaczko et al. | Availability and load balancing in cloud computing | |
CN103716251B (zh) | 用于内容分发网络的负载均衡方法及设备 | |
EP2335154B1 (en) | Distributed data processing system | |
US7467291B1 (en) | System and method for calibrating headroom margin | |
CN103607424B (zh) | 一种服务器连接方法及服务器系统 | |
CN108920272A (zh) | 一种数据处理方法、装置、计算机设备及存储介质 | |
CN109976917A (zh) | 一种负载调度方法、装置、负载调度器、存储介质及系统 | |
CN109302498A (zh) | 一种网络资源访问方法及装置 | |
CN107015892A (zh) | 一种压力测试方法、装置和系统 | |
CN107800756A (zh) | 一种负载均衡方法及负载均衡器 | |
CN112559129B (zh) | 虚拟化平台负载均衡功能和性能的测试装置及方法 | |
CN108933829A (zh) | 一种负载均衡方法及装置 | |
CN106534284A (zh) | 一种分布式系统中资源负载均衡方法及装置 | |
CN109510775A (zh) | 定向流量的调度方法、鉴权装置、网络设备及存储介质 | |
US20150304409A1 (en) | Determining at least one cost factor associated with using the cloud to provide an application component | |
CN109117275A (zh) | 基于数据分片的对账方法、装置、计算机设备及存储介质 | |
CN106055271B (zh) | 一种基于云计算的重复数据去重选择方法及装置 | |
CN108737573A (zh) | 一种分布式存储集群及其服务响应控制方法、装置和设备 | |
CN115334082A (zh) | 负载均衡方法、装置、计算机设备、存储介质和产品 | |
CN109597800A (zh) | 一种日志分发方法及装置 | |
CN108111567A (zh) | 实现服务器负载均匀的方法及系统 | |
CN108063814A (zh) | 一种负载均衡方法及装置 | |
CN108600008A (zh) | 服务器管理方法、服务器管理装置及分布式系统 | |
Timm et al. | Virtual machine provisioning, code management, and data movement design for the Fermilab HEPCloud Facility |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |