CN106301864A - 一种服务器系统扩容方法、装置及扩容处理设备 - Google Patents
一种服务器系统扩容方法、装置及扩容处理设备 Download PDFInfo
- Publication number
- CN106301864A CN106301864A CN201510319509.7A CN201510319509A CN106301864A CN 106301864 A CN106301864 A CN 106301864A CN 201510319509 A CN201510319509 A CN 201510319509A CN 106301864 A CN106301864 A CN 106301864A
- Authority
- CN
- China
- Prior art keywords
- server
- service cluster
- service
- cluster
- access
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明实施例提供一种服务器系统扩容方法、装置及扩容处理设备,其中方法包括:对于非接入层服务器,确定各服务集群的服务器扩容数量;在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求;在模拟业务请求的过程中,若接入层服务集群对应的每秒查询率QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。本发明提供的扩容方式较为合理,可减少扩容后服务器系统的服务器资源的浪费情况。
Description
技术领域
本发明涉及服务器扩容技术领域,具体涉及一种服务器系统扩容方法、装置及扩容处理设备。
背景技术
服务器系统是由众多的服务器组成的服务器集群,通过服务器系统可为用户提供业务服务;目前,服务器系统一般设置为多层服务器结构,如接入层服务器,业务逻辑层服务器,和作业层服务器(如叶子节点服务器)等;其中,接入层服务器可接收业务请求,并将业务请求发送至相应的业务逻辑层服务器,业务逻辑层服务器将业务请求转发至相应的作业层服务器,由作业层服务器实现对业务请求的响应和业务服务提供。
随着服务器系统的数据处理量增多,对服务器系统的数据处理能力的要求也越来越高,为提高服务器系统的数据处理能力,对服务器系统进行扩容(增加服务器系统的服务器数量)显得尤为必要。目前对服务器系统的扩容方式主要为:根据扩容后的服务器系统所要求的数据处理能力,与服务器系统原数据处理能力的倍数关系,分别将服务器系统的各层服务器的数量均增加相应倍数,达成服务器系统的扩容;如服务器系统原数据处理能力为A,扩容后的服务器系统所要求的数据处理能力为2A,则需将服务器系统的各层服务器的数量均增加2倍,实现服务器系统的扩容。
本发明的发明人在研究过程中发现:扩容后的服务器系统的各层服务器的数量,和扩容前的服务器系统的各层服务器的原数量的倍数关系,与扩容后的服务器系统所要求的数据处理能力,和服务器系统原数据处理能力的倍数关系,并不相同,也没有直接的线性关系;现有根据扩容后的服务器系统所要求的数据处理能力,与服务器系统原数据处理能力的倍数关系,成倍的增加服务器系统的各层服务器的数量的扩容方式,将导致所扩容后的服务器系统的数量相对较多,存在多余的无法利用到的服务器,导致服务器资源的浪费;因此如何合理的对服务器系统进行扩容,减少扩容后服务器系统的服务器资源的浪费情况,成为本领域技术人员需要考虑的问题。
发明内容
有鉴于此,本发明实施例提供一种服务器系统扩容方法、装置及扩容处理设备,以合理的对服务器系统进行扩容,减少扩容后服务器系统的服务器资源的浪费情况。
为实现上述目的,本发明实施例提供如下技术方案:
一种服务器系统扩容方法,包括:
对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
在模拟业务请求的过程中,若接入层服务集群对应的每秒查询率QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
本发明实施例还提供一种服务器系统扩容装置,包括:
第一确定模块,用于对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
请求模拟模块,用于在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
判断模块,用于在模拟业务请求的过程中,若接入层服务集群对应的每秒查询率QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
第二确定模块,用于若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
本发明实施例还提供一种扩容处理设备,包括上述所述的服务器系统扩容装置。
基于上述技术方案,本发明实施例提供的服务器系统扩容方法,先确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容,而后再在接入层服务集群模拟业务请求;并在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则按照设定数量增加接入层服务集群的接入服务器数量,进而通过所述QPS是否增加,来判断是否继续进行接入层服务集群的扩容;即在按照设定数量增加接入服务器的数量后,若所述QPS增加,则可确定接入层服务集群为服务器系统的瓶颈所在,可再按照设定数量持续增加接入服务器的数量,直至所述QPS达到设定QPS值,达成接入层服务集群的扩容,实现服务器系统的扩容。可以看出,本发明实施例提供的这种分段逐步扩容的方式,可使得扩容后的服务器系统较为贴近服务器系统扩容后的QPS需求,因此扩容方式较为合理,可减少扩容后服务器系统的服务器资源的浪费情况。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的服务器系统扩容方法的流程图;
图2为本发明实施例提供的确定作业层服务器的扩容数量的方法流程图;
图3为本发明实施例提供的服务器系统中各服务集群之间的交互关系图;
图4为本发明实施例提供的确定服务器系统中服务集群之间的业务交互关系的方法流程图;
图5为本发明实施例提供的确定业务逻辑层服务器的扩容数量的方法流程图;
图6为本发明实施例提供的服务器系统扩容方法的另一流程图;
图7为本发明实施例提供的服务器系统扩容装置的结构框图;
图8为本发明实施例提供的第一确定模块的结构框图;
图9为本发明实施例提供的数量确定单元的结构框图;
图10为本发明实施例提供的第一确定模块的另一结构框图;
图11为本发明实施例提供的扩容处理设备的硬件结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明实施例提供的服务器系统扩容方法的流程图,本发明实施例可通过设置用于进行扩容计算的扩容处理设备,实施图1所示方法流程图,扩容处理设备可以如服务器等具有数据处理能力的设备;参照图1,该方法可以包括:
步骤S100、对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
可选的,一个非接入层中可存在至少一个服务集群,各非接入层服务器中的一个服务集群,可以认为是实施业务服务所需要使用的服务器集合;如作业层服务器中,可存在多个作业层服务集群,一个作业层服务集群可由至少一台作业服务器构成,用于对业务服务进行具体作业;可选的,各非接入层中的服务集群所采用的服务器集合可根据实际情况设定;
可选的,在本发明实施例中,可通过QPS(Query Per Second,每秒查询率)表示服务器的数据处理能力;对于非接入层服务器,在确定各服务集群的服务器扩容数量时,可根据各服务集群的目标QPS及原QPS,确定各服务集群的服务器扩容数量;
在确定非接入层服务器的各服务集群的服务器扩容数量后,可以所确定的扩容数量扩充非接入层服务器中相应服务集群的服务器数量。
步骤S110、在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
在完成非接入层服务器的扩容后,本发明实施例可在接入层服务集群上部署压测程序,从而在接入层服务集群模拟业务请求,并通过逐步增加接入服务器数量的方式,判断接入层服务集群的瓶颈所在,对接入层服务集群进行扩容。
步骤S120、在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
可选的,在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,本发明实施例可逐步增加接入层服务集群的接入服务器数量(增加方式可按照设定数量逐步进行,如一次增加一台接入服务器等),判断每次增加接入服务器后,所述接入层服务集群对应的QPS是否增加。
步骤S130、若增加,则确定需再按照设定数量持续增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
按照设定数量增加接入层服务集群的接入服务器数量后,若所述QPS增加,说明在对非接入层服务器进行扩容后,接入层服务集群为服务器系统的瓶颈所在,可再逐步的增加接入服务器的数量(即按一次增加设定数量的方式增加接入服务器),直至接入层服务集群的QPS达到设定QPS值,完成接入层服务集群的扩容,实现整个服务器系统的扩容;
可选的,所述设定QPS值可以为定义的接入层服务集群扩容后所要求达到的QPS。
可选的,若按照设定数量增加接入层服务集群的接入服务器数量后,所述QPS未增加,则说明接入层服务集群不是服务器系统的瓶颈所在,可取消所增加的接入服务器,再通过深度遍历业务请求所经过的非接入层服务器中的服务集群,确定QPS未达到设定要求的非接入层服务器中的服务集群,而后对所确定的服务集群进行逐步扩容,直至该服务集群的QPS达到所述设定要求;可选的,所述设定要求可以为非接入层服务器中的服务集群扩容后所要求达到的QPS。
本发明实施例提供的服务器系统扩容方法,先确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容,而后再在接入层服务集群模拟业务请求;并在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则按照设定数量增加接入层服务集群的接入服务器数量,进而通过所述QPS是否增加,来判断是否继续进行接入层服务集群的扩容;即在按照设定数量增加接入服务器的数量后,若所述QPS增加,则可确定接入层服务集群为服务器系统的瓶颈所在,可再按照设定数量持续增加接入服务器的数量,直至所述QPS达到设定QPS值,达成接入层服务集群的扩容,实现服务器系统的扩容。可以看出,本发明实施例提供的这种分段逐步扩容的方式,可使得扩容后的服务器系统较为贴近服务器系统扩容后的QPS需求,因此扩容方式较为合理,可减少扩容后服务器系统的服务器资源的浪费情况。
可选的,非接入层服务器可以包括:作业层服务器和业务逻辑层服务器;作业层服务器可由至少一个作业层服务集群构成,一个作业层服务集群可包括至少一台执行作业的作业服务器;对应的,在确定作业层服务器的各作业层服务集群的服务器扩容数量时,本发明实施例可先确定各作业层服务集群所对应的上层服务集群数量,再乘以设定的作业层服务集群扩容后的基准QPS,得到各作业层服务集群扩容后的目标QPS,再根据作业层服务集群的目标QPS及原QPS,确定作业层服务集群的服务器扩容数量。
对应的,图2示出了本发明实施例提供的确定作业层服务器的扩容数量的方法流程图,参照图2,该方法可以包括:
步骤S200、对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量T,一个作业层服务集群包括至少一台执行作业的作业服务器;
其中,一个作业层服务集群可以包括至少一台执行作业的作业服务器(作业服务器如服务器系统中的叶子节点服务器);在本发明实施例中一个作业层服务集群可能是多个上层服务集群的叶子,如图3所示,作业层服务集群D,既是业务逻辑层服务集群A的叶子,也是业务逻辑层服务集群B的叶子;也就是业务逻辑层服务集群A和业务逻辑层服务集群B均需要依赖作业层服务集群D,才能完成一次完整的业务请求,所以单纯的基准QPS是无法满足作业层服务集群D的业务需要的,作业层服务集群D至少需要2倍的基准QPS;
基准QPS可以认为是仅对应一个上层服务集群的作业层服务集群扩容后的目标QPS。
步骤S210、根据公式确定所述作业层服务集群的服务器扩容数量的估计值;
其中,N为所述估计值,Qa为所述作业层服务集群扩容后的基准QPS,T*Qa为所述作业层服务集群扩容后的目标QPS,Qb为所述作业层服务集群的原QPS,Fb为所述作业层服务集群扩容所使用的服务器的负载比例,Fa为所述作业层服务集群的原负载比例,Hb为所述作业层服务集群扩容所使用的服务器的核心数量,Ha为所述作业层服务集群的原核心数量。
比如作业层服务集群所对应的上层服务集群数量为1,扩容前作业层服务集群采用4核CPU,且CPU平均负载为30%的时候,承载的QPS是2000/秒;而扩容后要求为:使用16核服务器进行扩容,扩容后基准QPS为105/秒,且对应的CPU安全负载为60%;则可通过上述公式确定出该作业层服务集群的扩容数量的估计值为:
步骤S220、若所述估计值为整数,则确定所述估计值为所述作业层服务集群的扩容数量,若所述估计值存在小数,则对所述估计值作去小数进一处理,得到所述作业层服务集群的扩容数量。
如上文示例,若N取6.25,则可对6.25作去小数进一处理,取得最终结果7作为所述作业层服务集群的扩容数量,即所述作业层服务集群,需使用7台16核服务器进行扩容;显然,若N取整数,则可直接将所计算的N值作为所述作业层服务集群的扩容数量。
可选的,为得到各作业层服务集群所对应的上层服务集群数量T,本发明实施例可通过确定服务器系统中各服务集群之间的业务交互关系,从而根据所述业务交互关系,确定出各作业层服务集群所对应的上层服务集群数量。参照图3,图中服务器系统中各服务集群之间的连线表示出了,服务器系统中各服务集群之间的业务交互关系,通过图3中连线表示的业务交互关系,可以直观的确定出作业层服务集群D,既是业务逻辑层服务集群A的叶子,也是业务逻辑层服务集群B的叶子,作业层服务集群D对应的上层服务集群数量为2。
图4示出了本发明实施例提供的确定服务器系统中服务集群之间的业务交互关系的方法流程图,参照图4,该方法可以包括:
步骤S300、确定一个业务服务的数据包在所述服务器系统中经过的服务集群端口;
步骤S310、对所确定的服务集群端口对应的端口IP进行排序,确定所述业务服务所对应的服务集群之间的交互关系。
可选的,在确定一个业务服务所对应的服务集群之间的交互关系时,可分析一个业务服务所对应的服务集群之间的链接关系;具体的,本发明实施例可通过lsof–p方式获取业务服务进程在服务器系统中所有打开的UDP(UserDatagram Protocol,用户数据报协议)/TCP(Transmission Control Protocol,传输控制协议)端口;而后通过tcpdump抓包方式获取各个UDP/TCP端口的数据包,从而排序输出各数据包对应的端口IP;通过查看输出的端口IP之间的关系,则可确定出业务服务所对应的服务集群之间的链接关系,得到业务服务所对应的服务集群之间的交互关系。
可选的,对于非接入层服务器,在确定各服务集群的服务器扩容数量时,本发明实施例还可确定业务逻辑层服务器中,各业务逻辑层服务集群的服务器扩容数量;对应的,非接入层服务器可以包括业务逻辑层服务器,业务逻辑层服务器可以由至少一个业务逻辑层服务集群构成,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
图5示出了本发明实施例提供的确定业务逻辑层服务器的扩容数量的方法流程图,参照图5,该方法可以包括:
步骤S400、对于业务逻辑层服务器,确定各业务逻辑层服务集群所对应的作业层服务集群,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
业务逻辑层服务集群所对应的作业层服务集群表示,对业务逻辑层服务集群所转发的业务请求进行作业的作业层服务集群;如图3所示,业务逻辑层服务集群A所转发的业务请求,可由作业层服务集群C和D进行作业,因此业务逻辑层服务集群A对应的作业层服务集群为作业层服务集群C和D;
可选的,本发明实施例也可通过服务器系统中各服务集群之间的业务交互关系,确定各业务逻辑层服务集群所对应的作业层服务集群;如图3所示,与业务逻辑层服务集群A存在业务交互关系的作业层服务集群为作业层服务集群C和D,则作业层服务集群C和D为业务逻辑层服务集群A所对应的作业层服务集群。
步骤S410、将所述业务逻辑层服务集群所对应的作业层服务集群的服务器扩容数量相加,除以设定值,得到所述业务逻辑层服务集群的扩容数量。
本发明实施例可将业务逻辑层服务集群所对应的叶子节点的压力相加(叶子节点的压力表示的是叶子节点的服务器扩容数量),再除以设定值(可根据经验选取,如选择设定值为10),得到所述业务逻辑层服务集群的服务器扩容数量;
如业务逻辑层服务集群A对应的作业层服务集群为作业层服务集群C和D,其中作业层服务集群C的服务器扩容数量为7台,作业层服务集群D的服务器扩容数量为8台,则可得到业务逻辑层服务集群A的服务器扩容数量为(7+8)/10=1.5,对1.5作去小数进一处理,得到业务逻辑层服务集群A的需要扩容的服务器数量为2。
可选的,图6示出了本发明实施例提供的服务器系统扩容方法的另一流程图,参照图6,该方法可以包括:
步骤S500、对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量T,一个作业层服务集群包括至少一台执行作业的作业服务器;
步骤S510、根据公式确定所述作业层服务集群的服务器扩容数量的估计值;
步骤S520、若所述估计值为整数,则确定所述估计值为所述作业层服务集群的扩容数量,若所述估计值存在小数,则对所述估计值作去小数进一处理,得到所述作业层服务集群的扩容数量;
步骤S530、对于业务逻辑层服务器,确定各业务逻辑层服务集群所对应的作业层服务集群,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
步骤S540、将所述业务逻辑层服务集群所对应的作业层服务集群的服务器扩容数量相加,除以设定值,得到所述业务逻辑层服务集群的服务器扩容数量;
步骤S550、在确定作业层服务器和业务逻辑层服务器的各服务集群的服务器扩容数量,对作业层服务器和业务逻辑层服务器进行扩容后,在接入层服务集群模拟业务请求;
可选的,在完成作业层服务器和业务逻辑层服务器的扩容后,对于接入层服务器,为了使得在接入层服务集群模拟的业务请求具有最大的压测效果,本发明实施例可考虑将压测程序(即模拟业务请求的程序)部署在接入层服务集群的同一台机器上,以求在模拟业务请求时,获得最大的流量;
可选的,压测程序可使用多进程或者多线程进行多机并发压测;值得注意的是,并发压测在同一台接入服务器上实施最好,但是同一机器会占用资原,因此可考虑将一个机架或者机房中的接入服务器作为接入层服务集群进行并发压测;具体在执行并发压测时,本发明实施例可截取业务请求,将所截取的业务请求通过多线程并发至接入层服务集群。
步骤S560、在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
在模拟业务请求时可获得压测程序总的QPS在最大值时,无法通过增加压测流量而提升,则本发明实施例可考虑逐步增加接入层服务集群的接入服务器数量,判断所述QPS是否增加。
步骤S570、若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值;
如果流量增加了,说明接入层服务集群是服务器系统的瓶颈,需对接入层服务集群进行扩容;具体通过逐步增加接入层服务集群的接入服务器数量进行扩容。
步骤S580、若未增加,取消所增加的接入服务器,通过深度遍历业务请求所经过的非接入层服务器中的服务集群,确定QPS未达到设定要求的非接入层服务器中的服务集群,对所确定的服务集群进行逐步扩容,直至该服务集群的QPS达到所述设定要求。
如果流量没有增加,则可考虑对接入层服务集群作减法,逐步去除掉接入层服务集群中的服务器数量;同时,这里开始可通过如下两种方式找到非接入层服务器中QPS未达到设定要求的服务集群:
1、从接入层服务集群模拟业务请求,开始压测;同时对于接入层服务集群只保留第一个异步请求服务;
2、直接模拟接入层服务集群的请求,对第一个异步请求服务进行压测。
执行上述方式,由接入层服务集群开始,可对服务器系统的整个业务请求链路进行深度遍历,从而可找到QPS未达到设定要求的非接入层服务器中的服务集群。
本发明实施例提供的服务器系统扩容方法,先确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容,而后再在接入层服务集群模拟业务请求;通过所模拟的业务请求判断出接入层服务集群为服务器系统的瓶颈所在时,可再对接入层服务集群进行扩容,达成接入层服务集群的扩容,实现服务器系统的扩容。本发明采用的这种分段逐步扩容的方式,可使得扩容后的服务器系统较为贴近服务器系统扩容后的QPS需求,因此扩容方式较为合理,可减少扩容后服务器系统的服务器资源的浪费情况。
下面对本发明实施例提供的服务器系统扩容装置进行介绍,下文描述的服务器系统扩容装置可与上文描述的服务器系统扩容方法相互对应参照。
图7为本发明实施例提供的服务器系统扩容装置的结构框图,该装置可应用于扩容处理设备,参照图7,该装置可以包括:
第一确定模块100,用于对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
请求模拟模块200,用于在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
判断模块300,用于在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
第二确定模块400,用于若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
可选的,第一确定模块100可具体用于,对于非接入层服务器,根据各服务集群的目标QPS及原QPS,确定各服务集群的服务器扩容数量。
可选的,图8示出了本发明实施例提供的第一确定模块100的一种可选结构,参照图8,该第一确定模块100可以包括:
数量确定单元110,用于对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量T,一个作业层服务集群包括至少一台执行作业的作业服务器;
公式计算单元111,用于根据公式确定所述作业层服务集群的服务器扩容数量的估计值,其中,N为所述估计值,Qa为所述作业层服务集群扩容后的基准QPS,T*Qa为所述作业层服务集群扩容后的目标QPS,Qb为所述作业层服务集群的原QPS,Fb为所述作业层服务集群扩容所使用的服务器的负载比例,Fa为所述作业层服务集群的原负载比例,Hb为所述作业层服务集群扩容所使用的服务器的核心数量,Ha为所述作业层服务集群的原核心数量;
估计值处理单元112,用于若所述估计值为整数,则确定所述估计值为所述作业层服务集群的扩容数量,若所述估计值存在小数,则对所述估计值作去小数进一处理,得到所述作业层服务集群的扩容数量。
可选的,图9示出了本发明实施例提供的数量确定单元110的一种可选结构,参照图9,数量确定单元110可以包括:
交互关系确定子单元1101,用于确定所述服务器系统中各服务集群之间的业务交互关系;
数量确定执行子单元1102,用于根据所述业务交互关系,确定各作业层服务集群所对应的上层服务集群数量。
可选的,在确定所述业务交互关系时,本发明实施例可确定一个业务服务的数据包在所述服务器系统中经过的服务集群端口;对所确定的服务集群端口对应的端口IP进行排序,确定所述业务服务所对应的服务集群之间的交互关系。
可选的,图10示出了本发明实施例提供的第一确定模块100的另一种可选结构,结合图10和图8所示,该第一确定模块100还可以包括:
对应集群确定单元113,用于对于业务逻辑层服务器,确定各业务逻辑层服务集群所对应的作业层服务集群,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
数量计算单元114,用于将所述业务逻辑层服务集群所对应的作业层服务集群的服务器扩容数量相加,除以设定值,得到所述业务逻辑层服务集群的服务器扩容数量。
可选的,在接入层服务集群模拟业务请求时,请求模拟模块200可具体截取业务请求,将所截取的业务请求通过多线程并发至接入层服务集群。
本发明实施例还提供一种扩容处理设备,该扩容处理设备可以包括上述所述的服务器系统扩容装置。
图11示出了扩容处理设备的硬件结构框图,参照图11,扩容处理设备可以包括:处理器1,通信接口2,存储器3和通信总线4;
其中处理器1、通信接口2、存储器3通过通信总线4完成相互间的通信;
可选的,通信接口2可以为通信模块的接口,如GSM模块的接口;
处理器1,用于执行程序;
存储器3,用于存放程序;
程序可以包括程序代码,所述程序代码包括计算机操作指令。
处理器1可能是一个中央处理器CPU,或者是特定集成电路ASIC(Application Specific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器3可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
其中,程序可具体用于:
对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
在模拟业务请求的过程中,若接入层服务集群对应的QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
本发明采用分段逐步扩容的方式,可使得扩容后的服务器系统较为贴近服务器系统扩容后的QPS需求,因此扩容方式较为合理,可减少扩容后服务器系统的服务器资源的浪费情况。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种服务器系统扩容方法,其特征在于,包括:
对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
在模拟业务请求的过程中,若接入层服务集群对应的每秒查询率QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
2.根据权利要求1所述的服务器系统扩容方法,其特征在于,所述对于非接入层服务器,确定各服务集群的服务器扩容数量包括:
对于非接入层服务器,根据各服务集群的目标QPS及原QPS,确定各服务集群的服务器扩容数量。
3.根据权利要求2所述的服务器系统扩容方法,其特征在于,所述非接入层服务器包括:作业层服务器;
所述根据各服务集群的目标QPS及原QPS,确定各服务集群的服务器扩容数量包括:
对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量T,一个作业层服务集群包括至少一台执行作业的作业服务器;
根据公式确定所述作业层服务集群的服务器扩容数量的估计值,其中,N为所述估计值,Qa为所述作业层服务集群扩容后的基准QPS,T*Qa为所述作业层服务集群扩容后的目标QPS,Qb为所述作业层服务集群的原QPS,Fb为所述作业层服务集群扩容所使用的服务器的负载比例,Fa为所述作业层服务集群的原负载比例,Hb为所述作业层服务集群扩容所使用的服务器的核心数量,Ha为所述作业层服务集群的原核心数量;
若所述估计值为整数,则确定所述估计值为所述作业层服务集群的扩容数量,若所述估计值存在小数,则对所述估计值作去小数进一处理,得到所述作业层服务集群的扩容数量。
4.根据权利要求3所述的服务器系统扩容方法,其特征在于,所述对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量包括:
确定所述服务器系统中各服务集群之间的业务交互关系;
根据所述业务交互关系,确定各作业层服务集群所对应的上层服务集群数量。
5.根据权利要求4所述的服务器系统扩容方法,其特征在于,所述确定所述服务器系统中各服务集群之间的业务交互关系包括:
确定一个业务服务的数据包在所述服务器系统中经过的服务集群端口;
对所确定的服务集群端口对应的端口IP进行排序,确定所述业务服务所对应的服务集群之间的交互关系。
6.根据权利要求3-5任一项所述的服务器系统扩容方法,其特征在于,所述非接入层服务器还包括:业务逻辑层服务器;
所述根据各服务集群的目标QPS及原QPS,确定各服务集群的服务器扩容数量还包括:
对于业务逻辑层服务器,确定各业务逻辑层服务集群所对应的作业层服务集群,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
将所述业务逻辑层服务集群所对应的作业层服务集群的服务器扩容数量相加,除以设定值,得到所述业务逻辑层服务集群的服务器扩容数量。
7.根据权利要求1所述的服务器系统扩容方法,其特征在于,所述在接入层服务集群模拟业务请求包括:
截取业务请求;
将所截取的业务请求通过多线程并发至接入层服务集群。
8.一种服务器系统扩容装置,其特征在于,包括:
第一确定模块,用于对于非接入层服务器,确定各服务集群的服务器扩容数量,一个服务集群包括至少一台服务器;
请求模拟模块,用于在确定非接入层服务器的各服务集群的服务器扩容数量,对非接入层服务器进行扩容后,在接入层服务集群模拟业务请求,接入层服务集群包括至少一台接入服务器;
判断模块,用于在模拟业务请求的过程中,若接入层服务集群对应的每秒查询率QPS无法通过增加业务请求的流量而提升,则在按照设定数量增加接入层服务集群的接入服务器数量后,判断所述QPS是否增加;
第二确定模块,用于若增加,则确定需再按照设定数量增加接入层服务集群的接入服务器数量,直至所述QPS达到设定QPS值。
9.根据权利要求8所述的服务器系统扩容装置,其特征在于,所述第一确定模块包括:
数量确定单元,用于对于作业层服务器,确定各作业层服务集群所对应的上层服务集群数量T,一个作业层服务集群包括至少一台执行作业的作业服务器;
公式计算单元,用于根据公式确定所述作业层服务集群的服务器扩容数量的估计值,其中,N为所述估计值,Qa为所述作业层服务集群扩容后的基准QPS,T*Qa为所述作业层服务集群扩容后的目标QPS,Qb为所述作业层服务集群的原QPS,Fb为所述作业层服务集群扩容所使用的服务器的负载比例,Fa为所述作业层服务集群的原负载比例,Hb为所述作业层服务集群扩容所使用的服务器的核心数量,Ha为所述作业层服务集群的原核心数量;
估计值处理单元,用于若所述估计值为整数,则确定所述估计值为所述作业层服务集群的扩容数量,若所述估计值存在小数,则对所述估计值作去小数进一处理,得到所述作业层服务集群的扩容数量;
对应集群确定单元,用于对于业务逻辑层服务器,确定各业务逻辑层服务集群所对应的作业层服务集群,一个业务逻辑层服务集群包括至少一台业务逻辑服务器;
数量计算单元,用于将所述业务逻辑层服务集群所对应的作业层服务集群的服务器扩容数量相加,除以设定值,得到所述业务逻辑层服务集群的服务器扩容数量。
10.一种扩容处理设备,其特征在于,包括权利要求8或9所述的服务器系统扩容装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510319509.7A CN106301864B (zh) | 2015-06-11 | 2015-06-11 | 一种服务器系统扩容方法、装置及扩容处理设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510319509.7A CN106301864B (zh) | 2015-06-11 | 2015-06-11 | 一种服务器系统扩容方法、装置及扩容处理设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106301864A true CN106301864A (zh) | 2017-01-04 |
CN106301864B CN106301864B (zh) | 2019-12-27 |
Family
ID=57659548
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510319509.7A Active CN106301864B (zh) | 2015-06-11 | 2015-06-11 | 一种服务器系统扩容方法、装置及扩容处理设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106301864B (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107247626A (zh) * | 2017-06-14 | 2017-10-13 | 山东开创云软件有限公司 | 一种适用于高并发业务模块调度的方法 |
WO2018137585A1 (zh) * | 2017-01-26 | 2018-08-02 | 华为技术有限公司 | 扩容方法及扩容装置 |
CN108667654A (zh) * | 2018-04-19 | 2018-10-16 | 北京奇艺世纪科技有限公司 | 服务器集群自动扩容方法及相关设备 |
CN108845881A (zh) * | 2018-05-30 | 2018-11-20 | 有米科技股份有限公司 | 服务器容量动态调整的方法及装置 |
CN108924213A (zh) * | 2018-06-27 | 2018-11-30 | 北京金山安全软件有限公司 | 一种服务器的qps控制方法、装置及电子设备 |
CN112887169A (zh) * | 2021-01-26 | 2021-06-01 | 广州欢网科技有限责任公司 | 服务器自动扩容方法、装置及服务器集群 |
CN113867923A (zh) * | 2021-12-02 | 2021-12-31 | 苏州浪潮智能科技有限公司 | 一种容器应用跨cpu架构迁移的方法和装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103106041A (zh) * | 2011-11-09 | 2013-05-15 | 阿里巴巴集团控股有限公司 | 一种磁盘阵列资源的处理方法和装置 |
CN103634375A (zh) * | 2013-11-07 | 2014-03-12 | 华为技术有限公司 | 扩容集群节点的方法、装置及设备 |
CN103902739A (zh) * | 2014-04-22 | 2014-07-02 | 郑州悉知信息技术有限公司 | 数据库集群服务器数据分类方法 |
CN103944964A (zh) * | 2014-03-27 | 2014-07-23 | 上海云数信息科技有限公司 | 一种分布式系统及根据该系统进行逐步扩容的方法 |
US20150063355A1 (en) * | 2013-08-27 | 2015-03-05 | Oracle International Corporation | System and method for supporting data service addressing in an engineered system for middleware and application execution |
-
2015
- 2015-06-11 CN CN201510319509.7A patent/CN106301864B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103106041A (zh) * | 2011-11-09 | 2013-05-15 | 阿里巴巴集团控股有限公司 | 一种磁盘阵列资源的处理方法和装置 |
US20150063355A1 (en) * | 2013-08-27 | 2015-03-05 | Oracle International Corporation | System and method for supporting data service addressing in an engineered system for middleware and application execution |
CN103634375A (zh) * | 2013-11-07 | 2014-03-12 | 华为技术有限公司 | 扩容集群节点的方法、装置及设备 |
CN103944964A (zh) * | 2014-03-27 | 2014-07-23 | 上海云数信息科技有限公司 | 一种分布式系统及根据该系统进行逐步扩容的方法 |
CN103902739A (zh) * | 2014-04-22 | 2014-07-02 | 郑州悉知信息技术有限公司 | 数据库集群服务器数据分类方法 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018137585A1 (zh) * | 2017-01-26 | 2018-08-02 | 华为技术有限公司 | 扩容方法及扩容装置 |
CN108366082A (zh) * | 2017-01-26 | 2018-08-03 | 华为技术有限公司 | 扩容方法及扩容装置 |
CN108366082B (zh) * | 2017-01-26 | 2020-03-10 | 华为技术有限公司 | 扩容方法及扩容装置 |
US11216310B2 (en) | 2017-01-26 | 2022-01-04 | Huawei Technologies Co., Ltd. | Capacity expansion method and apparatus |
CN107247626A (zh) * | 2017-06-14 | 2017-10-13 | 山东开创云软件有限公司 | 一种适用于高并发业务模块调度的方法 |
CN108667654A (zh) * | 2018-04-19 | 2018-10-16 | 北京奇艺世纪科技有限公司 | 服务器集群自动扩容方法及相关设备 |
CN108667654B (zh) * | 2018-04-19 | 2021-04-20 | 北京奇艺世纪科技有限公司 | 服务器集群自动扩容方法及相关设备 |
CN108845881A (zh) * | 2018-05-30 | 2018-11-20 | 有米科技股份有限公司 | 服务器容量动态调整的方法及装置 |
CN108924213A (zh) * | 2018-06-27 | 2018-11-30 | 北京金山安全软件有限公司 | 一种服务器的qps控制方法、装置及电子设备 |
CN112887169A (zh) * | 2021-01-26 | 2021-06-01 | 广州欢网科技有限责任公司 | 服务器自动扩容方法、装置及服务器集群 |
CN113867923A (zh) * | 2021-12-02 | 2021-12-31 | 苏州浪潮智能科技有限公司 | 一种容器应用跨cpu架构迁移的方法和装置 |
CN113867923B (zh) * | 2021-12-02 | 2022-03-08 | 苏州浪潮智能科技有限公司 | 一种容器应用跨cpu架构迁移的方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN106301864B (zh) | 2019-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106301864A (zh) | 一种服务器系统扩容方法、装置及扩容处理设备 | |
CN103248521B (zh) | 一种业务策略规则配置的方法、装置及通信系统 | |
CN108920272A (zh) | 一种数据处理方法、装置、计算机设备及存储介质 | |
CN110032571A (zh) | 业务流程处理方法、装置、存储介质及计算设备 | |
JP7113840B2 (ja) | 計算ノード管理プロトコルのためのシステムおよび方法 | |
CN108476179A (zh) | 简化的正交网络策略集选择 | |
US7954158B2 (en) | Characterizing computer attackers | |
CN108600300A (zh) | 日志数据处理方法及装置 | |
CN109818997A (zh) | 一种负载均衡方法、系统及存储介质 | |
CN107301091A (zh) | 资源分配方法和装置 | |
CN109344126A (zh) | 贴图的处理方法、装置、存储介质和电子装置 | |
CN108629683A (zh) | 申请件处理流程配置方法、装置、设备及可读存储介质 | |
CN106294299A (zh) | 一种报表生成方法及装置 | |
CN104320354B (zh) | 一种数据的处理方法及装置 | |
CN106547523B (zh) | 进度条进度显示方法、装置及系统 | |
CN110351364A (zh) | 数据存储方法、设备及计算机可读存储介质 | |
CN105872098A (zh) | 数据处理方法、负载均衡器和交互式应用服务器及系统 | |
CN106302111A (zh) | 一种信息处理方法、终端及服务器 | |
CN109636583A (zh) | 一种贷款资金监控方法和装置 | |
CN106487784A (zh) | 一种会话迁移的方法、装置及防火墙 | |
CN103324484A (zh) | 一种展现视图的方法及设备 | |
CN106095843B (zh) | 社交账号挖掘方法及装置 | |
CN114116228A (zh) | 一种任务分配方法、装置、设备及存储介质 | |
CN106713163A (zh) | 一种调配服务器负载的方法及装置 | |
CN108228339A (zh) | 一种内存回收方法及装置、终端设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |