CN104038540A - 一种应用代理服务器自动选择方法及系统 - Google Patents

一种应用代理服务器自动选择方法及系统 Download PDF

Info

Publication number
CN104038540A
CN104038540A CN201410241877.XA CN201410241877A CN104038540A CN 104038540 A CN104038540 A CN 104038540A CN 201410241877 A CN201410241877 A CN 201410241877A CN 104038540 A CN104038540 A CN 104038540A
Authority
CN
China
Prior art keywords
application
server
resource
resources
representative
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410241877.XA
Other languages
English (en)
Other versions
CN104038540B (zh
Inventor
张辉
巩玉旺
李铭
吴瑞
石磊
王进
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANDONG MASSCLOUDS QICHUANG INFORMATION TECHNOLOGY Co Ltd
Original Assignee
SHANDONG MASSCLOUDS QICHUANG INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANDONG MASSCLOUDS QICHUANG INFORMATION TECHNOLOGY Co Ltd filed Critical SHANDONG MASSCLOUDS QICHUANG INFORMATION TECHNOLOGY Co Ltd
Priority to CN201410241877.XA priority Critical patent/CN104038540B/zh
Publication of CN104038540A publication Critical patent/CN104038540A/zh
Application granted granted Critical
Publication of CN104038540B publication Critical patent/CN104038540B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种应用代理服务器自动选择方法及系统,综合考虑服务器负载、应用的资源需求、当前应用分布以及应用之间的互斥性这些因素,最终选择出一台最佳的代理服务器;本发明在负载评估方便考虑了多维度资源负载均衡,可以更加准确地评估各服务器的负载状况;在应用的资源需求预估方面,使用了历史数据对应用的资源需求进行预估,具有一定的预见性和较高的准确性;在应用分布方面,对当前所有应用进行了准确的统计,从服务器集群整体上把握应用的最佳运行位置;在应用的互斥性方面,根据所有应用的资源使用情况,分析出可能产生资源竞争的互斥应用,从而避免互斥应用运行于同一台服务器,最大程度地满足应用的资源需求。

Description

一种应用代理服务器自动选择方法及系统
技术领域
本发明涉及一种应用代理服务器自动选择方法及系统。
背景技术
随着云计算技术的迅速崛起与发展,越来越多的云计算解决方案得到实际应用与推广。从本质上讲,云计算带给大家的是一种如同水、电、煤一样的资源消费模式,一般用户按照实际需求定制资源,使用终端设备通过远程连接,便可以获取计算、存储、网络等资源,所有可用资源来自于云端,即互联网或服务器集群,而云终端则包括:PC、手机、平板电脑、车载设备及可穿戴设置等。
虚拟化技术作为云计算的关键技术,一般包括:资源虚拟化和应用虚拟化,通过虚拟化平台可以更加方便地管理应用的动态部署、扩展、迁移、备份等功能。用户运行不同的应用需要不同的资源和计算能力,云计算平台可以按照用户需求部署资源和计算能力,各种IT资源,例如:软件、硬件、操作系统、存储、网络等通过虚拟化,可将其全部虚拟成资源池并进行统一管理,从而提高资源利用率,保证用户资源需求得到最大程度的满足。
针对用户需求,服务器集群一般可分为:资源类型和应用类型两种,前者提供计算资源,后者直接提供应用代理服务。随着移动设备的广泛应用及迅速普及,面向应用服务的服务器集群将有更多的应用领域。然而,随着用户规模地不断增加,服务器的负载会越来越重,若不进行有效地调控,必将造成系统性能及服务质量下降,系统资源不能有效利用,用户体验骤减等现象。
目前服务器集群资源调度方式多数都是通过单一的负载均衡方式,根据各个服务器的负载情况,把不同的应用请求分配给不同的服务器节点,来保证服务器中所有应用的服务质量需求,从而提高应用的伸缩性。
为用户选择一台合适的应用代理服务器需要考虑多方面因素,才能更好地满足故障切换、负载均衡、应用互斥、资源充分利用等场景需求。仅靠上述单一方式,其实现简单,应用场景有限,难以满足多应用,多并发用户的场景,也未考虑多个应用之间的资源竞争等问题,更无法满足应用代理服务器集群对应用的动态部署及资源调度需求。
发明内容
本发明为了解决上述问题,提出了一种应用代理服务器自动选择方法及系统,该方法考虑各服务器实时负载、不同应用的资源需求两方面因素实现应用代理服务器集群的资源动态调度,用户应用的动态部署,从而最大程度地满足用户需求,提升用户体验,并提高服务器集群的资源利用率。
为了实现上述目的,本发明采用如下技术方案:
一种应用代理服务器自动选择方法,包括以下步骤:
(1)根据多维度资源利用率和可用资源量,制定服务器集群负载评估方案:各服务器周期性采集自身的性能数据,使用性能数据进行所有服务器的排序;
(2)根据不同应用的资源需求,制定应用动态部署方案:定期采集应用自身正在使用着的性能数据,统计并分析其分布情况;
(3)根据负载评估及应用动态部署,选择合适的应用代理服务器:查询应用的资源需求,分析多维度资源的需求,对各个服务器进行遍历,选择最终服务器。
所述多维度资源包括且不限于:CPU、内存和网络带宽。
所述负载评估包括性能数据收集和性能数据分析。
所述步骤(1)的具体方法,包括以下步骤:
(a)服务器集群中的各服务器按同样的设定周期,周期性地收集各自的CPU、内存、网络带宽资源利用率及可用资源量;
(b)各服务器定时上报性能数据至自动选择系统;自动选择系统收到各服务器的性能数据后,对各资源利用率进行归一化;
(c)自动选择系统根据资源利用率高低、可用资源量的多少对所有服务器进行排序。
所述步骤(a)中,资源利用率定义为:Ui={ci,mi,ni},即各维度资源的使用量与各维度资源的总量的比例,其中Ui代表服务器i的资源利用率向量,ci代表服务器i的CPU资源利用率,mi代表服务器i的内存资源利用率,ni代表服务器i的网络带宽利用率。
所述步骤(a)中,可用资源量定义为:Ai={Ci,Mi,Ni},其中Ai代表服务器i的可用资源向量,Ci代表服务器i的CPU可用资源量,Mi代表服务器i的内存可用资源量,Ni代表服务器i的网络可用资源量。
所述步骤(b)中,资源利用率归一化的具体方法为:定义服务器i的总资源利用率为Si,各维度资源归一化比例为Ri={rc rm,rn},其中Ri代表主机i归一化比例向量,rc代表cpu所占主机资源利用率的比例,rm代表内存所占主机资源利用率的比例,rn代表网络带宽所占主机资源利用率的比例,归一化方法:
所述步骤(c)中服务器排序方法包括两种:第一种,按各服务器的资源利用率Si进行由低到高排序,第二种,按照可用资源多少排序。
所述步骤(2)的具体方法,包括以下步骤:
(i)按照设定周期采集所有应用的性能数据,生成历史数据;
(ii)查询指定应用的历史数据,获取历史资源使用量作为此应用的资源需求;
(iii)统计并分析应用的分布信息;
(iv)分析指定应用的互斥应用。
所述步骤(i)的具体方法为:定义应用性能数据为:APPid={acid,amid,anid},其中APPid代表序号为id的应用的各维度资源的使用量,acid代表应用的cpu资源使用量,amid代表应用的内存资源使用量,anid代表应用的网络带宽资源使用量;各服务器将应用资源使用量上报后,由中心服务器定时取各自平均值作为此应用最终的历史数据,具体方法为:其中appid代表单个服务器上报的应用资源使用量,N为集群服务器总数。
所述应用代理服务器的性能数据包括:资源利用率和可用资源量,应用的性能数据是指正在应用使用的cpu值。
所述步骤(iii)的具体方法为:将应用分布信息定义为:Pi={<ID1,n1>,<ID2,n2>,...},Pi代表服务器i的所有应用信息,其中<ID1,n1>代表应用序号为ID1的应用,在服务器i上有n1个运行实例,<ID2,n2>代表应用序号为ID2的应用,在服务器i上有n2个运行实例,各服务器将此信息上报自动选择系统后,由自动选择系统统一汇总。
所述步骤(iv)中互斥应用是指:不同应用的各维度资源使用状况相似度达到80%以上,且存在单一资源使用量过多的相似应用的集合,定义为Mj={id1,id2,...},M代表mutex互斥含义,j代表互斥应用集合的ID,集合中id1、id2则代表互斥的应用ID。
所述步骤(3)的具体方法,包括以下步骤:
Step1:查询此应用的资源需求APPid,分析各个维度的资源哪一个更迫切需要得到满足,若三种资源需求相对均衡则,转至Step2,若某种资源需求迫切,则转至步骤Step3;
Step2:将各服务器按照资源使用率Si从低到高排序生成序列X;
Step3:将各服务器按照某单一维度的可用资源量从高到低排序生成序列X;
Step4:获取此应用的互斥应用Mj
Step5:从序列X第一台开始遍历每一台服务器,若包含此应用的互斥应用Mj或不能满足APPid任一维度资源需求的服务器则过滤掉,直到找到一台目的服务器,既满足资源需求,也未和其他应用互斥;若遍历完毕未能找到目的服务器,则跳入Step6;
Step6:遍历序列X每一台服务器,过滤掉不能满足资源需求的服务器,将其上互斥应用个数最少的服务器作为最终的目的服务器。
一种实现上述选择方法的自动选择系统,连接各个应用代理服务器和控制中心,包括采集模块、分析模块和决策模块,其中:
采集模块,用于定时采集多维度资源的利用率及可用资源量、应用代理服务器性能数据和分布信息,连接分析模块;
分析模块,用于统计并分析处理应用代理服务器的分布信息、性能数据和资源信息,连接决策模块;
决策模块,用于根据负载评估及应用动态部署,选择出合适的应用代理服务器。
本发明的有益效果为:
1.提供了一种应用代理服务器自动选择方法,综合考虑服务器负载、应用的资源需求、当前应用分布以及应用之间的互斥性这些因素,最终选择出一台最佳的代理服务器;通过分析应用是否迫切需要单一资源或单一资源使用过多,来自动选择合适的服务器,以尽量满足其需求并保证其他应用的资源需求不受影响;
2.在负载评估方便考虑了多维度资源负载均衡,可以更加准确地评估各服务器的负载状况;在应用的资源需求预估方面,使用了历史数据对应用的资源需求进行预估,具有一定的预见性和较高的准确性;
3.在应用的互斥性方面,根据所有应用的资源使用情况,分析出可能产生资源竞争的互斥应用,从而避免互斥应用运行于同一台服务器,最大程度地满足应用的资源需求
4.在应用分布方面,对当前所有应用进行了准确的统计,从服务器集群整体上把握应用的最佳运行位置;
5.提供了实现自动选择方法的整套装置,具有非常好的实用性,针对服务器集群环境,能在动态部署应用、负载均衡、提高资源利用率方面发挥重要作用。
附图说明
图1为本发明自动选择系统示意图;
图2为本发明自动选择系统和代理服务器示意图;
图3为本发明自动选择方法流程图;
图4为本发明性能数据收集流程图;
图5为本发明应用资源需求计算流程图;
图6为本发明互斥应用计算流程图;
图7为本发明决策器流程图。
具体实施方式:
下面结合附图与实施例对本发明作进一步说明。
如图1所示一种典型的云计算解决方案,普通用户使用终端设备,例如手机或平板电脑,连接云端,也即虚拟化后的服务器集群,服务器集群一般包括控制中心、安全中心、应用代理服务器等设备,用户连接云端后便可通过云中的代理服务器使用云端的计算资源、存储资源等,既能帮助用户实现业务的云端处理,又能进行统一安全管理。
自动选择系统被部署在云端,作为一个具有决策功能的核心模块,负责用户应用的动态部署。当用户需要启动某个应用时,控制中心发送启动应用请求给自动选择系统,本装置接收到请求后,通过统计分析各代理服务器上报性能数据以及应用信息,并最终选择一台最佳的代理服务器来运行此应用,将选择结果返回给控制中心,控制中心再通知用户终端,去远程连接指定的代理服务器。
(1)一种考虑多维度资源利用率的服务器集群负载评估方案;
(2)一种考虑不同应用的资源需求的应用动态部署方案;
(3)根据负载评估及应用动态部署建议,通过决策器来选择应用代理服务器。
方案(1)所述多维度资源包括且不限于:CPU、内存、网络带宽,所述负载评估包括:性能数据收集、性能数据分析。所述集群中服务器操作系统需支持RDP远程桌面协议,包含且不限于的windows server2003、windows server2008、windows server2012。
考虑多维度资源利用率的服务器集群负载评估方案,包含以下步骤:
1)服务器集群中的各服务器周期性地收集本机的CPU、内存、网络带宽资源利用率及可用资源量;
2)定时上报性能数据至自动选择装置;
3)自动选择装置收到各服务器资源信息后,首先对各资源利用率进行归一化;
4)根据利用率高低、可用资源的多少对所有服务器进行排序。
所述步骤1)中各资源利用率定义为:Ui={ci,mi,ni},其中Ui代表服务器i的资源利用率向量,ci代表CPU资源利用率,mi代表内存资源利用率,ni代表网络带宽利用率。可用资源量定义为:Ai={Ci,Mi,Ni},其中Ai代表服务器i的可用资源向量,Ci代表CPU可用资源量,Mi代表内存可用资源量,Ni代表网络可用资源量。
所述步骤3)中资源利用率归一化方法为:首先定义服务器i的总资源利用率为:Si,各维度资源归一化比例Ri={rc,rm,rn},其中Ri代表主机i归一化比例向量,rc代表cpu所占主机资源利用率的比例,rm代表内存所占主机资源利用率的比例,rn代表网络带宽所占主机资源利用率的比例,归一化方法:
所述步骤4)中服务器排序方法分为两种:第一种,按各服务器的资源利用率Si进行由低到高排序,第二种,按照可用资源多少排序,例如某应用是损耗CPU偏多的应用,那么可以按照各服务器CPU的可用量Ci进行排序。
方案(2)所述资源需求来自此应用的历史性能数据,所述动态部署方案包含:历史性能数据收集、应用分布信息统计、应用互斥分析。
考虑不同应用的资源需求的应用动态部署方案,包含以下步骤:
1)定时收集所有应用的性能数据,以生成历史数据;
2)查询此应用的历史数据,获取历史资源使用量作为此应用的资源需求;
3)统计并分析应用的分布信息;
4)分析此应用的互斥应用。
所述方案(2)步骤1)中的应用性能数据定义为:APPid={acid,amid,anid},其中APPid代表序号为id的应用的资源使用向量,acid代表应用的cpu资源使用量,amid代表应用的内存资源使用量,anid代表应用的网络带宽资源使用量。各服务器将应用资源使用量上报后,由中心服务器定时取各自平均值作为此应用最终的历史数据,具体方法为:其中appid代表单个服务器上报的应用资源使用量,N为集群服务器总数。
所述方案(2)步骤3)中的应用分布信息定义为:Pi代表服务器i的所有应用信息,Pi={<ID1,n1>,<ID2,n2>,...},其中<ID1,n1>代表应用序号为ID1的应用,在服务器i上有n1个运行实例,各服务器将此信息上报自动选择装置后,由自动选择装置统一汇总。
所述方案(2)步骤4)中的互斥应用是指:使用各维度资源非常相似,且存在单一资源使用量过多的相似应用的集合,定义为Mj={id1,id2,...},M代表mutex互斥含义,j代表互斥应用集合的ID,集合中id1、id2则代表互斥的应用ID。例如:A应用运行时需占CPU30%,内存500M,而B应用运行时也需占大量CPU40%,内存500M,因为A、B两个应用均占用CPU资源过多,如果运行在同一台服务器上,很可能造成CPU单一资源瓶颈,所以可以被认定为互斥应用。互斥应用分析方法:使用APPid分别按照acid,amid,anid三个维度资源进行排序,取每个序列中前30%的应用作为互斥应用,此比例指定但不限于30%。
方案(3)所述决策器对各服务器负载、应用的资源需求、当前应用分布、互斥应用进行综合评定,并最终决策应用的代理服务器。
上述各服务器负载来源于方案(1)步骤4)分析后的性能数据Si、Ai
上述应用资源需求来源于方案(2)步骤2)查询获取历史性能数据作为应用的资源需求APPid
上述应用分布来源于方案(2)步骤3)应用分布信息分析后的结果:Pi
上述互斥应用信息来源于方案(2)步骤4)分析后的结果:Mj
方案(3)所述决策器,具体包含以下步骤:
1)查询此应用的资源需求APPid,分析三个维度的资源哪一个更迫切需要得到满足,若三种资源需求相对均衡则,跳入步骤2),若对某中资源迫切需要,则跳入步骤3);
2)将各服务器按照资源使用率Si从低到高排序生成序列X;
3)将各服务器按照某单一维度的可用资源量从高到低排序生成序列X;
4)获取此应用的互斥应用Mj
5)从序列X第一台开始遍历每一台服务器,若包含此应用的互斥应用Mj或不能满足APPid任一维度资源需求的服务器则过滤掉,直到找到一台目的服务器,既可以满足资源需求,也未和其他应用互斥。若遍历完毕未能找到目的服务器,则跳入步骤6);
6)遍历序列X每一台服务器,过滤掉不能满足资源需求的服务器,将其上互斥应用个数最少的服务器作为最终的目的服务器。
本发明所提供的应用代理服务器自动选择方法及装置,具体实施步骤如下:
1)在应用代理服务器上进行定时地信息收集,包括性能数据、应用分布、应用资源使用量;
2)由自动选择系统对各应用代理服务器上报的信息收集进行统计分析,为决策器准备必要的数据;
3)自动选择系统接收到启动应用请求后,通过决策器计算出选择结果,并上报给控制中心。
图2是自动选择系统和应用代理服务器的示意图,如图所示本发明的自动选择系统同时涉及应用代理服务器的各种数据收集。
步骤1)所述的代理服务器上包含:性能数据收集、应用分布信息收集、应用资源信息收集,性能数据包含各服务器的多维度资源利用率、资源可用量,应用分布信息包含各服务器上运行的所有应用及这些应用的实例个数,应用资源信息包含某应用的资源使用量。所有数据收集均是周期性地进行,每次收集完成后上报给自动选择系统,由自动选择系统进一步统计分析。
步骤2)所述的自动选择系统包含:服务器性能数据、应用分布信息、应用资源信息、决策器。性能数据通过统计计算各服务器上报的性能数据得到,应用分布信息也是通过汇总各服务器上所有应用,应用资源信息来源于各服务器上所有指定应用资源信息的历史数据,而决策器就是利用这些数据帮助用户选择一台最佳的应用代理服务器。
步骤3)所述的决策流程如图3所示,具体步骤如下:
a)用户请求启动应用;
b)控制中心接受到用户请求后,将请求转发给自动选择系统;
c)自动选择系统首先获取此应用的历史数据作为它的资源需求;
d)获取各服务器的性能数据;
e)获取所有服务器上的应用分布信息;
f)判断此应用是否存在单一资源需求过多,若是则获取该单一资源的可用资源量排序的服务器序列,若否则获取使用利用率由低到高排序的服务器序列;
g)获取与此应用互斥的集合;
h)使用决策器进行自动选择;
i)将结果返回给控制中心。
步骤3)中的c)子步骤,所述应用的资源需求是通过步骤1)和步骤2)中应用资源信息统计得到,使用此应用的历史数据更能预估这个应用启动后所需要的资源,如图5所示。
步骤3)中的d)e)子步骤,所述获取的性能数据和应用分布信息通过步骤1和步骤2)的服务器性能数据统计得到的。
步骤3)中的f)子步骤,所述判断应用是否单一资源需求过多,判断方法为:计算各维度资源的需求比例,并判断这一比例是否超过了常规比例。
步骤3)中的g)子步骤,所述互斥应用集合通过步骤1)和步骤2)的应用资源使用信息计算得来的。
步骤3)中的h)子步骤,所述决策器使用获取的必要数据,进行决策最终输出选择结果
如图4所示,性能数据收集具体步骤如下:
a)接收各代理服务器上报的性能数据
b)按照一定的权重比例,归一化各维度的资源利用率,归一化方法:其中Si代表归一化后的各服务器利用率向量,Ui代表各服务器上的各维度资源利用率向量,Ri代表各维度的权重比例;
c)根据归一化后的资源利用率Si,对各服务器进行排序;
d)根据各维度资源可用量,对各服务器进行排序。
如图5所示,应用的资源需求的计算流程如下:
a)接收各代理服务器上报的所有应用的性能数据,其中每个应用均有唯一的id,相同应用在不同服务器上id一致;
b)针对每一个应用,分别统计每一个维度资源的平均使用量,具体方法为:其中appid代表单个服务器上报的应用资源使用量,N为集群服务器总数;
c)更新每一个应用的资源信息,以供查询及使用。
如图6所示,互斥应用的分析流程如下:
a)取上述图5所示应用资源需求的计算结果;
b)分别按照不同维度的资源,及使用量由高到低对所有应用进行排序,生成应用序列;
c)取每个序列排名靠前的应用作为互斥应用,具体方法:使用APPid分别按照acid,amid,anid三个维度资源进行排序,取每个序列中前30%的应用作为互斥应用,此比例不限于30%。
d)合并所有序列的互斥应用,以供查询某应用的互斥应用。
如图7所示,决策器的计算流程如下:
a)获取此应用的互斥应用Mj
b)获取已排序的服务器序列X;
c)从序列X第一台开始遍历每一台服务器,获取服务器上的应用分布,若包含此应用的互斥应用Mj或不能满足APPid任一维度资源需求的服务器则过滤掉,直到找到一台目的服务器,既可以满足资源需求,也未和其他应用互斥。若遍历完毕未能找到目的服务器,则跳入步骤d);
d)未找到不包含互斥应用的服务器,则重新遍历序列X每一台服务器,过滤掉不能满足资源需求的服务器,将其上互斥应用个数最少的服务器作为最终的目的服务器。
上述虽然结合附图对本发明的具体实施方式进行了描述,但并非对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。

Claims (10)

1.一种应用代理服务器自动选择方法,其特征是:包括以下步骤:
(1)根据多维度资源利用率和可用资源量,制定服务器集群负载评估方案:各服务器周期性采集自身的性能数据,使用性能数据进行所有服务器的排序;
(2)根据不同应用的资源需求,制定应用动态部署方案:定期采集应用自身正在使用着的性能数据,统计并分析其分布情况;
(3)根据负载评估及应用动态部署,选择合适的应用代理服务器:查询应用的资源需求,分析多维度资源的需求,对各个服务器进行遍历,选择最终服务器。
2.如权利要求1所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(1)的具体方法,包括以下步骤:
(a)服务器集群中的各服务器按同样的设定周期,周期性地收集各自的CPU、内存、网络带宽资源利用率及可用资源量;
(b)各服务器定时上报性能数据至自动选择系统;自动选择系统收到各服务器的性能数据后,对各资源利用率进行归一化;
(c)自动选择系统根据资源利用率高低、可用资源量的多少对所有服务器进行排序。
3.如权利要求2所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(a)中,资源利用率定义为:Ui={ci,mi,ni},即各维度资源的使用量与各维度资源的总量的比例,其中Ui代表服务器i的资源利用率向量,ci代表服务器i的CPU资源利用率,mi代表服务器i的内存资源利用率,ni代表服务器i的网络带宽利用率;
所述步骤(a)中,可用资源量定义为:Ai={Ci,Mi,Ni},其中Ai代表服务器i的可用资源向量,Ci代表服务器i的CPU可用资源量,Mi代表服务器i的内存可用资源量,Ni代表服务器i的网络可用资源量。
4.如权利要求2所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(b)中,资源利用率归一化的具体方法为:定义服务器i的总资源利用率为Si,各维度资源归一化比例为Ri={rc rm,rn},其中Ri代表主机i归一化比例向量,rc代表cpu所占主机资源利用率的比例,rm代表内存所占主机资源利用率的比例,rn代表网络带宽所占主机资源利用率的比例,归一化方法:
5.如权利要求1所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(2)的具体方法,包括以下步骤:
(i)按照设定周期采集所有应用的性能数据,生成历史数据;
(ii)查询指定应用的历史数据,获取历史资源使用量作为此应用的资源需求;
(iii)统计并分析应用的分布信息;
(iv)分析指定应用的互斥应用。
6.如权利要求5所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(i)的具体方法为:定义应用性能数据为:APPid={acid,amid,anid},其中APPid代表序号为id的应用的各维度资源的使用量,acid代表应用的cpu资源使用量,amid代表应用的内存资源使用量,anid代表应用的网络带宽资源使用量;各服务器将应用资源使用量上报后,由中心服务器定时取各自平均值作为此应用最终的历史数据,具体方法为:其中appid代表单个服务器上报的应用资源使用量,N为集群服务器总数。
7.如权利要求5所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(iii)的具体方法为:将应用分布信息定义为:Pi={<ID1,n1>,<ID2,n2>,...},Pi代表服务器i的所有应用信息,其中<ID1,n1>代表应用序号为ID1的应用,在服务器i上有n1个运行实例,<ID2,n2>代表应用序号为ID2的应用,在服务器i上有n2个运行实例,各服务器将此信息上报自动选择系统后,由自动选择系统统一汇总。
8.如权利要求5所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(iv)中互斥应用是指:不同应用的各维度资源使用状况相似度达到80%以上,且存在单一资源使用量过多的相似应用的集合,定义为Mj={id1,id2,...},M代表mutex互斥含义,j代表互斥应用集合的ID,集合中id1、id2则代表互斥的应用ID。
9.如权利要求1所述的一种应用代理服务器自动选择方法,其特征是:所述步骤(3)的具体方法,包括以下步骤:
Step1:查询此应用的资源需求APPid,分析各个维度的资源哪一个更迫切需要得到满足,若三种资源需求相对均衡则,转至Step2,若某种资源需求迫切,则转至步骤Step3;
Step2:将各服务器按照资源使用率Si从低到高排序生成序列X;
Step3:将各服务器按照某单一维度的可用资源量从高到低排序生成序列X;
Step4:获取此应用的互斥应用Mj
Step5:从序列X第一台开始遍历每一台服务器,若包含此应用的互斥应用Mj或不能满足APPid任一维度资源需求的服务器则过滤掉,直到找到一台目的服务器,既满足资源需求,也未和其他应用互斥;若遍历完毕未能找到目的服务器,则跳入Step6;
Step6:遍历序列X每一台服务器,过滤掉不能满足资源需求的服务器,将其上互斥应用个数最少的服务器作为最终的目的服务器。
10.一种实现如权利要求1-9中任一项所述的选择方法的自动选择系统,连接各个应用代理服务器和控制中心,其特征是:包括采集模块、分析模块和决策模块,其中:
采集模块,用于定时采集多维度资源的利用率及可用资源量、应用代理服务器性能数据和分布信息,连接分析模块;
分析模块,用于统计并分析处理应用代理服务器的分布信息、性能数据和资源信息,连接决策模块;
决策模块,用于根据负载评估及应用动态部署,选择出合适的应用代理服务器。
CN201410241877.XA 2014-06-03 2014-06-03 一种应用代理服务器自动选择方法及系统 Active CN104038540B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410241877.XA CN104038540B (zh) 2014-06-03 2014-06-03 一种应用代理服务器自动选择方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410241877.XA CN104038540B (zh) 2014-06-03 2014-06-03 一种应用代理服务器自动选择方法及系统

Publications (2)

Publication Number Publication Date
CN104038540A true CN104038540A (zh) 2014-09-10
CN104038540B CN104038540B (zh) 2017-03-22

Family

ID=51469128

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410241877.XA Active CN104038540B (zh) 2014-06-03 2014-06-03 一种应用代理服务器自动选择方法及系统

Country Status (1)

Country Link
CN (1) CN104038540B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104267995A (zh) * 2014-09-30 2015-01-07 北京金山安全软件有限公司 应用程序的处理方法、装置及终端
CN104618269A (zh) * 2015-01-29 2015-05-13 南京理工大学 基于能耗要求的云系统利用率最大化资源分配方法
CN104834569A (zh) * 2015-05-11 2015-08-12 北京京东尚科信息技术有限公司 一种基于应用类型的集群资源调度方法及系统
CN105245607A (zh) * 2015-10-23 2016-01-13 中国联合网络通信集团有限公司 代理服务器动态自动选择方法及系统
CN105338082A (zh) * 2015-10-30 2016-02-17 浪潮(北京)电子信息产业有限公司 基于应用代理服务器的负载均衡方法及装置
CN105488134A (zh) * 2015-11-25 2016-04-13 用友网络科技股份有限公司 大数据处理方法及大数据处理装置
CN105979009A (zh) * 2016-07-06 2016-09-28 乾云众创(北京)信息科技研究院有限公司 一种针对云应用容器的增加负载自动均衡方法
CN106331144A (zh) * 2016-09-08 2017-01-11 四川大学 一种基于移动代理系统的代理负载均衡方法
CN107133096A (zh) * 2017-04-13 2017-09-05 新华三技术有限公司 一种资源分配方法及装置
CN107277143A (zh) * 2017-06-21 2017-10-20 郑州云海信息技术有限公司 一种资源匹配管理方法及装置
CN107707612A (zh) * 2017-08-10 2018-02-16 北京奇艺世纪科技有限公司 一种负载均衡集群的资源利用率的评估方法及装置
WO2018036168A1 (zh) * 2016-08-22 2018-03-01 平安科技(深圳)有限公司 数据处理任务执行方法、装置、执行服务器和存储介质
CN108111559A (zh) * 2016-11-25 2018-06-01 新华三技术有限公司 一种应用软件部署系统及方法
CN108279974A (zh) * 2017-01-06 2018-07-13 阿里巴巴集团控股有限公司 一种云资源分配方法及装置
CN108462753A (zh) * 2016-09-12 2018-08-28 广东欧珀移动通信有限公司 云端设备连接方法和智能终端
CN108600341A (zh) * 2018-04-09 2018-09-28 广州悦世界信息科技有限公司 一种业务节点分配方法、决策节点及服务器集群
CN109905472A (zh) * 2019-02-21 2019-06-18 上海富数科技有限公司 自适应网络代理系统及基于神经网络进行权值调整的方法
CN111198768A (zh) * 2020-01-07 2020-05-26 山东超越数控电子股份有限公司 一种集群服务器自动选择方法
CN112073274A (zh) * 2020-09-08 2020-12-11 张立旭 一种动态选择反向代理服务器的远程访问方法及系统
CN115840649A (zh) * 2023-02-16 2023-03-24 浙江云针信息科技有限公司 划分容量块式虚拟资源分配方法及装置、存储介质和终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101815033A (zh) * 2010-03-12 2010-08-25 成都市华为赛门铁克科技有限公司 负载均衡的方法、设备及系统
CN102360314A (zh) * 2011-10-28 2012-02-22 中国科学院计算技术研究所 一种数据中心资源管理系统和方法
WO2012058170A1 (en) * 2010-10-26 2012-05-03 Qualcomm Incorporated Application specific resource management
CN102932279A (zh) * 2012-10-30 2013-02-13 北京邮电大学 一种云环境数据中心多维资源调度系统及方法
CN103179217A (zh) * 2013-04-19 2013-06-26 中国建设银行股份有限公司 一种用于web应用服务器群组的负载均衡方法和装置
CN103634330A (zh) * 2012-08-20 2014-03-12 曙光信息产业(北京)有限公司 一种云计算环境下的资源自动分配方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101815033A (zh) * 2010-03-12 2010-08-25 成都市华为赛门铁克科技有限公司 负载均衡的方法、设备及系统
WO2012058170A1 (en) * 2010-10-26 2012-05-03 Qualcomm Incorporated Application specific resource management
CN102360314A (zh) * 2011-10-28 2012-02-22 中国科学院计算技术研究所 一种数据中心资源管理系统和方法
CN103634330A (zh) * 2012-08-20 2014-03-12 曙光信息产业(北京)有限公司 一种云计算环境下的资源自动分配方法
CN102932279A (zh) * 2012-10-30 2013-02-13 北京邮电大学 一种云环境数据中心多维资源调度系统及方法
CN103179217A (zh) * 2013-04-19 2013-06-26 中国建设银行股份有限公司 一种用于web应用服务器群组的负载均衡方法和装置

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104267995A (zh) * 2014-09-30 2015-01-07 北京金山安全软件有限公司 应用程序的处理方法、装置及终端
CN104267995B (zh) * 2014-09-30 2018-10-16 北京金山安全软件有限公司 应用程序的处理方法、装置及终端
CN104618269A (zh) * 2015-01-29 2015-05-13 南京理工大学 基于能耗要求的云系统利用率最大化资源分配方法
CN104618269B (zh) * 2015-01-29 2017-08-29 南京理工大学 基于能耗要求的云系统利用率最大化资源分配方法
CN104834569B (zh) * 2015-05-11 2018-01-16 北京京东尚科信息技术有限公司 一种基于应用类型的集群资源调度方法及系统
CN104834569A (zh) * 2015-05-11 2015-08-12 北京京东尚科信息技术有限公司 一种基于应用类型的集群资源调度方法及系统
CN105245607A (zh) * 2015-10-23 2016-01-13 中国联合网络通信集团有限公司 代理服务器动态自动选择方法及系统
CN105338082A (zh) * 2015-10-30 2016-02-17 浪潮(北京)电子信息产业有限公司 基于应用代理服务器的负载均衡方法及装置
CN105488134A (zh) * 2015-11-25 2016-04-13 用友网络科技股份有限公司 大数据处理方法及大数据处理装置
CN105979009A (zh) * 2016-07-06 2016-09-28 乾云众创(北京)信息科技研究院有限公司 一种针对云应用容器的增加负载自动均衡方法
CN105979009B (zh) * 2016-07-06 2019-05-17 乾云数创(山东)信息技术研究院有限公司 一种针对云应用容器的增加负载自动均衡方法
WO2018036168A1 (zh) * 2016-08-22 2018-03-01 平安科技(深圳)有限公司 数据处理任务执行方法、装置、执行服务器和存储介质
CN106331144A (zh) * 2016-09-08 2017-01-11 四川大学 一种基于移动代理系统的代理负载均衡方法
CN108462753A (zh) * 2016-09-12 2018-08-28 广东欧珀移动通信有限公司 云端设备连接方法和智能终端
CN108111559A (zh) * 2016-11-25 2018-06-01 新华三技术有限公司 一种应用软件部署系统及方法
CN108111559B (zh) * 2016-11-25 2020-12-18 新华三技术有限公司 一种应用软件部署系统及方法
CN108279974A (zh) * 2017-01-06 2018-07-13 阿里巴巴集团控股有限公司 一种云资源分配方法及装置
CN108279974B (zh) * 2017-01-06 2022-07-19 阿里巴巴集团控股有限公司 一种云资源分配方法及装置
CN107133096A (zh) * 2017-04-13 2017-09-05 新华三技术有限公司 一种资源分配方法及装置
CN107277143A (zh) * 2017-06-21 2017-10-20 郑州云海信息技术有限公司 一种资源匹配管理方法及装置
CN107707612A (zh) * 2017-08-10 2018-02-16 北京奇艺世纪科技有限公司 一种负载均衡集群的资源利用率的评估方法及装置
CN108600341A (zh) * 2018-04-09 2018-09-28 广州悦世界信息科技有限公司 一种业务节点分配方法、决策节点及服务器集群
CN109905472A (zh) * 2019-02-21 2019-06-18 上海富数科技有限公司 自适应网络代理系统及基于神经网络进行权值调整的方法
CN111198768A (zh) * 2020-01-07 2020-05-26 山东超越数控电子股份有限公司 一种集群服务器自动选择方法
CN112073274A (zh) * 2020-09-08 2020-12-11 张立旭 一种动态选择反向代理服务器的远程访问方法及系统
CN112073274B (zh) * 2020-09-08 2023-02-03 张立旭 一种动态选择反向代理服务器的远程访问方法及系统
CN115840649A (zh) * 2023-02-16 2023-03-24 浙江云针信息科技有限公司 划分容量块式虚拟资源分配方法及装置、存储介质和终端

Also Published As

Publication number Publication date
CN104038540B (zh) 2017-03-22

Similar Documents

Publication Publication Date Title
CN104038540A (zh) 一种应用代理服务器自动选择方法及系统
CN108829494B (zh) 基于负载预测的容器云平台智能资源优化方法
US10841241B2 (en) Intelligent placement within a data center
CN102111337B (zh) 任务调度方法和系统
US10474504B2 (en) Distributed node intra-group task scheduling method and system
CN103401947A (zh) 多个服务器的任务分配方法和装置
CN104102543B (zh) 一种云计算环境中负载调整的方法和装置
CN104065663A (zh) 一种基于混合云调度模型的自动伸缩、费用优化的内容分发服务方法
CN103383655A (zh) 用于在qos感知云中管理合并的工作负载的性能干扰模型
WO2019024445A1 (zh) 地理分布交互服务云资源协同优化方法
CN103763130A (zh) 大规模集群的管理方法、装置和系统
Kord et al. An energy-efficient approach for virtual machine placement in cloud based data centers
Yeh et al. Economic-based resource allocation for reliable Grid-computing service based on Grid Bank
CN108170530B (zh) 一种基于混合元启发式算法的Hadoop负载均衡任务调度方法
Alboaneen et al. Energy-aware virtual machine consolidation for cloud data centers
CN103927229A (zh) 在动态可用服务器集群中调度映射化简作业
CN104092756A (zh) 一种基于dht机制的云存储系统的资源动态分配方法
CN110688213B (zh) 一种基于边缘计算的资源管理方法、系统及电子设备
CN112261120B (zh) 一种配电物联网云边协同任务卸载方法及装置
CN112148492A (zh) 一种考虑多用户移动性的服务部署和资源分配方法
CN115033340A (zh) 一种宿主机的选择方法及相关装置
Rashida et al. A memetic grouping genetic algorithm for cost efficient VM placement in multi-cloud environment
CN115134371A (zh) 包含边缘网络算力资源的调度方法、系统、设备及介质
Tekiyehband et al. An efficient dynamic service provisioning mechanism in fog computing environment: A learning automata approach
CN115421930B (zh) 任务处理方法、系统、装置、设备及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Xinluo Avenue high tech Zone of Ji'nan City, Shandong province 250101 silver bearing No. 2008 building B block 1001

Applicant after: SHANDONG MASSCLOUDS CO.,LTD.

Address before: 250101, C, building 401, Shandong Ji'nan hi tech Zone (Lixia District)

Applicant before: SHANDONG MASSCLOUDS CO.,LTD.

CB02 Change of applicant information

Address after: Xinluo Avenue high tech Zone of Ji'nan City, Shandong province 250101 silver bearing No. 2008 building B block 1001

Applicant after: SHANDONG QIANYUN QICHUANG INFORMATION TECHNOLOGY Co.,Ltd.

Address before: Xinluo Avenue high tech Zone of Ji'nan City, Shandong province 250101 silver bearing No. 2008 building B block 1001

Applicant before: SHANDONG MASSCLOUDS CO.,LTD.

COR Change of bibliographic data
C14 Grant of patent or utility model
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: An automatic selection method and system of application proxy server

Effective date of registration: 20210531

Granted publication date: 20170322

Pledgee: Jinan Rural Commercial Bank Co.,Ltd. Runfeng sub branch

Pledgor: SHANDONG QIANYUN QICHUANG INFORMATION TECHNOLOGY Co.,Ltd.

Registration number: Y2021980004230

PC01 Cancellation of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Date of cancellation: 20230217

Granted publication date: 20170322

Pledgee: Jinan Rural Commercial Bank Co.,Ltd. Runfeng sub branch

Pledgor: SHANDONG QIANYUN QICHUANG INFORMATION TECHNOLOGY Co.,Ltd.

Registration number: Y2021980004230