CN104866408B - 一种应用系统的容量预测方法和装置 - Google Patents

一种应用系统的容量预测方法和装置 Download PDF

Info

Publication number
CN104866408B
CN104866408B CN201410058364.5A CN201410058364A CN104866408B CN 104866408 B CN104866408 B CN 104866408B CN 201410058364 A CN201410058364 A CN 201410058364A CN 104866408 B CN104866408 B CN 104866408B
Authority
CN
China
Prior art keywords
capacity
application system
line
pressure
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201410058364.5A
Other languages
English (en)
Other versions
CN104866408A (zh
Inventor
李恩领
童庭坚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Advanced New Technologies Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201410058364.5A priority Critical patent/CN104866408B/zh
Publication of CN104866408A publication Critical patent/CN104866408A/zh
Application granted granted Critical
Publication of CN104866408B publication Critical patent/CN104866408B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请实施例公开了一种应用系统的容量预测方法和装置,该方法包括:预处理过程和容量预测过程,其中,预处理过程包括:依据应用系统的实时容量数据建立容量预测线上模型,依据容量预测线上模型和预设的压测策略模拟线下容量数据;依据应用系统的实时容量数据和线下容量数据确定应用系统的容量偏移值;容量预测过程包括:依据当前时刻应用系统的实时容量值和偏移值确定应用系统的线上容量值;判断是否TPM、RT或CPU使用率到达预设的极限值,如果是,则将当前时刻对应的TPM、RT和CPU使用率确定为应用系统的容量。采用本申请实施例进行容量预测,比现有技术更为准确。

Description

一种应用系统的容量预测方法和装置
技术领域
本申请涉及互联网数据处理领域,特别是涉及一种应用系统的容量预测方法和装置。
背景技术
目前,互联网不管是常规的性能测试,还是应用系统的容量评估,一般需要先通过生产运维提供的业务场景参考(大多数是单一场景)比例,凭借开发、业务、测试人员的经验进行分析,得出经验性测试模型,再通过性能测试工具在测试环境中模拟压测,最后分析测试结果来判断应用系统的最大负载能力。
但是发明人在研究过程中发现,这种传统的实施方法中,生产运维提供的业务场景参考数据是否准确,其代表的业务场景是否全面都是未知的,因此,现有技术中进行应用系统容量预测的时候准确性较差。
发明内容
本申请所要解决的技术问题是,提供一种应用系统的容量预测方法,以解决现有技术中预测应用系统的容量时准确性较差的技术问题。
本申请的另一个目的是将上述构思应用于具体的应用环境中,提供一种应用系统的容量预测装置,从而保证该方法的实现和应用。
为解决上述技术问题,本申请实施例提供了一种应用系统的容量预测方法,该方法包括:
预处理过程:
依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率;
依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据;
依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值;
容量预测过程:
依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值;
判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值,如果是,则将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统容量。
本申请实施例还提供了一种应用系统的容量预测装置,包括预处理单元和容量预测单元,其中预处理单元包括:
模型建立模块,用于依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率;
压测模块,用于依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据;
偏移值确定模块,用于依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值;
所述容量预测单元包括:
第一确定模块,用于依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值;
判断模块,用于判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值;
第二确定模块,用于在所述判断模块的结果为是的情况下,将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统容量。
从上述的技术方案可以看出,在本申请实施例中,采用应用系统中的实时变化的容量数据进行流量建模和容量压测,再通过对实时容量数据的比对分析进行容量预测,从而通过建立生产环境与测试环境的关联关系,来得出应用系统在两者间的性能对比差异,而依靠这种对比关系实现容量预测就因为考虑了容量偏移而更准确。因此,解决了现有技术中存在的业务场景的参考数据可能不够准确,其代表的业务场景可能不够全面等问题,最终实现的容量预测也比现有技术更准确。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请方法实施例的流程图;
图2为本申请方法实施例中步骤101的流程图;
图3为本申请方法实施例中被测的应用系统的事务流量走势的示意图;
图4为本申请方法实施例中步骤102的流程图;
图5为本申请方法实施例中步骤103的流程图;
图6为本申请方法实施例中容量偏移量的示意图;
图7为本申请云装置实施例的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
参见图1,示出了本申请的一种应用系统的容量预测方法实施例的流程图,其中,步骤101~步骤103为预处理过程,而步骤104和步骤105为容量预测过程。本实施例可以包括以下步骤:
步骤101:依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率。
在本申请实施例中,需要采集到应用系统某一个时段内各业务场景的实时容量数据。其中,应用系统是指在线实时服务于用户的某种事务(业务或请求)的服务器,例如:Linux或者Windows,等等。某个时段是指应用系统提供服务的一个持续的时间段,一般可以选择2个小时。当然,也可以选择其他时间。业务场景是指应用系统对用户或其他系统提供的某种服务,也可以理解为对请求的应答。不同的应用系统对外提供的服务不同业务场景也就不同。例如在互联网第三方支付中的收银台系统中提供了几种不同的事务类型,收银台系统就可以称之为业务场景,例如,其中,页面展现的事务类型(用户可以看到自己的余额,和不同的支付类型),以及查询余额、账户管理、信用支付、余额宝支、余额支付或者网银支付的事务类型,等等。具体在采集数据的时候,是把在线的应用系统在2个小时内的每一分钟内是如何处理业务场景和性能表现数据进行收集存储的过程。
具体的,参考图2所示,为步骤101的一个具体实施方式,本实施方式具体可以包括:
步骤201:获取所述应用系统的应用场景中各事务的比例关系。
根据业务场景中各事务比例得出容量预测线上模型。
在本申请实施例中,最终建立的容量预测线上模型有三个维度:时间、事务比例和应用系统的性能指标,如表1所示。那么,就需要获取到再每一分钟内,各个业务场景内的各个事务的比例,例如对于第一分钟来讲,余额支付、网银支付和信用支付的比例为:500、300、200。
表1
在表1所示的容量预测线上模型中,容量预测线上模型可以是一个多维的数组,其中,CPU代表应用系统的资源使用率,TPM(Transaction Per Minute)是指应用系统对事务的处理能力,RT表示应用系统处理某一个事务的响应时间。
步骤202:在预设时间内,依据所述各事务的比例关系及采样周期确定所述应用系统的RT值,并采集所述应用系统的实时TPM和CPU使用率。
在表1所示的容量预测线上模型中,采样周期就是1分钟。当然,采样周期也可以依据实际需求采用其他的值,例如半分钟,或者两分钟等。在本步骤中,即是在预设的两个小时的采集时间内,应用系统对余额支付事务的响应时间为100ms,而对网银支付事务的响应时间为200ms,对信用支付事务的响应时间为150ms。
步骤203:依据所述应用系统在预设时间内的RT值、实时TPM和CPU使用率生成所述应用系统的容量走势。
在本实施例中,实现本步骤可以通过将表1中的数据生成一副容量走势图的方式。参考图3所示,为被测的应用系统的事务流量走势的示意图,其中,X轴代表时间,Y轴代表事务量(在图3中以TPM值为例),图3中的每一个曲线代表一个业务或者一个请求。
在步骤101建立了容量预测线上模型之后,则后续可以利用容量预测线上模型和预设的压测策略来进行线下压力测试,进入步骤102:依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据。
在本步骤实现压力测试的时候,可以建立一个压测模型。具体的,根据步骤101建立的容量预测线上模型,开发人员可以使用模拟压测工具编写压测脚本,并将所编写出的压测脚本和容量预测线上模型之间建立映射关系。例如:工具中的eBankPay()对应于容量预测线上模型中的网银支付事务。
具体的,参考图4所示所示,为步骤102的一个具体实施方式,本实施方式具体可以包括:
步骤401:获取预设的压测策略,所述压测策略包括:压测时长、梯度运行时长和容量上限,所述压测时长表示压测的时间,所述梯度运行时长表示每一个梯度的压测时间,容量上限表示压测过程中的容量最大值。
在实施本申请时,需要开发人员预先设置线下模拟压测的压测策略。其中,压测策略主要包括:压测时长,梯度运行时长和容量上限这三个参数。其中,压测时长表示压测的时间,例如,压力测试的时间为5个小时;而梯度运行时长表示每一个梯度的压测时间,例如,一个梯度的运行时长为20分钟;容量上限表示压测过程中的容量最大值,例如,CPU的使用率不超过75%。
步骤402:依据所述容量预测线上模型和所述压测策略生成所述线下容量数据的走势。
在建立压测模型之后,具体需要回放压测模型下创建的压力,以获得线下容量数据的走势。因为根据容量预测线上模型的数据可以计算出生成系统在压测时长内的线下容量数据的走势(即是压测模型),但是该线下容量数据的走势仅仅是根据容量预测线上模型的数据推理出来的,因此需要进行实际中应用系统的压力测试。
步骤403:依据所述线下容量数据的走势对所述应用系统进行压力测试,以得到线下容量数据的压测结果。
得出压测模型之后,再根据压测策略可以计算出应用系统的线下容量数据的走势,那么后续就可以装载容量预测线上模型和线下容量数据的走势进行压力测试。其中,线下容量数据的走势中有两个参数,一个是时间趋势,一个是事务量,然后即可触发应用系统的压力测试。具体的,在实施压力测试的过程,流量控制器(Alipay Throughput Replayer,也称流量回放器)在压测工具上的实现如下:
获取当前秒向应用系统已发送的事务量;
如果已发送事务量小于预期事务量(该预期事务量的计算方式为:从压测容量趋势中获得的当前时间所对应的事务量),则计算延时,等待延时结束后再发送事务请求;其中,延时的算法为:当前秒剩余毫秒数(当前秒(1000毫秒)—当前秒已过毫秒数)/当前秒未完成事务量(当前秒预期事务量—当前秒已完成事务量),如果计算结果小于或等于1,则不延时,否则等待相应时长(延时的计算结果)后再发起请求。例如,当前秒预期完成事务量为100,假设,当前秒刚刚开始(也就是当前秒为0毫秒的时候),延时=(1000毫秒–0毫秒)/(预期事务量100–已完成事务量0)=10毫秒,那么,需要延时10毫秒后再向应用系统发送事务的请求。
最终得到的容量测试结果,也是和表1所示的容量预测线上模型的结果对应的一个数组,参考表2所示。
表2
在进行压力测试之后得到了和容量预测线上模型类似的线下容量数据,进入步骤103:依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值。
因为应用系统的线下容量数据是进行压测得出来的,和在建立容量预测线上模型的时候采集的应用系统的实时容量数据是存在区别的,而这个区别就是应用系统的容量偏移值。在进行应用系统的容量预测的时候,需要将容量偏移值也考虑在内。本领域技术人员可以通过已经获取的容量预测线上模型的实时容量数据和线下压测结果的值进行比对,通过比对得出容量偏移值,其中,容量比对可以包括系统TPM、CPU使用率和RT,当然也可以比对其他容量参数。
具体的,在确定容量偏移值的时候,可以参考图5所示的流程图,可以包括:
步骤501:分别确定与所述实时容量数据对应的线上容量基准值,以及与线下容量数据对应的线下容量基准值。
下参考图6所示,图6为比对CPU使用率的界面示意图。在图6中,共有两条直线,其中斜率大的1号直线是线上CPU使用率基准线,该线上CPU使用率基准线上对应的Y坐标即是线上容量基准值。斜率小的2号直线是线下CPU使用率基准线,该线下CPU使用率基准线对应的Y坐标即是线下容量基准值。其中,3号曲线表示线上CPU使用率,而4号曲线表示线上CPU使用率预测,5号曲线表示的是线下CPU使用率。其中,1号直线是根据3号曲线确定的,而2号直线是根据5号曲线确定的。
步骤502:比对所述应用系统的线上容量基准值和线下容量基准值从而获得应用系统的容量偏移值。
在本步骤中,即是计算图6所示的两条直线所表示的线上和线下的CPU使用率的差值,即是线上CPU使用率和线下CPU使用率的斜率差。根据标准斜率m的公式即可获得线上和线下两条CPU使用率的斜率差。
具体的,本步骤在实现是可以将所述应用系统的线上容量基准值和线下容量基准值的差作为所述应用系统的容量偏移值。例如,如果想获得x轴上的任意一个点的y值,通过上面得到的斜率可以得出线上的CPU使用率为y线上=m线上x+b线上,线下的CPU使用率为y线下=m线下x+b线下(b是常量),因此,线上和线下的CPU使用率在某一点的差异值是y=y线上-y线下,即是:y=(m线上-m线下)x+b线上-b线下
步骤104:依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值。
基于步骤103得到的容量偏移值,再依据线下的压测结果可以预测出应用系统在线的容量,具体的,根据之前得出的容量偏移值和x、y坐标,预测的容量值计算方式为:yx=y线下+y
需要说明的是,在本申请实施例中,进行容量预测需要考虑应用系统的极限值的问题。例如,某个应用系统的CPU使用率上限为75%,处理事务的响应时间不超过150毫秒,等等,那么在进行容量预测的时候就需要考虑这些因素,预测的容量值不能超过预先设定的应用系统的极限值。此外,在本申请实施例中,还有影响应用系统的健康度的其他指标,例如,错误率,是否内存有泄露,虽然在本申请实施例中只给出了TPM、RT或者CPU使用率的方案,但是本领域技术人员可以依据本申请实施例的方式在需要的时候也可以进行这些指标的预测。
步骤105:判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值,如果是,则进入步骤106,如果否,则返回步骤104。
在进行压测过程中,实时判断应用系统的TPM、RT或CPU使用率是否达到了预设的极限值。判断应用系统是否达到了最大容量,就是在应用系统还处于健康状态情况下,无论是CPU使用率、TPM或者RT中的某一项达到了预设的极限值。在该时刻对应的应用系统的吞吐量就是应用系统的最大容量,例如响应时间120毫秒的时候,CPU的使用率达到了极限值75%,或,CPU的使用率为50%的时候响应时间达到了极限值150毫秒,那么此刻的应用系统就是达到了最大容量。在应用系统的某一项性能指标,TPM、RT或CPU使用率,达到了极限值的时候,就将当前时刻对应的其他两项的性能指标值确定为预测的应用系统的容量值。如果当前未达到极限值,则继续进行压力测试即可。在本申请实施例中,可以返回步骤104重新计算应用系统当前时刻的线上容量值。
可以理解的是,在实际的应用中,为了最大程度的优化应用系统的吞吐量,开发人员可以采取用牺牲应用系统的RT换取CPU使用率的相抵,从而使应用系统更加稳定,或者为了获取最大的吞吐量而增加系统的CPU使用率。本领域技术人员可以通过设置不同对应关系的CPU使用率、RT和TPM的极限值来实现上述策略。
步骤106:将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统容量。
可以理解的是,当某一项的性能指标达到极限值的时候,则当前时刻对应的其他两项的性能指标就是应用系统的容量,因为应用系统不可能再承受再大的压力了。例如,某个应用系统预设的CPU的使用率的极限值是75%,TPM是50000,RT是100ms,而某个时刻CPU使用率达到了75%,此时刻对应的TPM是45000,RT是90ms,那么该应用系统的容量即为:CPU使用率为75%,TPM是45000,RT是90ms。
在本申请实施例中,采用应用系统中的实时变化的容量数据进行流量建模和容量压测,再通过对实时容量数据的比对分析进行容量预测,从而通过建立生产环境与测试环境的关联关系,来得出应用系统在两者间的性能对比差异,而依靠这种对比关系实现容量预测就因为考虑了容量偏移而更准确。因此,解决了现有技术中存在的业务场景的参考数据可能不够准确,其代表的业务场景可能不够全面等问题,最终实现的容量预测也比现有技术更准确。
通过以上的方法实施例的描述,所属领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:只读存储器(ROM)、随机存取存储器(RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
相应于上面的方法实施例,本申请实施例还提供一种应用系统的容量预测装置。参见图7,示出了一种基于应用系统的容量预测实施例的结构示意,该装置可以包括:预处理单元70和容量预测单元71,其中预处理单元可以包括:
模型建立模块701,用于依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率;
可选的,所述模型建立模块701具体可以包括:
获取子模块,用于获取所述应用系统的应用场景中各事务的比例关系;
确定子模块,用于在预设时间内,依据所述各事务的比例关系及采样周期确定所述应用系统的RT值,并采集所述应用系统的实时TPM和CPU使用率;
生成子模块,用于依据所述应用系统在预设时间内的RT值、实时TPM和CPU使用率生成所述应用系统的容量走势。
压测模块702,用于依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据;
可选的,所述压测模块702具体可以包括:
获取子模块,用于获取预设的压测策略,所述压测策略包括:压测时长、梯度运行时长和容量上限,所述压测时长表示压测的时间,所述梯度运行时长表示每一个梯度的压测时间,容量上限表示压测过程中的容量最大值;
生成子模块,用于依据所述容量预测线上模型和所述压测策略生成所述线下容量数据的走势;
测试子模块,用于依据所述线下容量数据的走势对所述应用系统进行压力测试,以得到线下容量数据的压测结果。
容量偏移值确定模块703,用于依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值;
可选的,所述容量偏移值确定模块703具体可以包括:
确定子模块,用于分别确定与所述实时容量数据对应的线上容量基准值,以及与线下容量数据对应的线下容量基准值;
比对子模块,用于比对所述应用系统的线上容量基准值和线下容量基准值从而获得应用系统的容量偏移值。
所述比对子模块具体用于:将所述应用系统的线上容量基准值和线下容量基准值的差作为所述应用系统的容量偏移值。
其中,所述容量预测单元71可以包括:
第一确定模块711,用于依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值;
判断模块712,用于判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值;
第二确定模块713,用于在所述判断模块的结果为是的情况下,将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统容量。
在本实施例中,采用应用系统中的实时变化的容量数据进行流量建模和容量压测,再通过对实时容量数据的比对分析进行容量预测,从而通过建立生产环境与测试环境的关联关系,来得出应用系统在两者间的性能对比差异,而依靠这种对比关系实现容量预测就因为考虑了容量偏移而更准确。因此,解决了现有技术中存在的业务场景的参考数据可能不够准确,其代表的业务场景可能不够全面等问题,最终实现的容量预测也比现有技术更准确。
可以理解的是,本申请可用于众多通用或专用的计算系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。
本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述,例如程序模块。一般地,程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请,在这些分布式计算环境中,由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中,程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的云平台和系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述仅是本申请的具体实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种应用系统的容量预测方法,其特征在于,包括:
预处理过程:
依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率;
依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据;
依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值;
容量预测过程:
依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值;
判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值,如果是,则将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统的容量。
2.根据权利要求1所述的方法,其特征在于,所述依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,包括:
获取所述应用系统的应用场景中各事务的比例关系;
在预设时间内,依据所述各事务的比例关系及采样周期确定所述应用系统的RT值,并采集所述应用系统的实时TPM和CPU使用率;
依据所述应用系统在预设时间内的RT值、实时TPM和CPU使用率生成所述应用系统的容量走势。
3.根据权利要求1所述的方法,其特征在于,所述依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据,包括:
获取预设的压测策略,所述压测策略包括:压测时长、梯度运行时长和容量上限,所述压测时长表示压测的时间,所述梯度运行时长表示每一个梯度的压测时间,容量上限表示压测过程中的容量最大值;
依据所述容量预测线上模型和所述压测策略生成所述线下容量数据的走势;
依据所述线下容量数据的走势对所述应用系统进行压力测试,以得到线下容量数据的压测结果。
4.根据权利要求1所述的方法,其特征在于,所述依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值,包括:
分别确定与所述实时容量数据对应的线上容量基准值,以及与线下容量数据对应的线下容量基准值;
比对所述应用系统的线上容量基准值和线下容量基准值从而获得应用系统的容量偏移值。
5.根据权利要求4所述的方法,其特征在于,所述比对所述应用系统的线上容量基准值和线下容量基准值从而获得应用系统的容量偏移值,具体为:将所述应用系统的线上容量基准值和线下容量基准值的差作为所述应用系统的容量偏移值。
6.一种应用系统的容量预测装置,其特征在于,包括预处理单元和容量预测单元,其中预处理单元包括:
模型建立模块,用于依据获取到的预设时间内应用系统的实时容量数据建立容量预测线上模型,所述实时容量数据包括:应用系统对事务的处理能力TPM、应用系统对事务的响应时间RT和/或CPU使用率;
压测模块,用于依据所述容量预测线上模型和预设的压测策略模拟所述应用系统的线下容量数据;
偏移值确定模块,用于依据所述应用系统的实时容量数据和线下容量数据确定所述应用系统的容量偏移值;
所述容量预测单元包括:
第一确定模块,用于依据当前时刻应用系统的实时容量值和所述偏移值确定所述应用系统的线上容量值;
判断模块,用于判断所述线上容量值中是否TPM、RT或CPU使用率到达预设的极限值;
第二确定模块,用于在所述判断模块的结果为是的情况下,将当前时刻对应的TPM、RT和CPU使用率确定为所述应用系统的容量。
7.根据权利要求6所述的装置,其特征在于,所述模型建立模块包括:
获取子模块,用于获取所述应用系统的应用场景中各事务的比例关系;
确定子模块,用于在预设时间内,依据所述各事务的比例关系及采样周期确定所述应用系统的RT值,并采集所述应用系统的实时TPM和CPU使用率;
生成子模块,用于依据所述应用系统在预设时间内的RT值、实时TPM和CPU使用率生成所述应用系统的容量走势。
8.根据权利要求6所述的装置,其特征在于,所述压测模块包括:
获取子模块,用于获取预设的压测策略,所述压测策略包括:压测时长、梯度运行时长和容量上限,所述压测时长表示压测的时间,所述梯度运行时长表示每一个梯度的压测时间,容量上限表示压测过程中的容量最大值;
生成子模块,用于依据所述容量预测线上模型和所述压测策略生成所述线下容量数据的走势;
测试子模块,用于依据所述线下容量数据的走势对所述应用系统进行压力测试,以得到线下容量数据的压测结果。
9.根据权利要求6所述的装置,其特征在于,所述偏移值确定模块包括:
确定子模块,用于分别确定与所述实时容量数据对应的线上容量基准值,以及与线下容量数据对应的线下容量基准值;
比对子模块,用于比对所述应用系统的线上容量基准值和线下容量基准值从而获得应用系统的容量偏移值。
10.根据权利要求9所述的装置,其特征在于,所述比对子模块具体用于:将所述应用系统的线上容量基准值和线下容量基准值的差作为所述应用系统的容量偏移值。
CN201410058364.5A 2014-02-20 2014-02-20 一种应用系统的容量预测方法和装置 Expired - Fee Related CN104866408B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410058364.5A CN104866408B (zh) 2014-02-20 2014-02-20 一种应用系统的容量预测方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410058364.5A CN104866408B (zh) 2014-02-20 2014-02-20 一种应用系统的容量预测方法和装置

Publications (2)

Publication Number Publication Date
CN104866408A CN104866408A (zh) 2015-08-26
CN104866408B true CN104866408B (zh) 2017-12-22

Family

ID=53912254

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410058364.5A Expired - Fee Related CN104866408B (zh) 2014-02-20 2014-02-20 一种应用系统的容量预测方法和装置

Country Status (1)

Country Link
CN (1) CN104866408B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105488539B (zh) * 2015-12-16 2019-05-24 百度在线网络技术(北京)有限公司 分类模型的生成方法及装置、系统容量的预估方法及装置
CN108268363B (zh) * 2016-12-31 2021-04-06 中国移动通信集团山西有限公司 用于业务容量管理的方法和设备
CN107547261B (zh) * 2017-07-24 2020-10-27 华为技术有限公司 云平台性能测试方法及装置
CN108897673B (zh) * 2018-07-05 2022-04-12 京东科技控股股份有限公司 系统容量评估方法与装置
CN109543891B (zh) * 2018-11-09 2022-02-01 深圳前海微众银行股份有限公司 容量预测模型的建立方法、设备及计算机可读存储介质
CN110213104B (zh) * 2019-06-05 2022-04-08 北京百度网讯科技有限公司 容量预测方法及装置
CN110377228A (zh) * 2019-06-19 2019-10-25 深圳壹账通智能科技有限公司 区块链节点的自动扩容方法、装置、运维终端及存储介质
CN111581070B (zh) * 2020-05-07 2023-08-18 拉扎斯网络科技(上海)有限公司 容量确定方法、装置、电子设备及计算机可读存储介质
CN112363926A (zh) * 2020-11-10 2021-02-12 平安普惠企业管理有限公司 生产环境容量检测方法、装置、计算机设备及存储介质
CN113742187A (zh) * 2021-08-05 2021-12-03 中移(杭州)信息技术有限公司 应用系统的容量预测方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1832979A2 (en) * 1999-09-30 2007-09-12 Qualcomm Incorporated System and method for persistence-vector-based rate assignment
CN101201751A (zh) * 2006-12-12 2008-06-18 中国电信股份有限公司 针对联机事务处理应用的跨机型容量规划方法
CN102411515A (zh) * 2011-07-29 2012-04-11 国网信息通信有限公司 一种服务器容量估算的方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1832979A2 (en) * 1999-09-30 2007-09-12 Qualcomm Incorporated System and method for persistence-vector-based rate assignment
CN101201751A (zh) * 2006-12-12 2008-06-18 中国电信股份有限公司 针对联机事务处理应用的跨机型容量规划方法
CN102411515A (zh) * 2011-07-29 2012-04-11 国网信息通信有限公司 一种服务器容量估算的方法和系统

Also Published As

Publication number Publication date
CN104866408A (zh) 2015-08-26

Similar Documents

Publication Publication Date Title
CN104866408B (zh) 一种应用系统的容量预测方法和装置
Schorlemmer et al. Earthquake likelihood model testing
CN106470133B (zh) 系统压力测试方法及装置
Zechar et al. Likelihood-based tests for evaluating space–rate–magnitude earthquake forecasts
CN108090652A (zh) 构建基于大数据技术的电力交易指标体系的方法
Pezeshk et al. Hybrid empirical ground-motion prediction equations for eastern North America using NGA models and updated seismological parameters
CN104796270B (zh) 在云应用的问题诊断中推荐可疑组件的方法及装置
US20120060167A1 (en) Method and system of simulating a data center
CN107851106A (zh) 用于关系数据库即服务的自动需求驱动的资源缩放
CN108021984A (zh) 确定机器学习样本的特征重要性的方法及系统
AU2021290403A1 (en) Mobile application based account aggregation
CN110135856A (zh) 一种重复交易风险监测方法、装置及计算机可读存储介质
CN106803799B (zh) 一种性能测试方法和装置
EP3731159A1 (en) Adaptive multiyear economic planning method for energy systems, microgrid and distributed energy resources
CN105279086B (zh) 一种基于流程图的自动检测电子商务网站逻辑漏洞的方法
EP4123987A1 (en) Enhanced selection of cloud architecture profiles
JP2016099915A (ja) 与信審査用サーバと与信審査用システム及び与信審査用プログラム
CN113095408A (zh) 风险的确定方法、装置和服务器
Roland et al. Finding compromise solutions in project portfolio selection with multiple experts by inverse optimization
CN110223167A (zh) 生产交易协同监控方法以及生产交易关联监控方法
Ting et al. On the investment–uncertainty relationship in a real option model with stochastic volatility
Farooqi et al. Data quality techniques in the internet of things: Random forest regression
Tiwari et al. Service adaptive broking mechanism using MROSP algorithm
Suhasini et al. Big Data Analytics In Cloud Computing
CN108959047A (zh) 一种基于业务场景的压力测试方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20191224

Address after: P.O. Box 31119, grand exhibition hall, hibiscus street, 802 West Bay Road, Grand Cayman, British Cayman Islands

Patentee after: Innovative advanced technology Co.,Ltd.

Address before: Cayman Islands Grand Cayman capital building, a four storey No. 847 mailbox

Patentee before: ALIBABA GROUP HOLDING Ltd.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20171222

CF01 Termination of patent right due to non-payment of annual fee