CN107104820B - 基于f5服务器节点的动态扩容日常运维方法 - Google Patents

基于f5服务器节点的动态扩容日常运维方法 Download PDF

Info

Publication number
CN107104820B
CN107104820B CN201710177616.XA CN201710177616A CN107104820B CN 107104820 B CN107104820 B CN 107104820B CN 201710177616 A CN201710177616 A CN 201710177616A CN 107104820 B CN107104820 B CN 107104820B
Authority
CN
China
Prior art keywords
node
standby
nodes
data
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710177616.XA
Other languages
English (en)
Other versions
CN107104820A (zh
Inventor
袁国泉
张明明
李叶飞
王松云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
Jiangsu Fangtian Power Technology Co Ltd
Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd
Original Assignee
State Grid Corp of China SGCC
Jiangsu Fangtian Power Technology Co Ltd
Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, Jiangsu Fangtian Power Technology Co Ltd, Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd filed Critical State Grid Corp of China SGCC
Priority to CN201710177616.XA priority Critical patent/CN107104820B/zh
Publication of CN107104820A publication Critical patent/CN107104820A/zh
Application granted granted Critical
Publication of CN107104820B publication Critical patent/CN107104820B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0896Bandwidth or capacity management, i.e. automatically increasing or decreasing capacities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0893Assignment of logical groups to network elements

Abstract

本发明公开了一种基于F5服务器节点的动态扩容日常运维策略,包含以下步骤:获取数据,调用评价体系8种指标,将8种指标打分结果新增到数据库中,由同级信息系统计算出总评分;当总评分大于或等于80时,开启动态减容;当总评分小于80时,开启动态扩容;动态减容开启,系统自动删除备用节点;动态扩容开启,系统自动增加备用节点。本发明完成F5服务器节点资源的合理分配,提前规避掉风险,解放人力资源,实现了自动化。

Description

基于F5服务器节点的动态扩容日常运维方法
技术领域
本发明涉及一种动态扩容方法,特别是一种基于F5服务器节点的动态扩容日常运维方法。
背景技术
现阶段通过F5部署的信息系统服务器节点,节点的数量增减、迁移都是通过用户反馈、系统告警并由系统运维人员主观判断和操作。频繁的主机迁移也会造成计算资源的冗余和浪费,目前只有通过人为的定期检修、发现并回收。这种定期检修和维护计划方式比较被动,也不易发现问题。服务器资源负载压力过大或冗余浪费,会影响客户正常生产工作,同时也可能造成人力物力的浪费,对系统本身用户也会产生质疑。
发明内容
本发明所要解决的技术问题是提供一种基于F5服务器节点的动态扩容日常运维方法,它能够自动进行动态扩容减容。
为解决上述技术问题,本发明所采用的技术方案是:
一种基于F5服务器节点的动态扩容日常运维方法,其特征在于包含以下步骤:
步骤一:获取数据,获取的数据包含服务节点的输入量bits in、服务节点的输出量bits out、访问包的大小packet in、输出包的大小packet out、当前连接数currentconnections、历史最大连接数maximum connections、历史总共连接数totalconnections;
步骤二:调用评价体系8种指标,将8种指标打分结果新增到数据库中,由同级信息系统计算出总评分;当总评分大于或等于80时,开启动态减容;当总评分小于80时,开启动态扩容;
步骤三:动态减容开启,系统自动删除备用节点;动态扩容开启,系统自动增加备用节点。
进一步地,所述步骤二中,8种指标包含
指标1:运行方式模型系统接口服务完整性,是或否;
指标2:运行方式模型系统部署架构完整性,是或否;
指标3:运行方式模型系统网络终端配置检查,是或否;
指标4:运行方式模型虚拟化集成检查;
指标5:运行方式模型服务器完整性;
指标6:运行方式模型网络设备完整性,是或否;
指标7:运行方式模型安全设备完整性;
指标8:运行方式模型存储设备完整性。
进一步地,所述8种指标分为动态、静态指标两类,动态指标打分以各个数据为主,静态指标打分以运行方式模型完整度为主。
进一步地,所述步骤三中,自动增加备用节点具体为,
获取服务数据,当连续2次1分钟内用户请求总数都达到指定数目100个,则默认系统过载,需自动增加一个系统配置好的备用节点。
进一步地,增加备用节点时,首先判断备用节点数量;
当有2个或2个以上备用节点时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点部署应用服务,增加到系统上,完成动态扩容;
当只有一个备用节点时,则直接对该节点部署应用,增加到系统中。
进一步地,所述步骤三中,自动删除备用节点具体为,
获取服务数据,当连续5次1分钟内用户请求总数都低于30个时,则默认系统闲置,自动删除一个系统配置好的备用节点。
进一步地,删除备用节点时,首先判断备用节点数量;
当备用节点为0时,则不再删除节点,退出动态减容程序并等待下一次程序分析;
当只剩一个备用节点时,删除该备用节点;
当备用节点为2个或2个以上时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点删除。
进一步地,所述步骤三中动态扩容和动态减容计算过程为,
定义6个参数newNum1,newNum2,newNum3,newNum4,newNum5,newNum6从左往右依次代表前5分钟、前4分钟、前3分钟、前2分钟、前1分钟、当前时间所获取的6个totalconnection值,定义一个[a0,a1,a2,a3,a4]集合用来存放5分钟内每分钟的历史总连接数;
a0=newNum2 - newNum1、a1=newNum3 - newNum2、a2=newNum4 - newNum3、a3=newNum5 - newNum4、a4=newNum6 - newNum5从左往右依次表示连续每分钟的历史总连接数;
最近连续两次每分钟获取到的数据都大于100即a3和a4同时大于100,同时判断当前节点数量,如果小于3,增加备用节点;
最近连接5次每分钟的数据都小于30,即a0,a1,a2,a3,a4都小于30,同时判断节点数量如果大于1时,删除备用节点。
本发明与现有技术相比,具有以下优点和效果:
1.根据客观的系统的当前状态,完成F5服务器节点资源的合理分配,提前规避掉风险。
2.解放人力资源,实现自动化。
附图说明
图1是本发明的基于F5服务器节点的动态扩容日常运维方法的打分流程图。
图2是本发明的基于F5服务器节点的动态扩容日常运维方法的动态扩容流程图。
具体实施方式
下面结合附图并通过实施例对本发明作进一步的详细说明,以下实施例是对本发明的解释而本发明并不局限于以下实施例。
如图所示,本发明的一种基于F5服务器节点的动态扩容日常运维方法,其特征在于包含以下步骤:
步骤一:获取数据,通过联系厂商,与其建立网络通信,产生数据交互。再由我们本地系统监控捕捉数据。获取的数据包含服务节点的输入量bits in、服务节点的输出量bitsout、访问包的大小packet in、输出包的大小packet out、当前连接数currentconnections、历史最大连接数maximum connections、历史总共连接数totalconnections。前4个参数记录了当前所有用户访问F5时,F5的输入输出大小。后3个参数记录了用户的访问次数情况。
目前影响F5性能的指标是F5自身的吞吐量和处理请求的最大指标数。现实生活中用户的访问请求和返回给用户的数据大小一般不会超过500k、500M,基本不用考虑出现单个用户访问数据量过大的情况。压缩包的大小也是按照请求和返回数据的大小决定,其大小更是要小。由于current connection数据难以实时捕捉,且难以分析。所以一般通过total connection为参考F5动态扩容的指标。
步骤二:调用评价体系8种指标,将8种指标打分结果新增到数据库中,由同级信息系统计算出总评分;当总评分大于或等于80时,开启动态减容;当总评分小于80时,开启动态扩容。
8种指标包含
指标1:运行方式模型系统接口服务完整性,是或否;
指标2:运行方式模型系统部署架构完整性,是或否;
指标3:运行方式模型系统网络终端配置检查,是或否;
指标4:运行方式模型虚拟化集成检查;
指标5:运行方式模型服务器完整性;
指标6:运行方式模型网络设备完整性,是或否;
指标7:运行方式模型安全设备完整性;
指标8:运行方式模型存储设备完整性。
8种指标分为动态、静态指标两类,动态指标打分以各个数据为主,静态指标打分以运行方式模型完整度为主。
我们针对测试系统进行了模拟操作后发现,正常的发送请求时,通过获取到的数据与网络的速度分析可知,bit in与packet in对于系统的影响并不大,网络的处理时间不超过半分钟。只有当current connection升高时,测试系统的访问速度明显下降很多,过一段时间后才缓缓变快,说明F5系统的处理量有一定的大小。这就说明current connection过高直接影响了F5服务系统的稳定性。这就是造成系统繁忙,影响用户的正常使用的原因。所以此时我们需要对系统进行扩容,增加系统处理量,提高系统的稳定性。
步骤三:动态减容开启,系统自动删除备用节点;动态扩容开启,系统自动增加备用节点。
自动增加备用节点具体为,
获取服务数据,当连续2次1分钟内用户请求总数都达到指定数目100个,则默认系统过载,需自动增加一个系统配置好的备用节点。
增加备用节点时,首先判断备用节点数量;
当有2个或2个以上备用节点时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点部署应用服务,增加到系统上,完成动态扩容;
当只有一个备用节点时,则直接对该节点部署应用,增加到系统中。
自动删除备用节点具体为,
获取服务数据,当连续5次1分钟内用户请求总数都低于30个时,则默认系统闲置,自动删除一个系统配置好的备用节点。
删除备用节点时,首先判断备用节点数量;
当备用节点为0时,则不再删除节点,退出动态减容程序并等待下一次程序分析;
当只剩一个备用节点时,删除该备用节点;
当备用节点为2个或2个以上时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点删除。
动态扩容和动态减容计算过程为,
先获取数据,通过获取当前total connections,之后每分钟获取一次totalconnections,通过之后每分钟获取到的值减去前1分钟获取到的值,可以得到多个连续的每分钟内用户的请求总数。
定义6个参数newNum1,newNum2,newNum3,newNum4,newNum5,newNum6从左往右依次代表前5分钟、前4分钟、前3分钟、前2分钟、前1分钟、当前时间所获取的6个totalconnection值,定义一个[a0,a1,a2,a3,a4]集合用来存放5分钟内每分钟的历史总连接数;
a0=newNum2 - newNum1、a1=newNum3 - newNum2、a2=newNum4 - newNum3、a3=newNum5 - newNum4、a4=newNum6 - newNum5从左往右依次表示连续每分钟的历史总连接数;每分钟的数据实时更新,由右边的数据代替左边相邻的数据,最右边的都是当前1分钟的最新数据。
获取到数据后,开始分析数据,最近连续两次每分钟获取到的数据都大于100即a3和a4同时大于100,同时判断当前节点数量,如果小于3,增加备用节点;
最近连接5次每分钟的数据都小于30,即a0,a1,a2,a3,a4都小于30,同时判断节点数量如果大于1时,删除备用节点。
此时,newNum1,newNum2,newNum3,newNum4,newNum5,newNum6的算法可概括为newNum的算法。(newNum = a*4264967294L+b)|| [newNum = (a+1)*4264967294L+b]。
其中,a指高位,b指低位。我们获取到的网络数据类型都是由高低位组合而成的,其中普遍意义上的高低位是32位,64位。我们通过实际验证,最后得出newNum由32位换算法获取。一般意义上的32位来换算,其32位的低位最大数据为4264967294L,超过该数据则高位自动加1,其余的为低位。其低位又分为两种,分别为正负数,正数是不用转义的,而负数是通过最大数据=4264967294L +该负数,就可以得到最后的低位结果。
当低位大于0时newNum = a*4264967294L+b,当低位小于0时newNum = (a+1)*4264967294L+b。
下面通过具体实施例对本申请进一步进行说明。
以F5系统为例,先给其附加一个压力系统程序,先测增容效果。
在附加了压力系统程序后,让其检测出系统繁忙。进入动态扩容程序,过了2分钟后,获取到此前连续2个每分钟的数值为32,156,不满足增加节点的条件。接着获取下一分钟的数据为133,则满足连续两个每分钟的数据大于100的条件,同时判断出当前节点数量1,触发增加节点程序,当前节点数量变为2。如果获取到的节点数量为3,则不再增加节点。
以F5系统为例,取消压力系统程序,再测减容效果。
过会儿,取消其压力系统程序,获取到当前连续5次每分钟的数值为128,12,11,14,10,不满足减容条件。接着获取下一分钟的数据为33同时获取当前节点数量2,触发删除节点数据,当前节点数量为1。当节点数量为1时是不会触发节点自动减少的程序的。
本说明书中所描述的以上内容仅仅是对本发明所作的举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种修改或补充或采用类似的方式替代,只要不偏离本发明说明书的内容或者超越本权利要求书所定义的范围,均应属于本发明的保护范围。

Claims (2)

1.一种基于F5服务器节点的动态扩容日常运维方法,其特征在于包含以下步骤:
步骤一:获取数据,获取的数据包含服务节点的输入量bits in、服务节点的输出量bits out、访问包的大小packet in、输出包的大小packet out、当前连接数currentconnections、历史最大连接数maximum connections、历史总共连接数totalconnections;
步骤二:调用评价体系8种指标,将8种指标打分结果新增到数据库中,由同级信息系统计算出总评分;当总评分大于或等于80时,开启动态减容;当总评分小于80时,开启动态扩容;
所述步骤二中,8种指标包含
指标1:运行方式模型系统接口服务完整性,是或否;
指标2:运行方式模型系统部署架构完整性,是或否;
指标3:运行方式模型系统网络终端配置检查,是或否;
指标4:运行方式模型虚拟化集成检查;
指标5:运行方式模型服务器完整性;
指标6:运行方式模型网络设备完整性,是或否;
指标7:运行方式模型安全设备完整性;
指标8:运行方式模型存储设备完整性;
步骤三:动态减容开启,系统自动删除备用节点;动态扩容开启,系统自动增加备用节点;
自动增加备用节点具体为,
获取服务数据,当连续2次1分钟内用户请求总数都达到指定数目100个,则默认系统过载,需自动增加一个系统配置好的备用节点;
增加备用节点时,首先判断备用节点数量;
当有2个或2个以上备用节点时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点部署应用服务,增加到系统上,完成动态扩容;
当只有一个备用节点时,则直接对该节点部署应用,增加到系统中;
自动删除备用节点具体为,
获取服务数据,当连续5次1分钟内用户请求总数都低于30个时,则默认系统闲置,自动删除一个系统配置好的备用节点;
删除备用节点时,首先判断备用节点数量;
当备用节点为0时,则不再删除节点,退出动态减容程序并等待下一次程序分析;
当只剩一个备用节点时,删除该备用节点;
当备用节点为2个或2个以上时,对所有备用节点进行优先级判断,优先级判断根据节点对应虚拟机的内存、硬盘、CPU参数进行匹配,将优先级最高的备用节点删除;
动态扩容和动态减容计算过程为,
先获取数据,通过获取当前total connections,之后每分钟获取一次totalconnections,通过之后每分钟获取到的值减去前1分钟获取到的值,得到多个连续的每分钟内用户的请求总数;
定义6个参数newNum1,newNum2,newNum3,newNum4,newNum5,newNum6从左往右依次代表前5分钟、前4分钟、前3分钟、前2分钟、前1分钟、当前时间所获取的6个total connection值,定义一个[a0,a1,a2,a3,a4]集合用来存放5分钟内每分钟的历史总连接数;
a0=newNum2 - newNum1、a1=newNum3 - newNum2、a2=newNum4 - newNum3、a3=newNum5- newNum4、a4=newNum6 - newNum5从左往右依次表示连续每分钟的历史总连接数;每分钟的数据实时更新,由右边的数据代替左边相邻的数据,最右边的都是当前1分钟的最新数据;
获取到数据后,开始分析数据,最近连续两次每分钟获取到的数据都大于100即a3和a4同时大于100,同时判断当前节点数量,如果小于3,增加备用节点;
最近连接5次每分钟的数据都小于30,即a0,a1,a2,a3,a4都小于30,同时判断节点数量如果大于1时,删除备用节点。
2.按照权利要求1所述的一种基于F5服务器节点的动态扩容日常运维方法,其特征在于:所述8种指标分为动态、静态指标两类,动态指标打分以各个数据为主,静态指标打分以运行方式模型完整度为主。
CN201710177616.XA 2017-03-23 2017-03-23 基于f5服务器节点的动态扩容日常运维方法 Active CN107104820B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710177616.XA CN107104820B (zh) 2017-03-23 2017-03-23 基于f5服务器节点的动态扩容日常运维方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710177616.XA CN107104820B (zh) 2017-03-23 2017-03-23 基于f5服务器节点的动态扩容日常运维方法

Publications (2)

Publication Number Publication Date
CN107104820A CN107104820A (zh) 2017-08-29
CN107104820B true CN107104820B (zh) 2020-02-07

Family

ID=59676127

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710177616.XA Active CN107104820B (zh) 2017-03-23 2017-03-23 基于f5服务器节点的动态扩容日常运维方法

Country Status (1)

Country Link
CN (1) CN107104820B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109598512B (zh) * 2018-11-13 2023-06-02 创新先进技术有限公司 策略运维方法及装置
CN109495306B (zh) * 2018-11-27 2022-02-01 平安科技(深圳)有限公司 一种业务网络的扩容方法及设备
CN112422329B (zh) * 2020-11-05 2022-08-05 杭州米络星科技(集团)有限公司 流媒体服务器集群的管理方法、装置和电子设备
CN115379000B (zh) * 2022-10-26 2023-03-24 小米汽车科技有限公司 服务平台的扩容方法、装置、电子设备以及存储介质
CN116166428B (zh) * 2023-01-06 2023-12-12 菲尼思信息技术(苏州)有限公司 高并发高流量系统负载资源处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7077199B2 (en) * 2001-10-24 2006-07-18 Shell Oil Company In situ thermal processing of an oil reservoir formation
CN101753478A (zh) * 2008-12-05 2010-06-23 中国移动通信集团公司 一种分布式电子邮件系统及其服务方法
CN102929798A (zh) * 2012-09-21 2013-02-13 曙光信息产业(北京)有限公司 存储介质的层次组织结构
CN103502939A (zh) * 2013-02-07 2014-01-08 华为技术有限公司 对虚拟机进行管理的方法及系统
CN105933391A (zh) * 2016-04-11 2016-09-07 青岛海信传媒网络技术有限公司 一种节点扩容方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7077199B2 (en) * 2001-10-24 2006-07-18 Shell Oil Company In situ thermal processing of an oil reservoir formation
CN101753478A (zh) * 2008-12-05 2010-06-23 中国移动通信集团公司 一种分布式电子邮件系统及其服务方法
CN102929798A (zh) * 2012-09-21 2013-02-13 曙光信息产业(北京)有限公司 存储介质的层次组织结构
CN103502939A (zh) * 2013-02-07 2014-01-08 华为技术有限公司 对虚拟机进行管理的方法及系统
CN105933391A (zh) * 2016-04-11 2016-09-07 青岛海信传媒网络技术有限公司 一种节点扩容方法、装置及系统

Also Published As

Publication number Publication date
CN107104820A (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
CN107104820B (zh) 基于f5服务器节点的动态扩容日常运维方法
CN110493025B (zh) 一种基于多层有向图的故障根因诊断的方法及装置
CN110178121B (zh) 一种数据库的检测方法及其终端
CN112162907A (zh) 基于监控指标数据的健康度评估方法
CN113282635A (zh) 一种微服务系统故障根因定位方法及装置
CN111459698A (zh) 一种数据库集群故障自愈方法及装置
CN113051147A (zh) 一种数据库集群的监控方法、装置、系统、以及设备
CN108809729A (zh) 一种分布式系统中ctdb服务的故障处理方法及装置
CN114070742A (zh) 电力监控系统网络拓扑识别方法及平台
CN116418653A (zh) 基于多指标根因定位算法的故障定位方法及装置
CN114167217B (zh) 一种铁路配电网的多重故障诊断方法
CN114091610A (zh) 智能决策方法及装置
CN113987724A (zh) 基于拓扑分析的电网风险辨识方法及系统
CN108255703B (zh) 一种sql脚本的故障修复方法及其终端
CN106899436A (zh) 一种云平台故障预测诊断系统
CN111769987B (zh) 基于大数据管理模型的网络信息安全测试系统及方法
JPWO2013190649A1 (ja) 仮想ディスクのマイグレーションに関する情報処理方法及び装置
CN112613626B (zh) 备调系统运行状态的监测方法、装置和计算机设备
CN115529219A (zh) 告警分析方法、装置、计算机可读存储介质及电子设备
CN105550094B (zh) 一种高可用系统状态自动监控方法
CN113642171A (zh) 一种基于大数据的输变电设备健康状态评估系统及方法
CN113485891A (zh) 业务日志监控方法、装置、存储介质及电子设备
CN114422324B (zh) 一种告警信息的处理方法、装置、电子设备及存储介质
CN115686583B (zh) 海量物联网设备升级方法、装置、电子设备和存储介质
CN104506663B (zh) 一种智能云计算运行管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant