CN106230627B - 一种基于可定制策略的web访问高峰缓解方法 - Google Patents

一种基于可定制策略的web访问高峰缓解方法 Download PDF

Info

Publication number
CN106230627B
CN106230627B CN201610603377.5A CN201610603377A CN106230627B CN 106230627 B CN106230627 B CN 106230627B CN 201610603377 A CN201610603377 A CN 201610603377A CN 106230627 B CN106230627 B CN 106230627B
Authority
CN
China
Prior art keywords
strategy
user
pass
request
access
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610603377.5A
Other languages
English (en)
Other versions
CN106230627A (zh
Inventor
房爱印
陈萌
王洪超
王为选
单静静
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Software Co Ltd
Original Assignee
Inspur Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Software Co Ltd filed Critical Inspur Software Co Ltd
Priority to CN201610603377.5A priority Critical patent/CN106230627B/zh
Publication of CN106230627A publication Critical patent/CN106230627A/zh
Application granted granted Critical
Publication of CN106230627B publication Critical patent/CN106230627B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0893—Assignment of logical groups to network elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/12—Avoiding congestion; Recovering from congestion
    • H04L47/125—Avoiding congestion; Recovering from congestion by balancing the load, e.g. traffic engineering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/20—Traffic policing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0227—Filtering policies
    • H04L63/0263—Rule management

Abstract

本发明特别涉及一种基于可定制策略的WEB访问高峰缓解方法。该基于可定制策略的WEB访问高峰缓解方法，综合多种资源监控出的后台服务资源指标，按照权重规则综合计算出系统整体负载系数，并根据计算出的相应系统负载系数选定相应策略，同时通过负载系数和数据库活动连接数设置请求通过率，通过黑白名单机制对访问用户及访问资源过滤。该基于可定制策略的WEB访问高峰缓解方法，能够选择性过滤掉部分高峰请求，有效保障在资源固定有限的情况下，绝大部分用户的正常访问、业务办理，避免负载过大造成的全部访问中断、不可用的情况，最终实现整体业务访问的平稳、可连续性，有利于提升社会大众、监管工作人员的满意度，提升网上办事效率，优化服务质量。

Description

一种基于可定制策略的WEB访问高峰缓解方法
技术领域
本发明涉及业务系统应用技术领域，特别涉及一种基于可定制策略的WEB访问高峰缓解方法。
背景技术
随着大众创业、万众创新的改革潮流趋势，政府部门网上办事业务需求不断增加。同时，业务系统访问量也飞速增长，尤其是在一些季节性和政策性高峰期，往往对业务系统产生较大、突发性、洪流式压力，比如企业年报、企业集中换证、新政策法规试行等，比较容易造成系统负载过大、故障、业务被迫中断等情况。因此，在资源纵向伸缩达到一定瓶颈后，如何采取相应保障措施，从系统架构、高峰缓解、压力分摊等方面，提高系统健壮性、提升用户体验，保障业务办理的可连续性，是业务系统应用中亟待解决的难题。
针对上述问题，本发明设计了一种基于可定制策略的WEB访问高峰缓解方法，针对这种情况使用多种可定制策略，选择性过滤掉部分高峰请求，避免造成业务系统雪崩、全部中断，来缓解高峰访问压力，最终实现整体业务的健壮性、可连续性，提升社会大众、监管工作人员的满意度，提升网上办事效率，优化服务质量。
发明内容
本发明为了弥补现有技术的缺陷，提供了一种简单高效的基于可定制策略的WEB访问高峰缓解方法。
本发明是通过如下技术方案实现的：
一种基于可定制策略的WEB访问高峰缓解方法，其特征在于：通过监控包括应用服务器CPU和内存使用率，数据库服务器CPU和内存使用率，锁等待数，在线用户数，页面浏览量PV和访客量UV在内的多个后台服务资源指标和数据库活动连接数；根据权重规则综合计算出系统整体负载系数，并根据计算出的当前相应系统负载系数选定相应策略方案；同时通过负载系数和数据库活动连接数设置请求通过率，建立黑白名单机制，选择性通过满足指定策略的用户请求，忽略或延迟不符合指定策略的用户请求，以此来缓解高峰访问洪流。
根据资源监控指标及综合计算出的负载系数，来选定策略方案，所述策略方案包括随机用户队列通过策略，指定IP通过策略，指定区域用户通过策略和指定业务通过策略。
所述随机用户队列通过策略是指结合监控指标及负载系统设置相应请求通过率，通过黑白名单的机制，有效缓解访问高峰；所述指定IP通过策略是指当IP处于白名单时，即该IP下的用户可畅通无阻的访问办理业务；当IP处于黑名单时，则IP下的用户将无法办理相应业务；所述指定区域用户通过策略是指当指定区域处于白名单时，则该区域下的用户可正常访问办理业务；当指定区域处于黑名单时，则该区域下的而用户无法正常访问办理业务；所述指定业务通过策略是指指定某块业务需进行过滤访问或不需通过过滤访问。
所述负载系数与请求通过率的对应关系为当负载系数不大于50%时请求通过率为100%；当负载系数达到60%时请求通过率为80%，且负载系数大于60%且小于90%时，负载系数每增加10%的同时请求通过率下降10%；当负载系数达到90%时请求通过率为30%；
所述数据库活动连接数与请求通过率的对应关系为当数据库活动连接数的起始值和结束值分别为0和100时请求通过率为100%；随后，数据库活动连接数的起始值和结束值分别每增加50的同时请求通过率下降10%；直至数据库活动连接数的起始值和结束值分别达到501和550时请求通过率降至为10%。
用户访问应用资源时，首先经过过滤器的过滤，过滤访问资源是否在指定的业务过滤范围内，访问IP是否在黑白名单内，用户是否在黑名单内，用户是否在指定区域的黑白名单内；
当请求资源不在业务过滤范围内时，直接允许通过；
当请求用户在白名单列表中时，直接允许通过；
当请求用户在黑名单列表时，则返回给前台提示“当前系统正忙，请稍后再试”；
当请求用户不在白名单和黑名单列表时，则比较请求通过比例与白名单占白名单与黑名单总数的比例，当目标请求通过率小于白名单占白名单与黑名单总数的比例时，请求用户加入黑名单；当目标请求通过率大于白名单占白名单与黑名单总数的比例时，请求用户加入白名单。
本发明的有益效果是：该基于可定制策略的WEB访问高峰缓解方法，能够选择性过滤掉部分高峰请求，有效保障在资源固定有限的情况下，绝大部分用户的正常访问、业务办理，避免负载过大造成的全部访问中断、不可用的情况，最终实现整体业务访问的平稳、可连续性，有利于提升社会大众、监管工作人员的满意度，提升网上办事效率，优化服务质量。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白，以下结合实施例，对本发明进行详细的说明。应当说明的是，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
该基于可定制策略的WEB访问高峰缓解方法，通过权重规则，综合多种资源监控出的后台服务资源指标，按照权重规则综合计算出系统整体负载系数，并根据计算出的相应系统负载系数选定相应策略方案，同时通过负载系数和数据库活动连接数设置请求通过率，通过黑白名单机制对访问用户及访问资源过滤。
所述资源监控包括监控应用系统访问数据库的活动连接数大小，监控部署应用服务器的CPU和内存使用率，监控部署应用数据库服务器的CPU和内存使用率，监控业务系统数据库的锁等待数量，监控登录业务系统的当前在线用户数，监控政务系统的页面浏览量及点击量PV和监控访问政务系统的访客量UV；
根据资源监控指标及综合计算出的负载系数，来选定策略方案，所述策略方案包括随机用户队列通过策略，指定IP通过策略，指定区域用户通过策略和指定业务通过策略。
所述随机用户队列通过策略是指结合监控指标及负载系统设置相应请求通过率，通过黑白名单的机制，有效缓解访问高峰；所述指定IP通过策略是指当IP处于白名单时，即该IP下的用户可畅通无阻的访问办理业务；当IP处于黑名单时，则IP下的用户将无法办理相应业务；所述指定区域用户通过策略是指当指定区域处于白名单时，则该区域下的用户可正常访问办理业务；当指定区域处于黑名单时，则该区域下的而用户无法正常访问办理业务；所述指定业务通过策略是指指定某块业务需进行过滤访问或不需通过过滤访问。
所述负载系数与请求通过率的对应关系如表1所示，当负载系数不大于50%时请求通过率为100%；当负载系数达到60%时请求通过率为80%，且负载系数大于60%且小于90%时，负载系数每增加10%的同时请求通过率下降10%；当负载系数达到90%时请求通过率为30%；
表1 负载系数与请求通过率的对应关系
所述数据库活动连接数与请求通过率的对应关系如表2所示，当数据库活动连接数的起始值和结束值分别为0和100时请求通过率为100%；随后，数据库活动连接数的起始值和结束值分别每增加50的同时请求通过率下降10%；直至数据库活动连接数的起始值和结束值分别达到501和550时请求通过率降至为10%。
表2 数据库活动连接数与请求通过率的对应关系
用户访问应用资源时，首先经过过滤器的过滤，过滤访问资源是否在指定的业务过滤范围内，访问IP是否在黑白名单内，用户是否在黑名单内，用户是否在指定区域的黑白名单内；
当请求资源不在业务过滤范围内时，直接允许通过；
当请求用户在白名单列表中时，直接允许通过；
当请求用户在黑名单列表时，则返回给前台提示“当前系统正忙，请稍后再试”；
当请求用户不在白名单和黑名单列表时，则比较请求通过比例与白名单占白名单与黑名单总数的比例，当目标请求通过率小于白名单占白名单与黑名单总数的比例时，请求用户加入黑名单；当目标请求通过率大于白名单占白名单与黑名单总数的比例时，请求用户加入白名单。

Claims (5)

1.一种基于可定制策略的WEB访问高峰缓解方法，其特征在于包括以下步骤：通过监控包括应用服务器CPU和内存使用率，数据库服务器CPU和内存使用率，锁等待数，在线用户数，页面浏览量PV和访客量UV在内的多个后台服务资源指标和数据库活动连接数；根据权重规则综合计算出系统整体负载系数，并根据计算出的当前相应系统负载系数选定相应策略方案；同时通过负载系数和数据库活动连接数设置请求通过率，建立黑白名单机制，选择性通过满足指定策略的用户请求，忽略或延迟不符合指定策略的用户请求，以此来缓解高峰访问洪流。
2.根据权利要求1所述的基于可定制策略的WEB访问高峰缓解方法，其特征在于：根据资源监控指标及综合计算出的负载系数，来选定策略方案，所述策略方案包括随机用户队列通过策略，指定IP通过策略，指定区域用户通过策略和指定业务通过策略。
3.根据权利要求2所述的基于可定制策略的WEB访问高峰缓解方法，其特征在于：所述随机用户队列通过策略是指结合监控指标及负载系统设置相应请求通过率，通过黑白名单的机制，有效缓解访问高峰；所述指定IP通过策略是指当IP处于白名单时，即该IP下的用户可畅通无阻的访问办理业务；当IP处于黑名单时，则IP下的用户将无法办理相应业务；所述指定区域用户通过策略是指当指定区域处于白名单时，则该区域下的用户可正常访问办理业务；当指定区域处于黑名单时，则该区域下的而用户无法正常访问办理业务；所述指定业务通过策略是指指定某块业务需进行过滤访问或不需通过过滤访问。
4.根据权利要求1所述的基于可定制策略的WEB访问高峰缓解方法，其特征在于：所述负载系数与请求通过率的对应关系为当负载系数不大于50%时请求通过率为100%；当负载系数达到60%时请求通过率为80%，且负载系数大于60%且小于90%时，负载系数每增加10%的同时请求通过率下降10%；当负载系数达到90%时请求通过率为30%；
所述数据库活动连接数与请求通过率的对应关系为当数据库活动连接数的起始值和结束值分别为0和100时请求通过率为100%；随后，数据库活动连接数的起始值和结束值每增加50的同时请求通过率下降10%；直至数据库活动连接数的起始值和结束值分别达到501和550时请求通过率降至为10%。
5.根据权利要求1所述的基于可定制策略的WEB访问高峰缓解方法，其特征在于：用户访问应用资源时，首先经过过滤器的过滤，过滤访问资源是否在指定的业务过滤范围内，访问IP是否在黑白名单内，用户是否在黑名单内，用户是否在指定区域的黑白名单内；
当请求资源不在业务过滤范围内时，直接允许通过；
当请求用户在白名单列表中时，直接允许通过；
当请求用户在黑名单列表时，则返回给前台提示“当前系统正忙，请稍后再试”；
当请求用户不在白名单和黑名单列表时，则比较请求通过比例与白名单占白名单与黑名单总数的比例，当目标请求通过率小于白名单占白名单与黑名单总数的比例时，请求用户加入黑名单；当目标请求通过率大于白名单占白名单与黑名单总数的比例时，请求用户加入白名单。
CN201610603377.5A 2016-07-28 2016-07-28 一种基于可定制策略的web访问高峰缓解方法 Active CN106230627B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610603377.5A CN106230627B (zh) 2016-07-28 2016-07-28 一种基于可定制策略的web访问高峰缓解方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610603377.5A CN106230627B (zh) 2016-07-28 2016-07-28 一种基于可定制策略的web访问高峰缓解方法

Publications (2)

Publication Number Publication Date
CN106230627A CN106230627A (zh) 2016-12-14
CN106230627B true CN106230627B (zh) 2019-05-07

Family

ID=57533784

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610603377.5A Active CN106230627B (zh) 2016-07-28 2016-07-28 一种基于可定制策略的web访问高峰缓解方法

Country Status (1)

Country Link
CN (1) CN106230627B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106874423B (zh) * 2017-01-25 2020-07-31 广东神马搜索科技有限公司 搜索控制方法和系统
CN107948250B (zh) * 2017-11-02 2020-12-04 上海读客数字信息技术有限公司 一种用户访问量的调整方法和设备
CN107977417A (zh) * 2017-11-22 2018-05-01 江苏翼企云通信科技有限公司 一种面向大数据内容高频访问的超轻量架构方法
CN110020383B (zh) * 2018-06-01 2023-04-11 创新先进技术有限公司 一种页面数据请求处理方法及装置
CN110324334B (zh) * 2019-06-28 2023-04-07 深圳前海微众银行股份有限公司 安全组策略管理方法、装置、设备及计算机可读存储介质
CN110865926A (zh) * 2019-11-20 2020-03-06 珠海格力电器股份有限公司 数据库系统及其控制方法
CN111859373A (zh) * 2020-07-15 2020-10-30 杭州安恒信息技术股份有限公司 一种针对hid攻击的防御方法、装置和计算机设备
CN116881106B (zh) * 2023-07-31 2024-03-08 招商基金管理有限公司 业务系统容量运营分析管理方法、装置、存储介质及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101695034A (zh) * 2009-10-09 2010-04-14 清华大学 一种web服务监控参数的调整装置和方法
CN102611735A (zh) * 2011-12-21 2012-07-25 奇智软件（北京）有限公司 一种应用服务的负载均衡方法及系统
CN102811157A (zh) * 2011-06-01 2012-12-05 阿尔卡特朗讯公司 流量控制方法和流量控制装置
CN102915374A (zh) * 2012-11-07 2013-02-06 北京搜狐新媒体信息技术有限公司 一种控制数据库资源访问的方法、装置及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007125942A1 (ja) * 2006-04-26 2007-11-08 Nippon Telegraph And Telephone Corporation 負荷制御装置およびその方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101695034A (zh) * 2009-10-09 2010-04-14 清华大学 一种web服务监控参数的调整装置和方法
CN102811157A (zh) * 2011-06-01 2012-12-05 阿尔卡特朗讯公司 流量控制方法和流量控制装置
CN102611735A (zh) * 2011-12-21 2012-07-25 奇智软件（北京）有限公司 一种应用服务的负载均衡方法及系统
CN102915374A (zh) * 2012-11-07 2013-02-06 北京搜狐新媒体信息技术有限公司 一种控制数据库资源访问的方法、装置及系统

Also Published As

Publication number Publication date
CN106230627A (zh) 2016-12-14

Similar Documents

Publication Publication Date Title
CN106230627B (zh) 一种基于可定制策略的web访问高峰缓解方法
Chen et al. Electric demand response management for distributed large-scale internet data centers
US20210354583A1 (en) System and method for ordered charging management of charging station
US9781012B2 (en) Behavior monitoring and compliance for multi-tenant resources
WO2019127891A1 (zh) 一种呼入分配方法、电子装置及计算机可读存储介质
CN107171839A (zh) 一种带宽流量成本控制方法
CN103379040A (zh) 一种高并发系统中控制并发数的装置和方法
CN110308985B (zh) 云专属服务器资源管理方法、装置、设备及存储介质
CN107135241A (zh) 一种业务处理方法和装置
Mishra et al. Price modification attack and protection scheme in smart grid
WO2020252902A1 (zh) 云服务器自检方法、装置、设备及计算机可读存储介质
KR20140014285A (ko) 트래픽 제어 방법과 트래픽 제어 장치
CN103150353A (zh) 微博信息的获取方法及装置
CN113568756A (zh) 一种密码资源协同动态调度方法和系统
CN104950205B (zh) 一种交流系统故障对直流线路影响的量化分析方法
CN104320551A (zh) 一种呼叫中心路由的业务处理方法及网络设备
JP2010152818A (ja) サーバシステム
CN111092827A (zh) 一种电力通信网资源分配方法及装置
CN107248959B (zh) 一种流量优化方法及装置
CN102523107B (zh) 均衡网管系统服务端和客户端运算压力的方法及装置
CN109857574A (zh) 一种低能耗集群环境下可超载负载感知的服务质量提升方法
JP5736072B2 (ja) 輻輳緩和の方法及び装置
CN105262626A (zh) 一种满足云中gis高性能服务需求的监控系统
CN102546704B (zh) 下一代网络中的云计算系统
CN205883314U (zh) 一种负载均衡器及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant