CN116166428B - 高并发高流量系统负载资源处理方法 - Google Patents
高并发高流量系统负载资源处理方法 Download PDFInfo
- Publication number
- CN116166428B CN116166428B CN202310016312.0A CN202310016312A CN116166428B CN 116166428 B CN116166428 B CN 116166428B CN 202310016312 A CN202310016312 A CN 202310016312A CN 116166428 B CN116166428 B CN 116166428B
- Authority
- CN
- China
- Prior art keywords
- module
- processing
- data
- index
- concurrency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 9
- 238000000034 method Methods 0.000 claims abstract description 17
- 238000009960 carding Methods 0.000 claims abstract description 7
- 238000000926 separation method Methods 0.000 claims description 9
- 230000010365 information processing Effects 0.000 claims description 8
- 230000001960 triggered effect Effects 0.000 claims description 4
- 239000002699 waste material Substances 0.000 abstract description 4
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
- G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了高并发高流量系统负载资源处理方法，包括以下步骤：步骤一，获取；步骤二，指标限定；步骤三，数据处理；步骤四，梳理；步骤五，分离；步骤六，整理；步骤七，扩展；其中在上述步骤一中，系统通过主选服务模块对高并发高流量的数据资源进行服务，且服务的过程中通过获取模块获取每个服务节点的运行指标，并且将获取的运行指标通过设置的统计模块进行统计处理；该高并发高流量系统负载资源处理方法，通过对数据指标进行限定处理，且设置有备份服务模块和报警通知模块，便于精准的根据高并发高流量数据资源对服务器进行扩展处理，避免了服务器资源的浪费，从而降低了对高并发高流量系统负载资源处理的费用。
Description
技术领域
本发明涉及系统负载资源处理技术领域，具体为高并发高流量系统负载资源处理方法。
背景技术
对于一个高并发高流量的网站来说,任何一个环节的瓶颈都会造成网站性能的下降,影响用户体验,进而造成巨大的经济损失，因此需要对高并发高流量系统负载资源进行处理，但在对高并发高流量系统负载资源进行处理的过程中，通常采用扩展服务器的方式进行处理，但直接对服务器进行扩展，不利于根据实际的高并发高流量的数据指标进行扩展，易导致服务器的资源浪费。
发明内容
本发明的目的在于提供高并发高流量系统负载资源处理方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：高并发高流量系统负载资源处理方法，包括以下步骤：步骤一，获取；步骤二，指标限定；步骤三，数据处理；步骤四，梳理；步骤五，分离；步骤六，整理；步骤七，扩展；
其中在上述步骤一中，系统通过主选服务模块对高并发高流量的数据资源进行服务，且服务的过程中通过获取模块获取每个服务节点的运行指标，并且将获取的运行指标通过设置的统计模块进行统计处理；
其中在上述步骤二中，当得到统计后的运行指标后传输给指标限定模块，同时指标限定模块可根据实际的需求进行更改，当服务节点的运行指标达到指定的限定运行指标后，通过指标限定模块启动触发模块的运行，并且在限定的运行指标内的数据资源通过设置的正常处理模块进行正常的资源处理；
其中在上述步骤三中，当实际运行指标超过限定的运行指标后，通过触发模块的工作分别触发备选服务模块和备选服务工作时间记录模块，且备选服务模块工作后，即可对超过限定指标多余的资源数据进行处理，且通过设置的信号接收模块完成对超过限定指标多余的资源数据进行接收；
其中在上述步骤四中，当完成对超过限定指标多余的资源数据的接收工作后，通过服务工作模块对资源数据进行处理，且服务工作模块是利用备用服务器对资源数据进行梳理工作，然后通过设置的信息分离模块对梳理后的资源数据进行数据的分离工作；
其中在上述步骤五中，当步骤四完成对数据的分离工作后，即可将资源数据分离成文字信息和其他信息；
其中在上述步骤六中，将存储在文字信息模块和其他信息模块中的数据资源分别通过文字信息处理模块和其他信息处理模块进行数据的处理工作，并且处理后的数据和经过正常处理模块处理后的数据一同经过结果整理模块进行整理处理；
其中在上述步骤七中，当备选服务模块开始工作时，即可通过设置的备选服务工作时间记录模块对备选服务模块的工作时间进行记录处理，同时利用设置的时间限定模块可设置备选服务模块的预警工作时间，且预警工作时间可人为的根据实际需求进行调整，当通过时间限定模块设定的预警时间达到后，通过设置的报警通知模块进行报警通知处理，当预警后，可利用设置的服务器增加模块对服务器进行增加处理，且增加后的服务器通过扩展模块对服务器进行扩展即可。
优选的，所述步骤一中，每个服务节点的统计结果均与服务节点进行编码处理，从而便于将服务节点与统计结果进行一一对应。
优选的，所述步骤二中，正常处理模块包括数据处理模块和扩展模块，数据处理模块用于对指标限定内的资源数据进行处理，而扩展模块用于对服务器的扩展，以便增加数据处理模块的处理运行速度。
优选的，所述步骤五中，文字信息存放在文字信息模块中，其他信息存放在其他信息模块中，同时其他信息包括除文字信息外的所有信息。
优选的，所述步骤七中，时间限定模块在设置预警工作时间的过程中，可设置当日量预警工作时间、当周量预警工作时间、当月量工作时间以及自定义时间段预警工作时间。
优选的，所述步骤七中，报警通知的方式包括手机终端提醒以及pc端提醒。
与现有技术相比，本发明的有益效果是：该高并发高流量系统负载资源处理方法，通过对数据指标进行限定处理，且设置有备份服务模块和报警通知模块，便于精准的根据高并发高流量数据资源对服务器进行扩展处理，避免了服务器资源的浪费，从而降低了对高并发高流量系统负载资源处理的费用，同时设置有触发模块，便于根据运行指标判断是否触发备选服务模块的工作，便于根据不同的实际情况进行处理，从而提高了该发明的实用性。
附图说明
图1为本发明的方法流程图；
图2为本发明中的模块系统流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1-2，本发明提供的一种实施例：高并发高流量系统负载资源处理方法，包括以下步骤：步骤一，获取；步骤二，指标限定；步骤三，数据处理；步骤四，梳理；步骤五，分离；步骤六，整理；步骤七，扩展；
其中在上述步骤一中，系统通过主选服务模块对高并发高流量的数据资源进行服务，且服务的过程中通过获取模块获取每个服务节点的运行指标，并且将获取的运行指标通过设置的统计模块进行统计处理，且每个服务节点的统计结果均与服务节点进行编码处理，从而便于将服务节点与统计结果进行一一对应；
其中在上述步骤二中，当得到统计后的运行指标后传输给指标限定模块，同时指标限定模块可根据实际的需求进行更改，当服务节点的运行指标达到指定的限定运行指标后，通过指标限定模块启动触发模块的运行，并且在限定的运行指标内的数据资源通过设置的正常处理模块进行正常的资源处理，且正常处理模块包括数据处理模块和扩展模块，数据处理模块用于对指标限定内的资源数据进行处理，而扩展模块用于对服务器的扩展，以便增加数据处理模块的处理运行速度；
其中在上述步骤三中，当实际运行指标超过限定的运行指标后，通过触发模块的工作分别触发备选服务模块和备选服务工作时间记录模块，且备选服务模块工作后，即可对超过限定指标多余的资源数据进行处理，且通过设置的信号接收模块完成对超过限定指标多余的资源数据进行接收；
其中在上述步骤四中，当完成对超过限定指标多余的资源数据的接收工作后，通过服务工作模块对资源数据进行处理，且服务工作模块是利用备用服务器对资源数据进行梳理工作，然后通过设置的信息分离模块对梳理后的资源数据进行数据的分离工作；
其中在上述步骤五中，当步骤四完成对数据的分离工作后，即可将资源数据分离成文字信息和其他信息，且文字信息存放在文字信息模块中，其他信息存放在其他信息模块中，同时其他信息包括除文字信息外的所有信息；
其中在上述步骤六中，将存储在文字信息模块和其他信息模块中的数据资源分别通过文字信息处理模块和其他信息处理模块进行数据的处理工作，并且处理后的数据和经过正常处理模块处理后的数据一同经过结果整理模块进行整理处理；
其中在上述步骤七中，当备选服务模块开始工作时，即可通过设置的备选服务工作时间记录模块对备选服务模块的工作时间进行记录处理，同时利用设置的时间限定模块可设置备选服务模块的预警工作时间，且预警工作时间可人为的根据实际需求进行调整，且时间限定模块在设置预警工作时间的过程中，可设置当日量预警工作时间、当周量预警工作时间、当月量工作时间以及自定义时间段预警工作时间，当通过时间限定模块设定的预警时间达到后，通过设置的报警通知模块进行报警通知处理，且报警通知的方式包括手机终端提醒以及pc端提醒，当预警后，可利用设置的服务器增加模块对服务器进行增加处理，且增加后的服务器通过扩展模块对服务器进行扩展即可。
基于上述，本发明的优点在于，该发明使用时，通过设置的触发模块，可当限定指标超过设置量后，触发备选服务模块和备选服务工作时间记录模块的工作，从而触发文字信息处理模块、其他信息处理模块和服务器增加模块的工作，便于根据实际的需求增加相对于的服务器，从而避免了服务器资源的浪费。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
Claims (6)
1.高并发高流量系统负载资源处理方法，包括以下步骤：步骤一，获取；步骤二，指标限定；步骤三，数据处理；步骤四，梳理；步骤五，分离；步骤六，整理；步骤七，扩展；其特征在于：
其中在上述步骤一中，系统通过主选服务模块对高并发高流量的数据资源进行服务，且服务的过程中通过获取模块获取每个服务节点的运行指标，并且将获取的运行指标通过设置的统计模块进行统计处理；
其中在上述步骤二中，当得到统计后的运行指标后传输给指标限定模块，同时指标限定模块可根据实际的需求进行更改，当服务节点的运行指标达到指定的限定运行指标后，通过指标限定模块启动触发模块的运行，并且在限定的运行指标内的数据资源通过设置的正常处理模块进行正常的资源处理；
其中在上述步骤三中，当实际运行指标超过限定的运行指标后，通过触发模块的工作分别触发备选服务模块和备选服务工作时间记录模块，且备选服务模块工作后，即可对超过限定指标多余的资源数据进行处理，且通过设置的信号接收模块完成对超过限定指标多余的资源数据进行接收；
其中在上述步骤四中，当完成对超过限定指标多余的资源数据的接收工作后，通过服务工作模块对资源数据进行处理，且服务工作模块是利用备用服务器对资源数据进行梳理工作，然后通过设置的信息分离模块对梳理后的资源数据进行数据的分离工作；
其中在上述步骤五中，当步骤四完成对数据的分离工作后，即可将资源数据分离成文字信息和其他信息；
其中在上述步骤六中，将存储在文字信息模块和其他信息模块中的数据资源分别通过文字信息处理模块和其他信息处理模块进行数据的处理工作，并且处理后的数据和经过正常处理模块处理后的数据一同经过结果整理模块进行整理处理；
其中在上述步骤七中，当备选服务模块开始工作时，即可通过设置的备选服务工作时间记录模块对备选服务模块的工作时间进行记录处理，同时利用设置的时间限定模块可设置备选服务模块的预警工作时间，且预警工作时间可人为的根据实际需求进行调整，当通过时间限定模块设定的预警时间达到后，通过设置的报警通知模块进行报警通知处理，当预警后，可利用设置的服务器增加模块对服务器进行增加处理，且增加后的服务器通过扩展模块对服务器进行扩展即可。
2.根据权利要求1所述的高并发高流量系统负载资源处理方法，其特征在于：所述步骤一中，每个服务节点的统计结果均与服务节点进行编码处理，从而便于将服务节点与统计结果进行一一对应。
3.根据权利要求1所述的高并发高流量系统负载资源处理方法，其特征在于：所述步骤二中，正常处理模块包括数据处理模块和扩展模块，数据处理模块用于对指标限定内的资源数据进行处理，而扩展模块用于对服务器的扩展，以便增加数据处理模块的处理运行速度。
4.根据权利要求1所述的高并发高流量系统负载资源处理方法，其特征在于：所述步骤五中，文字信息存放在文字信息模块中，其他信息存放在其他信息模块中，同时其他信息包括除文字信息外的所有信息。
5.根据权利要求1所述的高并发高流量系统负载资源处理方法，其特征在于：所述步骤七中，时间限定模块在设置预警工作时间的过程中，可设置当日量预警工作时间、当周量预警工作时间、当月量工作时间以及自定义时间段预警工作时间。
6.根据权利要求1所述的高并发高流量系统负载资源处理方法，其特征在于：所述步骤七中，报警通知的方式包括手机终端提醒以及pc端提醒。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310016312.0A CN116166428B (zh) | 2023-01-06 | 2023-01-06 | 高并发高流量系统负载资源处理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310016312.0A CN116166428B (zh) | 2023-01-06 | 2023-01-06 | 高并发高流量系统负载资源处理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116166428A CN116166428A (zh) | 2023-05-26 |
| CN116166428B true CN116166428B (zh) | 2023-12-12 |
Family
ID=86419348
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310016312.0A Active CN116166428B (zh) | 2023-01-06 | 2023-01-06 | 高并发高流量系统负载资源处理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116166428B (zh) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107104820A (zh) * | 2017-03-23 | 2017-08-29 | 国网江苏省电力公司信息通信分公司 | 基于f5服务器节点的动态扩容日常运维策略 |
| CN107145393A (zh) * | 2017-04-27 | 2017-09-08 | 努比亚技术有限公司 | 一种负载调整方法、设备及计算机可读存储介质 |
| CN107204870A (zh) * | 2016-11-14 | 2017-09-26 | 平安科技（深圳）有限公司 | 资源扩展方法和装置 |
| KR102033489B1 (ko) * | 2018-11-05 | 2019-10-17 | 주식회사 엘지씨엔에스 | 서버 클러스터 관리 방법 및 서버 |
| CN112887169A (zh) * | 2021-01-26 | 2021-06-01 | 广州欢网科技有限责任公司 | 服务器自动扩容方法、装置及服务器集群 |
-
2023
- 2023-01-06 CN CN202310016312.0A patent/CN116166428B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107204870A (zh) * | 2016-11-14 | 2017-09-26 | 平安科技（深圳）有限公司 | 资源扩展方法和装置 |
| CN107104820A (zh) * | 2017-03-23 | 2017-08-29 | 国网江苏省电力公司信息通信分公司 | 基于f5服务器节点的动态扩容日常运维策略 |
| CN107145393A (zh) * | 2017-04-27 | 2017-09-08 | 努比亚技术有限公司 | 一种负载调整方法、设备及计算机可读存储介质 |
| KR102033489B1 (ko) * | 2018-11-05 | 2019-10-17 | 주식회사 엘지씨엔에스 | 서버 클러스터 관리 방법 및 서버 |
| CN112887169A (zh) * | 2021-01-26 | 2021-06-01 | 广州欢网科技有限责任公司 | 服务器自动扩容方法、装置及服务器集群 |
Non-Patent Citations (4)
| Title |
|---|
| An Incrementally Scalable and Cost-Efficient Interconnection Structure for Data Centers;Junjie Xie;IEEE Transactions on Parallel and Distributed Systems;第28卷(第6期);全文 * |
| 一种Dubbo监控中心的弹性负载均衡方案;曹郁;朱志祥;;计算机与数字工程(07);全文 * |
| 云扩容的数据灾备关键技术研究;雷明月;中国优秀硕士论文电子期刊网;全文 * |
| 基于VMware的虚拟化技术在海工平台中控系统中的应用;江川;郑佳;;机电设备(04);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116166428A (zh) | 2023-05-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105159964A (zh) | 一种日志监控方法及系统 | |
| CN110535944B (zh) | 用户活跃数据处理的方法及装置 | |
| CN109039817B (zh) | 一种用于流量监控的信息处理方法、装置、设备及介质 | |
| CN110875885B (zh) | 消息处理方法、服务器、终端、系统及存储介质 | |
| CN102118293A (zh) | 一种通讯报文压缩存储方法 | |
| CN113141410B (zh) | 动态调节的qps控制方法、系统、设备及存储介质 | |
| CN114138861A (zh) | 多源异构数据处理方法、装置及系统 | |
| CN111143158A (zh) | 一种监控数据实时存储方法、系统、电子设备及存储介质 | |
| CN116166428B (zh) | 高并发高流量系统负载资源处理方法 | |
| CN113190516B (zh) | 数据同步监控方法及装置 | |
| CN111831954B (zh) | 内容数据更新方法、装置、计算机设备及存储介质 | |
| CN103530233A (zh) | 移动浏览器的自动化测试方法、测试服务器及系统 | |
| CN101854369A (zh) | 远程信息通知系统和方法 | |
| CN115033646B (zh) | 一种基于Flink&Doris构建实时数仓系统的方法 | |
| CN115033927A (zh) | 一种检测数据完整性的方法、装置、设备及介质 | |
| CN113282608A (zh) | 一种基于列数据库的智能交通数据分析和存储方法 | |
| CN114022279A (zh) | 一种业务数据纠错方法、装置、设备及可读存储介质 | |
| CN111813833A (zh) | 一种实时二度通联关系数据挖掘的方法 | |
| CN115514678B (zh) | 一种互联网金融业务的连续性监控方法 | |
| CN103188643B (zh) | 基于双中心容灾计费系统的计费方法、装置及其系统 | |
| CN113472469B (zh) | 一种数据同步方法、装置、设备及存储介质 | |
| CN117951144A (zh) | 数据同步校验方法及装置、电子设备、存储介质 | |
| CN108763426B (zh) | 快速实现海量数据准实时全量统计的方法、装置及系统 | |
| CN114090691A (zh) | 一种区块链节点数据存储、读取方法及存储系统 | |
| CN114020574A (zh) | 高并发场景分布式微服务链路追踪信息采集优化方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |