CN101459544A - 一种采集性能数据的方法及系统 - Google Patents
一种采集性能数据的方法及系统 Download PDFInfo
- Publication number
- CN101459544A CN101459544A CNA2009100760776A CN200910076077A CN101459544A CN 101459544 A CN101459544 A CN 101459544A CN A2009100760776 A CNA2009100760776 A CN A2009100760776A CN 200910076077 A CN200910076077 A CN 200910076077A CN 101459544 A CN101459544 A CN 101459544A
- Authority
- CN
- China
- Prior art keywords
- network equipment
- performance data
- collecting
- complement collecting
- complement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000000295 complement effect Effects 0.000 claims description 92
- 238000007689 inspection Methods 0.000 claims description 4
- 238000011084 recovery Methods 0.000 claims description 4
- 239000013589 supplement Substances 0.000 abstract 2
- 238000013480 data collection Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明公开了一种采集性能数据的方法，用于提高采集性能数据的效率。所述方法包括：通过轮询方式对各网络设备的性能数据进行正常采集；当对一个网络设备的采集失败时，记录该网络设备需要补采集的信息；在本周期采集结束时，根据记录的该网络设备需要补采集的信息，对需要补采集的网络设备进行性能数据的补采集。本发明还公开了一种用于实现所述方法的系统。
Description
技术领域
本发明涉及计算机及通信领域，特别是涉及网管系统中采集性能数据的方法及系统。
背景技术
现有的性能数据采集方法是实时对各网络设备进行性能数据采集，该方法的问题是网管系统与网络设备之间需要频繁的通信，占用较多的网络资源，影响整个网络的性能。
为解决上述问题，提出了周期性对各网络设备进行性能数据采集的技术方案，然而当采集性能数据过程中网络设备发生故障时，终止对该网络设备的采集，到下一周期到来时，再对该网络设备采集性能数据。大多数的故障都不是毁灭性的，通常网络设备自动重启便可恢复，对恢复后的网络设备的采集则需等到下一周期，造成本周期的遗漏采集，使得采集的性能数据不完整。
发明内容
本发明实施例提供一种采集性能数据的方法及系统，用于提高采集性能数据的效率。
一种采集性能数据的方法，包括：
通过轮询方式对各网络设备的性能数据进行正常采集；
当对一个网络设备的采集失败时，记录该网络设备需要补采集的信息；
在本周期采集结束时，根据记录的该网络设备需要补采集的信息，对需要补采集的网络设备进行性能数据的补采集。
一种网管系统，包括：
接口模块，用于通过轮询方式对各网络设备发送用于对性能数据进行采集的采集请求；
记录模块，用于当接口模块未收到一个网络设备的返回消息时，记录该网络设备需要补采集的信息；
控制模块，用于在本周期采集结束时，通过查询记录模块记录的该网络设备需要补采集的信息，确定对需要补采集的网络设备进行性能数据的补采集。
本发明实施例在每轮采集结束时都对本轮正常采集失败的网络设备进行补采集，以便及时采集到网络设备的性能数据，不需要等到下个采集周期的到来，采集到的性能数据更完整。
附图说明
图1为本发明实施例中采集性能数据的主要方法流程图；
图2为本发明实施例中采集性能数据的详细方法流程图；
图3为本发明实施例中考虑到时间冲突时采集性能数据的详细方法流程图；
图4为本发明实施例中网管系统的结构图。
具体实施方式
本发明实施例周期性对网络设备的性能数据进行采集，在对网络设备采集失败后主动进行补采集，不需要等到下个周期的到来，及时的采集到性能数据，提高采集性能数据的效率。本实施例中的性能数据是指反映网络设备性能的数据，包括CPU的利用率、内存的利用率和丢包率等。
参见图1，本实施例中采集性能数据的主要方法流程如下：
步骤101：通过轮询方式对各网络设备的性能数据进行采集。
步骤102：当对一个网络设备的采集失败时，记录该一个网络设备需要补采集。
步骤103：在本轮采集结束时，对需要补采集的网络设备进行性能数据的补采集。
上述流程中的每一步都可能有多种实现方式，下面通过两个实施例来详细介绍采集性能数据的方法。
参见图2，本实施例中采集性能数据的详细方法流程如下：
本实施例中性能数据以CPU的利用率为例进行说明。
步骤201：网管系统周期性的采用轮询方式向网络设备发送采集请求，采集请求包括表示CPU的利用率的标记。
步骤202：网管系统判断在预设的时间段内是否收到网络设备返回的消息，若是，则继续步骤203，否则继续步骤204。其中，在补采集过程中，网管系统若在预设的时间段内未收到网络设备返回的消息，则结束本轮流程，可进一步标记该网络设备的采集状态为失败。
步骤203：网管系统从返回消息中获得该网络设备的CPU的利用率的标记和该标记对应的值。可进一步标记该网络设备的采集状态为成功。
步骤204：网管系统记录该网络设备需要进行补采集。记录的方式有多种，如在补采集列表中增加该网络设备的标识，或者如将该网络设备的任务类型设置为补采集，其中，当不需要对网络设备进行补采集时，其任务类型为一般。
步骤205：网管系统判断是否有需要采集的网络设备，若有，则继续步骤201，否则继续步骤206。本实施例提供包括网络设备的标识的设备列表，网管系统可以通过该设备列表确定需要轮询的网络设备。
步骤206：网管系统判断是否有需要进行补采集的网络设备，若有，则对补采集设备执行步骤201，否则结束本轮采集。
补采集的时间可能与周期性轮询采集的起始时间发生冲突，以及在进行补采集后是否存在采集不完整的情况，考虑到这些问题，通过下面的实施例来详细介绍解决方案。
参见图3，本实施例中采集性能数据的详细方法流程如下：
步骤301：网管系统周期性的采用轮询方式向网络设备发送采集请求。
步骤302：网管系统判断在预设的时间段内是否收到网络设备返回的消息，若是，则继续步骤303，否则继续步骤304。其中，在补采集过程中，网管系统若在预设的时间段内未收到网络设备返回的消息，则可结束本轮流程，不再进行补采集，可进一步标记该网络设备的采集状态为失败。
步骤303：网管系统从返回消息中获得该网络设备的性能数据。可进一步标记该网络设备的采集状态为成功。
步骤304：网管系统记录该网络设备需要进行补采集。
步骤305：网管系统在完成本轮的正常采集时，判断当前时间是否为下轮采集的起始时间，若是，则开始下轮采集，重复步骤301，否则继续步骤306。
步骤306：网管系统判断是否有需要进行补采集的网络设备，若有，则继续步骤307，否则结束本轮采集。
步骤307：网管系统检查需要进行补采集的网络设备的设备状态是否为正常，若是，则对该网络设备进行补采集，继续步骤301，否则继续步骤308。
步骤308：网管系统收到网络设备的故障恢复事件，对该网络设备进行补采集并继续步骤301。
在步骤302中，网管系统可能通过接收多个返回消息来获得网络设备的性能数据。由于网络设备或数据传输等原因，存在网管系统漏收某个返回消息，或者返回消息中只携带了标记(如CPU的利用率的标记)未携带相应的值(如CPU的利用率)等情况，则需要对采集到的性能数据做完整性检查，检查每个网络设备返回的性能数据是否完整，以及检查所有的网络设备是否均有性能数据返回并且性能数据完整。则在预设的时间段内收到网络设备返回的消息后，网管系统对返回消息中的性能数据进行完整性检查，若完整，则继续步骤303，可进一步将采集到的性能数据保存至数据库，否则继续步骤304，可对不完整的部分进行补采集。
在发生丢包和发现采集的性能数据不完整时，均可能进行补采集，以及在进行补采集失败后还可能再进行补采集，来保证采集的完整性。但若补采集次数过多，则可能影响网络的性能。因此，本实施例为补采集设置次数门限(次数门限如2或3)，在进行补采集前，判断对该网络设备的补采集次数是否达到预设的次数门限，若达到，则不进行补采集，判断是否有其它网络设备需要进行补采集或者结束流程，若未达到，则对该网络设备进行补采集，并将该网络设备对应的补采集次数加1。
通过以上描述了解了采集性能数据的实现过程，对网络设备的性能数据采集可由网管系统来完成，下面对网管系统的功能和内部结构进行介绍。
参见图4，本实施例中网管系统包括接口模块401、记录模块402和控制模块403。
接口模块401用于接收或发送各种请求或消息，通过轮询方式对各网络设备发送用于对性能数据进行采集的采集请求。
记录模块402用于当接口模块未收到一个网络设备的返回消息时，记录该一个网络设备需要补采集。
控制模块403用于周期性发起对网络设备的采集，生成采集请求，在本轮采集结束时，通过查询记录模块，确定对需要补采集的网络设备进行性能数据的补采集。
控制模块403还用于在本轮采集结束时，检查需要补采集的网络设备的设备状态是否正常，在设备状态为正常的情况下，确定对网络设备进行性能数据的补采集。
接口模块401还用于在设备状态为故障的情况下，接收故障恢复事件；控制模块403还用于在设备状态由故障变为正常的情况下，确定对网络设备进行性能数据的补采集。
控制模块403还用于在对网络设备补采集结束时，检查采集到的性能数据的完整性，若完整，则确定采集成功，否则确定采集失败。
控制模块403还用于在进行性能数据的补采集之前，判断当前时间是否满足采集周期，在不满足的情况下，确定进行性能数据的补采集。
控制模块403还用于在进行性能数据的补采集之前，判断需要进行补采集的网络设备对应的补采集次数是否达到预设的次数门限，在未达到次数门限时，对该网络设备进行补采集，并更新该网络设备对应的补采集次数。
用于实现本发明实施例的软件可以存储于软盘、硬盘、光盘和闪存等存储介质。
本发明实施例在每轮采集结束时都对本轮正常采集失败的网络设备进行补采集，以便及时采集到网络设备的性能数据，不需要等到下个采集周期的到来，采集到的性能数据更完整。并且，当补采集的发生时间与采集周期的起始时间相同时，进行周期性的性能数据采集，在不发生冲突时进行补采集，这样既不影响周期性的采集又保证了采集的及时性和完整性。以及，本发明实施例在每轮的补采集完成时检查采集到的性能数据的完整性，在确定不完整时进行补采集，来进一步保证采集的性能数据的完整性。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若对本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (12)
1、一种采集性能数据的方法，其特征在于，包括：
通过轮询方式对各网络设备的性能数据进行正常采集；
当对一个网络设备的采集失败时，记录该网络设备需要补采集的信息；
在本周期采集结束时，根据记录的该网络设备需要补采集的信息，对需要补采集的网络设备进行性能数据的补采集。
2、如权利要求1所述的方法，其特征在于，在本周期采集结束时，对需要补采集的网络设备进行性能数据的补采集的步骤包括：在本周期正常采集结束时，检查需要补采集的网络设备的设备状态是否正常，在设备状态为正常的情况下，对网络设备进行性能数据的补采集。
3、如权利要求2所述的方法，其特征在于，在设备状态为故障的情况下，等待故障恢复事件，在设备状态由故障变为正常的情况下，对网络设备进行性能数据的补采集。
4、如权利要求1、2或3所述的方法，其特征在于，还包括步骤：在对网络设备正常采集结束时或者在对网络设备补采集结束时，检查采集到的性能数据的完整性，若完整，则采集成功，否则采集失败。
5、如权利要求1所述的方法，其特征在于，在进行性能数据的补采集之前，判断当前时间是否在下一个采集周期的时间范围内，在不满足的情况下，进行性能数据的补采集。
6、如权利要求1所述的方法，其特征在于，在进行性能数据的补采集之前，判断需要进行补采集的网络设备对应的补采集次数是否达到预设的次数门限，在未达到次数门限时，对该网络设备进行补采集，并更新该网络设备对应的补采集次数。
7、一种网管系统，其特征在于，包括：
接口模块，用于通过轮询方式对各网络设备发送用于对性能数据进行采集的采集请求；
记录模块，用于当接口模块未收到一个网络设备的返回消息时，记录该网络设备需要补采集的信息；
控制模块，用于在本周期采集结束时，通过查询记录模块记录的该网络设备需要补采集的信息，确定对需要补采集的网络设备进行性能数据的补采集。
8、如权利要求7所述的网管系统，其特征在于，控制模块还用于在本轮采集结束时，检查需要补采集的网络设备的设备状态是否正常，在设备状态为正常的情况下，确定对网络设备进行性能数据的补采集。
9、如权利要求8所述的网管系统，其特征在于，接口模块还用于在设备状态为故障的情况下，等待故障恢复事件；控制模块还用于在设备状态由故障变为正常的情况下，确定对网络设备进行性能数据的补采集。
10、如权利要求7、8或9所述的网管系统，其特征在于，控制模块还用于在对网络设备正常采集结束时或者在对网络设备补采集结束时，检查采集到的性能数据的完整性，若完整，则确定采集成功，否则确定采集失败。
11、如权利要求7所述的网管系统，其特征在于，控制模块还用于在进行性能数据的补采集之前，判断当前时间是否满足在下一个采集周期的时间范围内，在不满足的情况下，确定进行性能数据的补采集。
12、如权利要求7所述的网管系统，其特征在于，控制模块还用于在进行性能数据的补采集之前，判断需要进行补采集的网络设备对应的补采集次数是否达到预设的次数门限，在未达到次数门限时，对该网络设备进行补采集，并更新该网络设备对应的补采集次数。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2009100760776A CN101459544B (zh) | 2009-01-05 | 2009-01-05 | 一种采集性能数据的方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2009100760776A CN101459544B (zh) | 2009-01-05 | 2009-01-05 | 一种采集性能数据的方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101459544A true CN101459544A (zh) | 2009-06-17 |
| CN101459544B CN101459544B (zh) | 2012-08-08 |
Family
ID=40770187
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2009100760776A Expired - Fee Related CN101459544B (zh) | 2009-01-05 | 2009-01-05 | 一种采集性能数据的方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101459544B (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103095492A (zh) * | 2012-12-28 | 2013-05-08 | 中兴通讯股份有限公司 | 一种数据采集方法及装置 |
| CN104598551A (zh) * | 2014-12-31 | 2015-05-06 | 华为软件技术有限公司 | 一种数据统计方法及装置 |
| WO2015176383A1 (zh) * | 2014-05-20 | 2015-11-26 | 中兴通讯股份有限公司 | 一种采集数据的方法、装置、系统及终端 |
| CN105357060A (zh) * | 2015-12-09 | 2016-02-24 | 瑞斯康达科技发展股份有限公司 | 一种获取网络设备性能数据的方法、装置和系统 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114244478A (zh) * | 2021-12-16 | 2022-03-25 | 广东博立科技有限公司 | 数据采集仪智能补传数据的方法 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100488109C (zh) * | 2004-09-08 | 2009-05-13 | 中兴通讯股份有限公司 | 一种电信网管中性能数据补采系统及其方法 |
| CN1901568B (zh) * | 2005-07-22 | 2010-09-01 | 中兴通讯股份有限公司 | 一种网管系统中实现历史性能采集的方法 |
| KR100791297B1 (ko) * | 2006-04-06 | 2008-01-04 | 삼성전자주식회사 | 이벤트 정보를 관리하는 장치, 방법 및 시스템 |
| CN101192992B (zh) * | 2007-01-10 | 2011-03-16 | 中兴通讯股份有限公司 | 用于电信网管系统的性能数据补充采集系统及方法 |
-
2009
- 2009-01-05 CN CN2009100760776A patent/CN101459544B/zh not_active Expired - Fee Related
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103095492A (zh) * | 2012-12-28 | 2013-05-08 | 中兴通讯股份有限公司 | 一种数据采集方法及装置 |
| WO2015176383A1 (zh) * | 2014-05-20 | 2015-11-26 | 中兴通讯股份有限公司 | 一种采集数据的方法、装置、系统及终端 |
| CN104598551A (zh) * | 2014-12-31 | 2015-05-06 | 华为软件技术有限公司 | 一种数据统计方法及装置 |
| CN104598551B (zh) * | 2014-12-31 | 2018-06-05 | 华为软件技术有限公司 | 一种数据统计方法及装置 |
| CN105357060A (zh) * | 2015-12-09 | 2016-02-24 | 瑞斯康达科技发展股份有限公司 | 一种获取网络设备性能数据的方法、装置和系统 |
| CN105357060B (zh) * | 2015-12-09 | 2018-09-28 | 瑞斯康达科技发展股份有限公司 | 一种获取网络设备性能数据的方法、装置和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101459544B (zh) | 2012-08-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103051681B (zh) | 一种面向分布式文件系统的协作式日志系统 | |
| US20120174112A1 (en) | Application resource switchover systems and methods | |
| CN102088490B (zh) | 数据存储方法、设备和系统 | |
| EP1703395A2 (en) | Multiprocessor system with a management processor | |
| CN101459544B (zh) | 一种采集性能数据的方法及系统 | |
| CN102981931A (zh) | 虚拟机备份方法及装置 | |
| CN102394914A (zh) | 集群脑裂处理方法和装置 | |
| CN105824846B (zh) | 数据迁移方法及装置 | |
| CN102043686A (zh) | 一种内存数据库的容灾方法、备用服务器及系统 | |
| CN103152390A (zh) | 分布式存储系统的节点配置方法、装置、节点及系统 | |
| CN105653345A (zh) | 用于支持对数据的非易失性随机访问的方法和设备 | |
| CN104346373A (zh) | 分区日志队列同步管理方法及设备 | |
| CN111314174A (zh) | 基于区块链和sdn边缘计算网络系统的网络拨测方法及装置 | |
| CN109086168A (zh) | 一种利用硬件备份固态硬盘写速度的方法及其系统 | |
| WO2013127147A1 (zh) | 文件同步系统及方法 | |
| CN102457400B (zh) | 一种防止磁盘镜像资源发生脑裂的方法 | |
| CN103532870A (zh) | 一种更新Web应用集群的方法和装置 | |
| CN114610567A (zh) | 容器监控方法、网络设备及存储介质 | |
| CN112527559A (zh) | 一种物联网数据备份方法及装置 | |
| US7421613B2 (en) | Method and system for managing of job execution | |
| CN110515757A (zh) | 分布式存储系统的信息处理方法、装置、服务器、介质 | |
| CN102339305A (zh) | 基于偏序关系日志的数据库集群故障恢复方法 | |
| CN105159790A (zh) | 一种数据抢救方法及文件服务器 | |
| US20230025081A1 (en) | Model training method, failure determining method, electronic device, and program product | |
| CN102202076B (zh) | 一种数据传输方法和装置及数据发送、接收方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| C53 | Correction of patent of invention or patent application | ||
| C56 | Change in the name or address of the patentee |
Owner name: ZTE ITS LTD. Free format text: FORMER NAME: ZHONGXING INTELLIGENT TRANSPORT SYSTEM BEIJING CO., LTD. |
|
| CB03 | Change of inventor or designer information |
Inventor after: Liu Haifeng Inventor after: Deng Hua Inventor after: Huang Jianhua Inventor after: Li Xiang Inventor before: Liu Haifeng Inventor before: Jia Lin Inventor before: Deng Hua Inventor before: You Yanqing Inventor before: Huang Jianhua Inventor before: Li Xiang |
|
| COR | Change of bibliographic data |
Free format text: CORRECT: INVENTOR; FROM: LIU HAIFENG JIA LIN DENG HUA YOU YANQING HUANG JIANHUA LI XIANG TO: LIU HAIFENG DENG HUA HUANG JIANHUA LI XIANG |
|
| CP01 | Change in the name or title of a patent holder |
Address after: 214135 Jiangsu Province, Wuxi District of Taihu International Science Park Road No. 200 Chinese Linghu Sensor Network International Innovation Park building A Patentee after: ZTE ITS LTD. Address before: 214135 Jiangsu Province, Wuxi District of Taihu International Science Park Road No. 200 Chinese Linghu Sensor Network International Innovation Park building A Patentee before: Zhongxing Intelligent Transport (Wuxi) Co.,Ltd. |
|
| C56 | Change in the name or address of the patentee | ||
| CP03 | Change of name, title or address |
Address after: 214135 Jiangsu province Wuxi District Road No. 200 Chinese Linghu Sensor Network International Innovation Zone A building 6 floor Patentee after: ZTE ITS CO.,LTD. Address before: 214135 Jiangsu Province, Wuxi District of Taihu International Science Park Road No. 200 Chinese Linghu Sensor Network International Innovation Park building A Patentee before: ZTE ITS LTD. |
|
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120808 Termination date: 20220105 |