CN101227330B - 一种历史性能数据采集方法和系统 - Google Patents
一种历史性能数据采集方法和系统 Download PDFInfo
- Publication number
- CN101227330B CN101227330B CN2008100096545A CN200810009654A CN101227330B CN 101227330 B CN101227330 B CN 101227330B CN 2008100096545 A CN2008100096545 A CN 2008100096545A CN 200810009654 A CN200810009654 A CN 200810009654A CN 101227330 B CN101227330 B CN 101227330B
- Authority
- CN
- China
- Prior art keywords
- performance data
- task
- network element
- historical performance
- default
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000013480 data collection Methods 0.000 title claims description 16
- 238000005259 measurement Methods 0.000 claims abstract description 72
- 238000012544 monitoring process Methods 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 2
- 238000012216 screening Methods 0.000 claims description 2
- 230000000977 initiatory effect Effects 0.000 claims 1
- 230000008569 process Effects 0.000 abstract description 13
- 238000005070 sampling Methods 0.000 abstract 2
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000000737 periodic effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 238000011084 recovery Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明提出一种历史性能数据采集方法和系统，由配置管理模块保存网元上所配置的管理对象信息，通过新增的后台缺省任务管理器读取所述配置管理对象信息，为支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧。当网元侧准备好所述数据后，由历史数据采集引擎采集历史性能数据并进行保存。本发明改善了历史性能数据采集的可用性、可靠性，保证了数据采集过程的连续性和稳定性。
Description
技术领域
本发明涉及电信网络中采集网元侧历史性能数据的方法和系统。
背景技术
在电信管理网络中，历史性能数据的采集经常采用如图1所示的网管系统实现，该网管系统中包括性能管理模块，性能管理模块进一步包括：测量任务管理器和历史数据采集引擎，由测量任务管理器根据预设的任务定义解析构造出测量任务的操作命令并下发给相应的网元，由网元按照测量任务的要求执行历史性能数据采集，并在满足性能数据上报条件时主动发送性能数据通告，由历史数据采集引擎根据该通告到网元上获取采集好的性能数据。当然，历史数据采集引擎也可以采用定期轮询机制从网元上获取历史性能数据。当测量任务中包括其他内容时，比如任务挂起、恢复、删除以及任务属性的修改等，其执行过程也遵循上述的实现流程。
但是上述实现流程有如下缺点：
历史性能数据采集操作比较复杂，从而降低了功能可用性。因为测量任务中所涉及的被监测对象与当前已经配置的管理对象(如单板，应用组件等)有关，而现代高可靠性的通信系统，往往采用负载均衡或冗余备份策略，如果只关心单个或某几个管理对象的性能状况，往往没有实际的意义。比如网元下同一类型的所有单板或服务组件共同分担业务逻辑处理，只监测部分单板/服务组件的性能参数，很难进行准确的性能状况趋势分析。所以，在同一类型的配置管理对象发生增加/删除时，为了把握整体性能状况需要调整测量任务中的被监测对象属性。而现有技术中缺少对管理对象的监管以及动态更新测量任务的机制。
测量任务操作请求与网元通讯紧密耦合的实现方式，存在较多不可靠的因素。测量任务的操作请求包括任务启停、属性更改等，直接涉及与网元的通讯。而在实际的工程系统中，与网元的通讯能否成功受很多因素的制约，如网络状况、网元自身的当前工作状态，因此，测量任务操作请求的成功执行并没有一定的保障。如果网管系统单方面追求可用性，优先处理任务操作请求而不管对网元的命令执行结果如何，这样又会带来与网元侧测量任务不同步的问题。
网元侧历史数据采集过程容易出现不连续、不稳定的现象。由于测量任务操作请求与网元通讯紧密耦合，经常会出现网元测量任务不同步的问题，从而会导致采集到的性能数据时断时续。
发明内容
本发明要解决的技术问题是提出一种历史性能数据采集方法和系统，改善历史性能数据采集的可用性、可靠性以及保证数据采集过程的连续性和稳定性。
为了解决上述问题，本发明提出了一种历史性能数据采集方法，通过网管系统的配置管理模块、历史数据采集引擎和后台缺省任务管理器采集历史性能数据，该方法包括：
由后台缺省任务管理器从配置管理模块查询到网元上所配置的管理对象信息，对支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
网元侧根据所述缺省测量任务执行历史性能数据的采集，由历史数据采集引擎获取所述历史性能数据并进行保存。
进一步，上述历史性能数据采集方法还可以具有以下特点，由所述后台缺省任务管理器监听所述配置管理模块发出的管理对象通告，并根据该通告中的信息对缺省测量任务中的被监测对象进行调整。
进一步，上述历史性能数据采集方法还可以具有以下特点，通过所述后台缺省任务管理器启动任务信息同步操作，以便将任务信息同步到网元侧。
进一步，上述历史性能数据采集方法还可以具有以下特点，由所述历史数据采集引擎对历史性能数据进行筛选和过滤，保存符合预设测量任务属性的历史性能数据。
一种历史性能数据采集系统，包括：
配置管理模块，用于保存网元上所配置的管理对象信息，并提供给后台缺省任务管理器；
后台缺省任务管理器，用于查询到网元上所配置的管理对象信息，为支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
历史数据采集引擎，用于将网元侧根据缺省测量任务所采集到的历史性能数据进行保存。
进一步，上述历史性能数据采集系统还可以具有以下特点，所述后台缺省任务管理器还监听所述配置管理模块发出的管理对象通告，并根据该通告中的信息对缺省测量任务中的被监测对象进行调整。
进一步，上述历史性能数据采集系统还可以具有以下特点，所述后台缺省任务管理器还启动任务信息同步操作，以便将任务信息同步到网元侧。
进一步，上述历史性能数据采集系统还可以具有以下特点，所述历史性能数据采集引擎还对历史性能数据进行筛选和过滤，保存符合预设测量任务属性的历史性能数据。
与现有技术相比，本发明通过增加后台缺省任务管理器，自动地按照网元上所配置的管理对象生成后台缺省的性能测量任务，并动态维护和管理这些任务，与网元及时通信以保证同步测量任务的信息。因此，本发明改善了历史性能数据采集的可用性、可靠性，保证了数据采集过程的连续性和稳定性。
附图说明
图1是现有技术中历史性能数据采集系统框图；
图2是本发明实施例中历史性能数据采集系统框图；
图3是本发明另一实施例中历史性能数据采集系统框图；
图4是本发明另一实施例中历史性能数据采集系统框图；
图5是本发明另一实施例中历史性能数据采集方法流程图。
具体实施方式
本发明在网管系统的性能管理模块中引入了后台缺省任务管理器，该后台缺省任务管理器自动生成和维护后台缺省的性能测量任务，并且及时地、自动地将其同步到网元侧，从而实现对被监测对象的历史性能数据采集。因该后台缺省任务管理器独立于用户操作的测量任务管理器，不涉及与实际网元的通信交互，因此可以有效地改善测量任务管理功能的可靠性、可用性并保证历史性能数据采集过程的连续性和稳定性。
下面根据附图和较佳实施例详细说明本发明。
图2示出了本发明实施例中基于后台缺省任务的历史性能数据采集系统框图，所述系统包括：配置管理模块和性能管理模块，所述配置管理模块包括：管理对象模块，所述性能管理模块包括：后台缺省任务管理器以及历史数据采集引擎。其中，
管理对象模块，用于保存网元上所配置的管理对象信息，并提供给后台缺省任务管理器；
后台缺省任务管理器，用于在网管系统启动后，从管理对象模块查询到网元上所配置的管理对象信息，如配置的单板信息，应用组件信息等，对支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
历史数据采集引擎，用于在网元根据缺省测量任务准备好历史性能数据时，根据网元发送的通告获取性能数据，或者也可以由历史数据采集引擎采用定期轮询机制从网元上获取历史性能数据，然后对所述数据进行处理和分析并保存到数据库中。
所述测量任务的属性包括：被监测对象、测量起始时间、测量终止时间、测量粒度周期以及性能参数类型等，其中，被监测对象：包含所有被管理网元下同类型的单板、应用组件等；测量起始时间：无穷早，表示一直执行；测量终止时间：无穷晚，表示永远不停止；测量粒度周期：后台缺省测量任务采用最小的基本测量粒度周期(例如15分钟)；以及测量的性能参数类型，该类型配置管理对象所支持的所有性能参数类型，如CPU利用率、内存使用率、业务数据流码率、丢包率等。
图3示出本发明另一实施例，所述后台缺省任务管理器还时刻监听配置管理模块所发出的管理对象通告，对缺省测量任务中的被监测对象作出相应的调整：当收到管理对象创建通告后，后台缺省任务管理器将增加测量任务中的被监测对象；当收到管理对象删除通告后，后台缺省任务管理器将减少任务中的被监测对象；当收到管理对象变更通告后，后台缺省任务管理器将更新任务中的被监测对象。所述后台缺省任务管理器在缺省任务被调整后，通过重置与该网元的任务同步标志，以便将调整后的任务信息同步到网元侧。
进一步地，所述后台缺省任务管理器还可以在下述情况下启动任务信息同步的操作，即通过监听网管系统中相关网元的管理对象状态改变通告，在接收到通告表明网元的通讯状态由中断变为恢复后进入任务同步过程，或者在网管系统启动后，激活其内部调度定时器，每隔一定时间周期进入任务同步过程。
图4示出本发明另一实施例，所述性能管理模块还包括：前台测量任务管理器，用于保存预设测量任务的属性信息。该前台测量任务管理器可以支持多种测量粒度周期，但是约定所支持的测量粒度周期都是前述后台缺省测量任务的基本粒度周期的整数倍。所述历史性能数据采集引擎还查询前台测量任务管理器，根据其中保存的测量任务属性，对每条性能数据进行筛选和过滤，将符合要求的所述数据保存到数据库，其他的数据予以丢弃。其中，所进行的筛选和过滤操作可以根据如下判断准则：检查性能数据所属的被监测对象是否被选择；检查性能数据的采集时刻是否在任务起止时间段内；检查性能数据的采集时刻是否满足粒度要求；检查性能数据的参数类型是否已在任务中定义等。
根据上述系统，本发明提出了一种历史性能数据采集方法，通过网管系统的配置管理模块、历史数据采集引擎和后台缺省任务管理器采集历史性能数据，该方法如图5所示，包括以下步骤：
步骤11，由后台缺省任务管理器从配置管理模块查询到网元上所配置的管理对象信息，对支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
步骤12，网元侧根据所述缺省测量任务执行历史性能数据的采集，由历史数据采集引擎获取所述历史性能数据并进行保存。
当性能数据准备好后网元侧向历史数据采集引擎发送通告，由历史数据采集引擎获取性能数据，或者也可以由历史数据采集引擎采用定期轮询机制从网元上获取历史性能数据。
根据本发明另一实施例，步骤11中还包括：由所述后台缺省任务管理器监听所述配置管理模块发出的管理对象通告，并根据该通告中的信息对缺省测量任务中的被监测对象作出相应调整。进一步地，在缺省测量任务被调整后，通过所述后台缺省任务管理器重置与该网元的任务同步标志，进入任务同步过程以便将调整后的任务信息同步到网元侧。
进一步地，还可以在下述情况下启动任务信息同步的操作，即通过监听网管系统中相关网元的管理对象状态改变通告，在接收到通告表明网元的通讯状态由中断变为恢复后进入任务同步过程，或者在网管系统启动后，由所述后台缺省任务管理器激活内部调度定时器，每隔一定时间周期进入任务同步过程。
根据本发明另一实施例，步骤12中还包括：由所述历史数据采集引擎对历史性能数据进行筛选和过滤后，将符合预设测量任务属性的历史性能数据保存到数据库。
基于上述后台缺省测量任务的实现，可以大大改善网管系统的测量任务管理功能，主要表现在以下几点：
提高了历史性能数据采集的可用性。不需要预设测量任务中具体的被监测对象，而只需要为同一类型的配置管理对象(比如同一类型的服务器组件，或同一类型的业务板)定义一个测量任务即可。当有服务器组件或业务板增加或删除时，系统将自动更新支持，使得任务管理功能的可用性提高了。
减小了测量任务操作请求失败的可能性。由于测量任务的操作请求不需要与网元进行通讯，只预设于网管系统的测量任务管理器上，请求被成功执行的可靠性得以保障。
提高了历史数据采集过程的连续性和稳定性。后台缺省任务管理器在“第一时间”与网元通讯，完成测量任务的同步，并采用周期性策略不断检查和重试；网元侧实际执行的测量任务不受用户操作的影响，一旦启动便不再停止。因而，性能数据采集过程的连续性和稳定性在最大程度上得到了保障。
Claims (8)
1.一种历史性能数据采集系统，包括：
配置管理模块，用于保存网元上所配置的管理对象信息，并提供给后台缺省任务管理器；
后台缺省任务管理器，独立于用户操作的测量任务管理器，用于查询到网元上所配置的管理对象信息，为支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
历史数据采集引擎，用于将网元侧根据缺省测量任务所采集到的历史性能数据进行保存。
2.如权利要求1所述的历史性能数据采集系统，所述后台缺省任务管理器还监听所述配置管理模块发出的管理对象通告，并根据该通告中的信息对缺省测量任务中的被监测对象进行调整。
3.如权利要求1或2所述的历史性能数据采集系统，所述后台缺省任务管理器还启动任务信息同步操作，以便将任务信息同步到网元侧。
4.如权利要求1所述的历史性能数据采集系统，所述历史性能数据采集引擎还对历史性能数据进行筛选和过滤，保存符合预设测量任务属性的历史性能数据。
5.一种历史性能数据采集方法，通过网管系统的配置管理模块、历史数据采集引擎和后台缺省任务管理器采集历史性能数据，该方法包括：
由后台缺省任务管理器从配置管理模块查询到网元上所配置的管理对象信息，对支持性能参数监测的所有同类型配置管理对象生成缺省测量任务，并自动将所述任务同步到网元侧；
网元侧根据所述缺省测量任务执行历史性能数据的采集，由历史数据采集引擎获取所述历史性能数据并进行保存。
6.如权利要求5所述的历史性能数据采集方法，还包括：由所述后台缺省任务管理器监听所述配置管理模块发出的管理对象通告，并根据该通告中的信息对缺省测量任务中的被监测对象进行调整。
7.如权利要求5或6所述的历史性能数据采集方法，还包括：通过所述后台缺省任务管理器启动任务信息同步操作，以便将任务信息同步到网元侧。
8.如权利要求5所述的历史性能数据采集方法，还包括：由所述历史数据采集引擎对历史性能数据进行筛选和过滤，保存符合预设测量任务属性的历史性能数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2008100096545A CN101227330B (zh) | 2008-02-19 | 2008-02-19 | 一种历史性能数据采集方法和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2008100096545A CN101227330B (zh) | 2008-02-19 | 2008-02-19 | 一种历史性能数据采集方法和系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101227330A CN101227330A (zh) | 2008-07-23 |
| CN101227330B true CN101227330B (zh) | 2011-04-27 |
Family
ID=39859097
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2008100096545A Expired - Fee Related CN101227330B (zh) | 2008-02-19 | 2008-02-19 | 一种历史性能数据采集方法和系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101227330B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102063363A (zh) * | 2010-01-26 | 2011-05-18 | 深圳市同洲电子股份有限公司 | 一种内存占用情况统计装置及内存占用情况统计方法 |
| CN102200943B (zh) * | 2010-03-25 | 2014-12-03 | 腾讯科技（深圳）有限公司 | 一种基于后台自动检测cpu使用率的方法和设备 |
| CN110858974B (zh) * | 2018-08-23 | 2021-04-20 | 华为技术有限公司 | 通信方法及装置 |
| CN114124958A (zh) * | 2021-11-26 | 2022-03-01 | 智昌科技集团股份有限公司 | 一种分布式数据采集系统运行方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1713592A (zh) * | 2004-06-27 | 2005-12-28 | 华为技术有限公司 | 一种通用数据采集的实现方法 |
| CN1901568A (zh) * | 2005-07-22 | 2007-01-24 | 中兴通讯股份有限公司 | 一种网管系统中实现历史性能采集的方法 |
| CN101018150A (zh) * | 2006-02-09 | 2007-08-15 | 中兴通讯股份有限公司 | 一种电信设备性能数据采集的方法及系统 |
-
2008
- 2008-02-19 CN CN2008100096545A patent/CN101227330B/zh not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1713592A (zh) * | 2004-06-27 | 2005-12-28 | 华为技术有限公司 | 一种通用数据采集的实现方法 |
| CN1901568A (zh) * | 2005-07-22 | 2007-01-24 | 中兴通讯股份有限公司 | 一种网管系统中实现历史性能采集的方法 |
| CN101018150A (zh) * | 2006-02-09 | 2007-08-15 | 中兴通讯股份有限公司 | 一种电信设备性能数据采集的方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101227330A (zh) | 2008-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110895488B (zh) | 任务调度方法及装置 | |
| US7984161B2 (en) | Optimizing mobile device synchronization with multiple data sources | |
| CN101227330B (zh) | 一种历史性能数据采集方法和系统 | |
| CN107729213B (zh) | 一种后台任务监控方法及装置 | |
| CN110795264A (zh) | 监控管理方法及系统、智能管理终端 | |
| CN112667374B (zh) | 一种线程同步方法、系统及介质 | |
| CN102420709A (zh) | 一种基于任务框架的调度任务管理方法和设备 | |
| CN110895486A (zh) | 分布式任务调度系统 | |
| CN112817687A (zh) | 一种数据同步方法和装置 | |
| CN115102862A (zh) | 一种用于sdn设备的自动同步方法及装置 | |
| CN115473858A (zh) | 数据传输方法和流式数据传输系统 | |
| CN112486656B (zh) | 实现无线电离线任务调度和数据下载的方法 | |
| CN115221116A (zh) | 一种数据写入方法、装置、设备及可读存储介质 | |
| CN114338335A (zh) | 一种一体化监控系统及方法 | |
| CN114003618A (zh) | 数据库信息变更追溯方法、装置、计算机设备及存储介质 | |
| CN113901141A (zh) | 一种分布式数据同步方法及系统 | |
| CN110874303B (zh) | 数据采集方法、装置以及设备 | |
| CN114244860A (zh) | 一种物联网设备管理方法、装置、电子设备及存储介质 | |
| CN100421384C (zh) | 屏蔽处理瞬断通知事件的方法 | |
| CN110896358A (zh) | 一种nfv中资源数据的动态更新方法和装置 | |
| CN116032949B (zh) | 时间同步方法、装置、电子设备和计算机可读存储介质 | |
| CN117573501B (zh) | 指标采集方法及相关产品 | |
| CN108881401A (zh) | 节点性能文件处理方法、中间服务器、节点、系统及介质 | |
| CN111988186B (zh) | 一种配置同步方法及相关装置 | |
| CN114168359B (zh) | 一种资源数据的处理方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20110427 Termination date: 20170219 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |