CN103684851B - 数据采集方法和装置 - Google Patents
数据采集方法和装置 Download PDFInfo
- Publication number
- CN103684851B CN103684851B CN201310611213.3A CN201310611213A CN103684851B CN 103684851 B CN103684851 B CN 103684851B CN 201310611213 A CN201310611213 A CN 201310611213A CN 103684851 B CN103684851 B CN 103684851B
- Authority
- CN
- China
- Prior art keywords
- acquisition
- variable
- acquisition tasks
- tasks
- period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明提供一种数据采集方法和装置,该方法包括:接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和该采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使该采集参数中的变量通过该变量对应的引用计数归并复用到一个采集任务中;按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据。
Description
技术领域
本发明涉及通信技术,尤其涉及一种数据采集方法和装置。
背景技术
简单网络管理协议(Simple Network Management Protocol;简称:SNMP)是一个标准的用于管理IP网络上节点的协议。被管理的网络节点以管理信息库(MIB)的方式描述本网络节点可以通过SNMP访问和定义的变量。其中,该变量在MIB中以树形结构组织,变量即为树中的叶子节点,每个叶子节点均分配一个唯一的对象标识符(OID),且相关的变量划分在同一根下。
另外,在网络管理系统中,主要通过SNMP协议定时采集被管理的网络节点中的MIB中定义的变量的数据,以根据该变量的数据对该被管理的网络节点进行性能监视和数据挖掘分析。目前,通过SNMP协议定时采集被管理的网络节点中的MIB中定义的变量的数据的方式主要包括两种:
第一种,网络管理系统向用户展现被管理的网络节点中的MIB定义的变量时是习惯按照变量的相关性将不同一根下的变量划分为不同的组展示,另外,还将同一根下的一组变量看作一个整体。这样,在进行变量的数据采集时,也按照这种分组进行采集,即在接收一个应用所需要变量的数据和周期的采集请求时,需要创建一个采集任务,以使根据该周期将该变量所在分组全部采集。此外,在采集不同应用所需要变量的数据和周期的采集请求时,需要分别为每个采集请求创建对应的采集任务,以分别根据不同应用对应的周期将对应所需要变量所在的分组全部采集。
第二种,在进行变量的数据采集时,在接收一个应用所需要变量的数据和周期的采集请求时,创建一个采集任务,以使根据该周期将该变量采集。此外,在采集不同应用所需变量的数据和周期的采集请求时,需要分别为每个采集请求创建对应的采集任务,以分别根据不同应用对应的周期将对应所需要变量采集。
但是,对于第一种方式,可能会造成采集很多不必要的数据,从而增加被管理的网络节点的负担,并浪费网络带宽。另外,在针对不同应用中所采集的相同变量时也会造成不必要的浪费,还可能会导致针对不同应用所采集的相同变量的数据不一致的问题。对于第二种方式,当一组变量中需要采集的变量的数据很多时,会造成采集任务的增加,每个采集任务都有各自的报头,从而降低了有效载荷,进而增加了被管理的网络节点的处理负担。
发明内容
本发明提供一种数据采集方法和装置,用于解决现有技术中采集不必要的数据,SNMP请求过多,以及重复采集而导致数据不一致的问题,进而有效地提高了采集效率。
本发明的第一个方面是提供一种数据采集处理方法,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据。
在第一个方面的第一种可能实现方式中,当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包含所述第一变量;
若判断出存在所述第一采集任务,则判断所述第一采集任务的第二周期是否小于或等于所述第一周期;
若判断出所述第二周期小于或等于所述第一周期,则将所述第一采集任务中的第一变量对应的引用计数加1,并缓存所述第一变量对应的所述第一周期。
结合第一个方面的第一种可能实现方式,在第一个方面的第二种可能实现方式中,还包括:若判断出所述第二周期大于所述第一周期,则判断所述第一采集任务中是否还存在除所述第一变量的其他变量;
若判断出所述第一采集任务中还存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除。
结合第一个方面的第二种可能实现方式,在第一个方面的第三种可能实现方式中,还包括:若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第一个方面、第一个方面的第二种可能或者第一方面的第三种可能实现方式,在第一个方面的第四种可能实现方式中,若判断不存在所述第一采集任务,或者,在所述将所述第一采集任务中的第一变量删除之后,或者,在所述将所述第一采集任务删除之后,所述方法还包括;
判断是否存在第二采集任务,所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
若存在所述第二采集任务,则在所述第二采集任务中增加所述第一变量;或者,若不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
结合第一个方面,在第一个方面的第五种可能实现方式中,当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
若判断出存在所述第一采集任务,则将所述第一采集任务中的第一变量对应的引用计数减1;
判断所述第一变量对应的引用计数减1后的引用计数是否为0,若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第一个方面的第五种可能实现方式,在第一个方面的第六种可能实现方式中,还包括:若判断出所述第一变量对应的引用计数减1后的引用计数不为0,则在所述第一变量的最小采集周期大于所述第一采集任务的周期时,判断所述第一采集任务中是否存在除所述第一变量的其他变量;
若判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第一个方面的第六种可能实现方式,在第一个方面的第七种可能实现方式中,还包括:判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
若判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;
若判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
结合第一个方面,在第一个方面的第八种可能实现方式中,当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则、所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
若判断存在所述第一采集任务,则将所述第一变量缓存的第三周期修改为所述第四周期;其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;
在修改后的所述第一变量缓存的周期中的最小周期不等于所述第一采集任务的周期时,判断所述第一采集任务是否存在除所述第一变量的其他变量;
若判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;
判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
若判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;
若判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
结合第一个方面的第八种可能实现方式,在第一个方面的第九种可能实现方式中,在所述判断是否存在第四采集任务之前,所述方法还包括:
若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第一个方面,在第一个方面的第十种可能实现方式中,当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存第六采集任务;所述第六采集任务中的变量与所述第一变量属于同一分组;
若判断出存在所述第六采集任务,则判断所述第六采集任务的周期是否小于或等于所述第一周期;
若判断出所述第六采集任务的周期小于或等于所述第一周期,则判断所述第六采集任务中是否包含所述第一变量;
若判断出所述第六采集任务中包含所述第一变量,则将所述第六采集任务中的第一变量对应的引用计数加1,并缓存所述第六采集任务对应的所述第一周期;或者,若判断出所述第六采集任务中不包含所述第一变量,则在所述第六采集任务中增加所述第一变量。
结合第一个方面的第十种可能实现方式,在第一个方面的第十一种可能实现方式中,在所述判断所述第六采集任务的周期是否小于或等于所述第一周期之后,所述方法还包括:
若判断出所述第六采集任务的周期大于所述第一周期,则将所述第六采集任务的周期修改为所述第一周期。
结合第一个方面的第十种可能实现方式,在第一个方面的第十二种可能实现方式中,还包括:
若判断出不存在所述第六采集任务,则创建第七采集任务,所述第七采集任务包括所述第一变量,且所述第七采集任务的周期为所述第一周期。
结合第一个方面,在第一个方面的第十三种可能实现方式中,当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
若判断存在所述第一采集任务,则将所述第一变量对应的引用计数减1;
判断所述第一变量对应的引用计数减1后的引用计数是否为0,若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第一个方面的第十三种可能实现方式,在第一个方面的第十四种可能实现方式中,在所述将所述第一采集任务中的第一变量删除之后,或者,在判断出所述第一变量对应的引用计数减1后的引用计数不为0时,所述方法还包括:
在所述第一采集任务中的第五周期大于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期,其中,所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
结合第一个方面,在第一个方面的第十五种可能实现方式中,当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
若判断出存在,则将所述第一变量缓存的所述第三周期修改为所述第四周期;并在所述第一变量的缓存的周期修改后,第五周期不等于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期;
其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
结合第一个方面,在第一个方面的第十六种可能实现方式中,当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第二采集任务;所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
若判断出存在所述第二采集任务,则判断所述第二采集任务中是否包括所述第一变量;
若判断出所述第二采集任务中包括所述第一变量,则将所述第二采集任务中的第一变量对应的引用计数加1;或者,若判断出所述第二采集任务中不包括所述第一变量,则在所述第二采集任务中增加所述第一变量。
结合第一个方面的第十六种可能实现方式,在第一个方面的第十七种可能实现方式中,还包括:若判断出不存在所述第二采集任务,则创建所述第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
结合第一个方面,在第一个方面的第十八种可能实现方式中,当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存第七采集任务;所述第七采集任务包括所述第一变量,且所述第七采集任务的周期与所述第一周期相同;
若判断出存在所述第七采集任务,则将所述第一变量对应的引用计数减1;
在所述第一变量对应的引用计数减1后的引用计数为0时,判断所述第七采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第七采集任务中包括除所述第一变量的其他变量,则将所述第七采集任务中的第一变量删除;或者,若判断出所述第七采集任务中不包括除所述第一变量的其他变量,则将所述第七采集任务删除。
结合第一个方面,在第一个方面的第十九种可能实现方式中,当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第八采集任务;所述第八采集任务中的变量与所述第一变量属于同一分组,且所述第八采集任务的周期与所述第四周期相同;
若判断出存在所述第八采集任务,则判断所述第八采集任务中是否包括所述第一变量;
若判断出所述第八采集任务中包括所述第一变量,则将所述第一变量对应的引用计数加1;或者,若判断出所述第八采集任务中不包括所述第一变量,则将所述第八采集任务中增加所述第一变量;
判断是否存在第九采集任务,所述第九采集任务中包括所述第一变量,且所述第九采集任务的周期与所述第三周期相同;
若判断出存在所述第九采集任务,则将所述第一变量对应的引用计数减1;
其中,所述第三周期为所述第一变量对应的修改前的周期,所述第四周期为所述第一变量对应的修改后的周期。
结合第一个方面的第十九可能实现方式,在第一个方面的第二十种可能实现方式中,还包括:若判断出不存在所述第八采集任务,则创建第十采集任务,所述第十采集任务包括所述第一变量,且所述第十采集任务的周期为所述第四周期。
结合第一个方面的第二十可能实现方式,在第一个方面的第二十一种可能实现方式中,还包括:在将所述第一变量对应的引用计数减1之后,若所述第一变量对应的引用计数为0,则判断所述第九采集任务是否还包括除所述第一变量之外的其他变量;
若判断出所述第九采集任务还包括除所述第一变量之外的其他变量,则将所述第九采集任务中的所述第一变量删除;
若判断出所述第九采集任务不包括除所述第一变量之外的其他变量,则删除所述第九采集任务。
本发明的第二个方面是提供一种数据采集处理装置,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据。
在第二个方面的第一种可能实现方式中,所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述集参数包括第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包含所述第一变量;
所述判断单元还用于若判断出存在所述第一采集任务,则判断所述第一采集任务的第二周期是否小于或等于所述第一周期;
采集处理单元,用于若所述判断单元判断出所述第二周期小于或等于所述第一周期,则将所述第一采集任务中的第一变量对应的引用计数加1,并缓存所述第一变量对应的所述第一周期。
结合第二个方面的第一种可能实现方式,在第二个方面的第二种可能实现方式中,所述判断单元还用于若判断出所述第二周期大于所述第一周期,则判断所述第一采集任务中是否还存在除所述第一变量的其他变量;
所述采集处理单元还用于若判断单元判断出所述第一采集任务中还存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除。
结合第二个方面的第二种可能实现方式,在第二个方面的第三种可能实现方式中,所述采集处理单元还用于若判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第二个方面、第二个方面的第二种可能实现方式或者第二个方面的第三种可能实现方式,在第二个方面的第四种可能实现方式中,所述判断单元还用于判断是否存在第二采集任务,所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
所述处理单元还用于若所述判断单元判断出存在所述第二采集任务,则在所述二采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
结合第二个方面,在第二个方面的第五种可能实现方式中,所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
采集处理单元,用于若所述判断单元判断出存在所述第一采集任务,则将所述第一采集任务中的第一变量对应的引用计数减1;
所述判断单元还用于判断所述第一变量对应的引用计数减1后的引用计数是否为0;
所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若所述判断单元判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第二个方面的第五种可能实现方式,在第二个方面的第六种可能实现方式中,所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数不为0,则在所述第一变量的最小采集周期大于所述第一采集任务的周期时,判断所述第一采集任务中是否存在除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第二个方面的第六种可能实现方式,在第二个方面的第七种可能实现方式中,所述判断单元还用于判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
结合第二个方面,在第二个方面的第八种可能实现方式中,所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
采集处理单元,用于若所述判断单元判断存在所述第一采集任务,则将所述第一变量缓存的第三周期修改为所述第四周期;其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;
所述判断单元还用于在修改后的所述第一变量缓存的周期中的最小周期不等于所述第一采集任务的周期时,判断所述第一采集任务是否存在除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第二个方面的第八种可能实现方式,在第二个方面的第九种可能实现方式中,所述判断单元还用于判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
结合第二个方面,在第二个方面的第十种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存第六采集任务;所述第六采集任务中的变量与所述第一变量属于同一分组;
所述判断单元还用于若判断出存在所述第六采集任务,则判断所述第六采集任务的周期是否小于或等于所述第一周期;
所述判断单元还用于若判断出所述第六采集任务的周期小于或等于所述第一周期,则判断所述第六采集任务中是否包含所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第六采集任务中包含所述第一变量,则将所述第六采集任务中的第一变量对应的引用计数加1,并缓存所述第六采集任务对应的所述第一周期;或者,若所述判断单元判断出所述第六采集任务中不包含所述第一变量,则在所述第六采集任务中增加所述第一变量。
结合第二个方面的第十种可能实现方式,在第二个方面的第十一种可能实现方式中,所述采集处理单元还用于若所述判断单元判断出所述第六采集任务的周期大于所述第一周期,则将所述第六采集任务的周期修改为所述第一周期。
结合第二个方面的第十种可能实现方式,在第二个方面的第十二种可能实现方式中,所述采集处理单元还用于若所述判断单元判断出不存在所述第六采集任务,则创建第七采集任务,所述第七采集任务包括所述第一变量,且所述第七采集任务的周期为所述第一周期。
结合第二个方面,在第二个方面的第十三种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
采集处理单元,用于若所述判断单元判断存在所述第一采集任务,则将所述第一变量对应的引用计数减1;
所述判断单元还用于判断所述第一变量对应的引用计数减1后的引用计数是否为0;
所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若所述判断单元判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
结合第二个方面的第十三种可能实现方式,在第二个方面的第十四种可能实现方式中,所述采集处理单元还用于在所述第一采集任务中的第五周期大于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期,其中,所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
结合第二个方面,在第二个方面的第十五种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
采集处理单元,用于若所述判断单元判断出存在,则将所述第一变量缓存的所述第三周期修改为所述第四周期;并在所述第一变量的缓存的周期修改后,第五周期不等于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期;
其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
结合第二个方面,在第二个方面的第十六种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存在第二采集任务;所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
所述判断单元还用于若判断出存在所述第二采集任务,则判断所述第二采集任务中是否包括所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第二采集任务中包括所述第一变量,则将所述第二采集任务中的第一变量对应的引用计数加1;或者,若所述判断单元判断出所述第二采集任务中不包括所述第一变量,则在所述第二采集任务中增加所述第一变量。
结合第二个方面的第十六种可能实现方式,在第二个方面的第十七种可能实现方式中,所述采集处理单元还用于若所述判断单元判断出不存在所述第二采集任务,则创建所述第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
结合第二个方面,在第二个方面的第十八种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存第七采集任务;所述第七采集任务包括所述第一变量,且所述第七采集任务的周期与所述第一周期相同;
采集处理单元,用于若所述判断单元判断出存在所述第七采集任务,则将所述第一变量对应的引用计数减1;
判断单元还用于在所述第一变量对应的引用计数减1后的引用计数为0时,判断所述第七采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第七采集任务中包括除所述第一变量的其他变量,则将所述第七采集任务中的第一变量删除;或者,若所述判断单元判断出所述第七采集任务中不包括除所述第一变量的其他变量,则将所述第七采集任务删除。
结合第二个方面,在第二个方面的第十九种可能实现方式中,所述采集处理模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第八采集任务;所述第八采集任务中的变量与所述第一变量属于同一分组,且所述第八采集任务的周期与所述第四周期相同;
所述判断单元还用于若判断出存在所述第八采集任务,则判断所述第八采集任务中是否包括所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第八采集任务中包括所述第一变量,则将所述第一变量对应的引用计数加1;或者,若所述判断单元判断出所述第八采集任务中不包括所述第一变量,则将所述第八采集任务中增加所述第一变量;
所述判断单元还用于判断是否存在第九采集任务,所述第九采集任务中包括所述第一变量,且所述第九采集任务的周期与所述第三周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第九采集任务,则将所述第一变量对应的引用计数减1;
其中,所述第三周期为所述第一变量对应的修改前的周期,所述第四周期为所述第一变量对应的修改后的周期。
结合第二个方面的第十九种可能实现方式,在第二个方面的第二十种可能实现方式中,所述采集处理单元还用于若所述判断单元判断出不存在所述第八采集任务,则创建第十采集任务,所述第十采集任务包括所述第一变量,且所述第十采集任务的周期为所述第四周期。
结合第二个方面的第十九种可能实现方式,在第二个方面的第二十一种可能实现方式中,所述采集处理单元在将所述第一变量对应的引用计数减1之后,若所述第一变量对应的引用计数为0,则所述判断单元还用于判断所述第九采集任务是否还包括除所述第一变量之外的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第九采集任务还包括除所述第一变量之外的其他变量,则将所述第九采集任务中的所述第一变量删除;或者,若所述判断单元判断出所述第九采集任务不包括除所述第一变量之外的其他变量,则删除所述第九采集任务。
本发明的技术效果是:通过根据预设的归并复用规则和接收到的数据采集处理请求中的采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,并按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该数据采集处理请求中的采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据,由于将采集参数中的变量通过变量对应的引用计数归并复用到一个采集任务中,因此,使得一组内的变量归并为一个SNMP请求来一同采集,从而有效地解决了现有技术中采集不必要的数据,SNMP请求过多,以及重复采集而导致数据不一致的问题,进而有效地提高了采集效率。
附图说明
图1为本发明数据采集处理方法的一个实施例的流程图;
图2为本发明数据采集处理方法的另一个实施例的流程图;
图3为本发明数据采集处理方法的又一个实施例的流程图;
图4为本发明数据采集处理方法的还一个实施例的流程图;
图5a至图5f为本发明数据采集处理方法的一个具体实现方式的原理示意图;
图6为本发明数据采集处理方法的再一个实施例的流程图;
图7为本发明数据采集处理方法的另一个实施例的流程图;
图8为本发明数据采集处理方法的又一个实施例的流程图;
图9a至图9f为本发明数据采集处理方法的另一个具体实现方式的原理示意图;
图10为本发明数据采集处理方法的还一个实施例的流程图;
图11为本发明数据采集处理方法的再一个实施例的流程图;
图12为本发明数据采集处理方法的另一个实施例的流程图;
图13a至图13f为本发明数据采集处理方法的另一个具体实现方式的原理示意图;
图14为本发明数据采集处理装置的一个实施例的结构示意图;
图15为本发明数据采集处理装置的另一个实施例的结构示意图。
具体实施方式
图1为本发明数据采集处理方法的一个实施例的流程图,如图1所示,本实施例的方法包括:
步骤101、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数。
在本实施例中,该采集对象实例可以为被管理的网络节点,例如:服务器、PC机、交换机和路由器等。或者,该采集对象实例可以包括运行在服务器上的应用软件。
步骤102、根据预设的归并复用规则和该采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使该采集参数中的变量通过该变量对应的引用计数归并复用到一个采集任务中。
步骤103、按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据。
在本实施例中,通过根据预设的归并复用规则和接收到的数据采集处理请求中的采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,并按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该数据采集处理请求中的采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据,由于将采集参数中的变量通过变量对应的引用计数归并复用到一个采集任务中,因此,使得一组内的变量归并为一个SNMP请求来一同采集,从而有效地解决了现有技术中采集不必要的数据,SNMP请求过多,以及重复采集而导致数据不一致的问题,进而有效地提高了采集效率。
图2为本发明数据采集处理方法的另一个实施例的流程图,在本实施例中,以数据采集处理请求为增加数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图2所示,本实施例的方法包括:
步骤201、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤202、判断是否存在第一采集任务;该第一采集任务包含该第一变量;若存在,则执行步骤203;若不存在,则执行步骤207。
步骤203、判断该第一采集任务的第二周期是否小于或等于该第一周期;若判断出该第二周期小于或等于该第一周期,则执行步骤204;若判断出该第二周期大于该第一周期,则执行步骤205。
步骤204、将该第一采集任务中的第一变量对应的引用计数加1,并缓存该第一变量对应的该第一周期。结束。
在本实施例中,每个变量可以缓存多个周期。
步骤205、判断该第一采集任务中是否还存在除该第一变量的其他变量;若判断出该第一采集任务中还存在除该第一变量的其他变量,则执行步骤206;若判断出该第一采集任务中不存在除该第一变量的其他变量,则执行步骤210。
步骤206、将该第一采集任务中的第一变量删除。
步骤207、判断是否存在第二采集任务,该第二采集任务中的变量与该第一变量属于同一分组,且该第二采集任务的周期与该第一周期相同;若存在,则执行步骤208;若不存在,则执行步骤209。
在本实施例中,将MIB树上相同根下的变量划分为一组。
步骤208、在该二采集任务中增加该第一变量。结束。
步骤209、创建第三采集任务,该第三采集任务包括该第一变量,且该第三采集任务的周期为该第一周期。结束。
步骤210、将所述第一采集任务删除,并执行步骤207。
图3为本发明数据采集处理方法的又一个实施例的流程图,在本实施例中,以数据采集处理请求为删除数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图3所示,本实施例的方法包括:
步骤301、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤302、判断是否存在第一采集任务;该第一采集任务包括该第一变量;若存在,则执行步骤303;若不存在,则结束。
在本实施例中,可选地,当不存在第一采集任务时,可以返回异常消息,用于表示未找到要删除的变量。
步骤303、将该第一采集任务中的第一变量对应的引用计数减1。
步骤304、判断该第一变量对应的引用计数减1后的引用计数是否为0;若为0,则执行步骤305;若不为0,则执行步骤308。
步骤305、判断该第一采集任务中是否包括除该第一变量的其他变量;若判断出该第一采集任务中包括除该第一变量的其他变量,则执行步骤306;若判断出该第一采集任务中不包括除该第一变量的其他变量,则执行步骤307。
步骤306、将该第一采集任务中的第一变量删除。结束。
步骤307、将该第一采集任务删除。结束。
步骤308、在该第一变量的最小采集周期大于该第一采集任务的周期时,判断该第一采集任务中是否存在除该第一变量的其他变量;若存在,则执行步骤309、若不存在,则执行步骤313。
步骤309、将该第一采集任务中的第一变量删除。
步骤310、判断是否存在第四采集任务,该第四采集任务中的变量与该第一变量属于同一分组,且该第四采集任务的周期与第一变量的最小周期相同,若存在,则执行步骤311;若不存在,则执行步骤312。
步骤311、在第四采集任务中增加该第一变量。结束。
步骤312、创建第五采集任务,该第五采集任务包括该第一变量,且该第五采集任务的周期为该第一变量的最小周期。
步骤313、将该第一采集任务删除,并执行步骤310。
图4为本发明数据采集处理方法的还一个实施例的流程图,在本实施例中,以数据采集处理请求为修改数据采集处理请求,且采集参数包括第一变量、第三周期和第四周期为例,详细介绍本实施例的技术方案,如图4所示,本实施例的方法包括:
步骤401、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量、第三周期和第四周期。
步骤402、判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;若存在,则执行步骤403;若不存在,则结束。
在本实施例中,可选地,当不存在第一采集任务时,可以返回异常消息,用于表示未找到要修改的变量。
步骤403、将所述第一变量缓存的第三周期修改为所述第四周期;其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期。
步骤404、在修改后的所述第一变量缓存的周期中的最小周期不等于所述第一采集任务的周期时,判断所述第一采集任务是否存在除所述第一变量的其他变量;若存在,则执行步骤405;若不存在,则执行步骤409。
步骤405、将所述第一采集任务中的第一变量删除。
步骤406、判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;若存在,则执行步骤407;若不存在,则执行步骤408。
步骤407、在所述第四采集任务中增加所述第一变量。结束。
步骤408、创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。结束。
步骤409、将该第一采集任务删除,并执行步骤406。
通过上述图2至图4所示实施例,可知,并不是采用整组变量一同采集,而是上层应用需要本组中的几个变量就将这些变量中周期相同的分别归并复用到一个采集任务中来采集,不需要的变量不采集,不同组的变量不在同一采集任务中采集,对于已经采集的变量如果还有其他应用需要,周期相同或更大则直接复用当前采集任务中,只增加对应变量的引用计数,周期更小则将此变量改为一个更小的周期采集并增加引用计数,大周期的数据可以从小周期的数据中抽取。
基于上述图2至图4所示实施例,图5a至图5f为本发明数据采集处理方法的一个具体实现方式的原理示意图,举例来说。有两组可以采集的变量,分别为第一组(oid1~oid5),第二组(oid6~oid10),采集的具体实现方式如图5a至图5f所示,初始时,如图5a所示,由于没有任何定时采集任务(即为上述数据采集处理请求),因此,定时轮询框架上没有任何采集任务。
以数据采集处理请求为增加数据采集处理请求为例,其数据采集处理方法可以有如下几种实现方式:
第一种:当需要5分钟(即为上述第一周期)采集一次oid2(即为上述第一变量)的数据时,由于此时没有第一组且周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务(即为上述第三采集任务),该采集任务包括oid2,并将oid2的引用计数标记为1,具体可以如图5b所示。
第二种:当需要5分钟采集一次oid6的数据,此时没有第二组周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务,该采集任务包括oid6,并将oid6的引用计数标记为1,具体如图5c所示。
第三种:需要5分钟采集一次oid3的数据,由于已经存在第一组且周期为5分钟的采集任务,因此,可以对当前这个采集任务进行处理,即在当前采集任务中增加oid3,并将oid3的引用计数标记为1,具体可以如图5d所示。
第四种:其他应用需要1分钟采集一次oid2的数据,虽然oid2已经采集,但是当前需要的周期更小,因此,可以在定时轮询框架上创建一个采集任务,该创建的采集任务的周期为1分钟,将原5分钟周期的采集任务中的oid2删除,并1分钟周期的采集任务中的oid2的引用计数标记为2,具体可以如图5e所示。
第五种:其他应用需要5分钟采集一次oid6的数据,由于oid6已经在采集并且采集周期也相同,因此,只需要将oid6的引用计数增加为2,具体可以如图5f所示。
图6为本发明数据采集处理方法的再一个实施例的流程图,在本实施例中,以数据采集处理请求为增加数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图6所示,本实施例的方法包括:
步骤501、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤502、判断是否存第六采集任务;该第六采集任务中的变量与该第一变量属于同一分组;若存在,则执行步骤503;若不存在,则执行步骤508。
步骤503、判断该第六采集任务的周期是否小于或等于该第一周期;若小于或等于,则执行步骤504;若大于,则执行步骤507。
步骤504、判断该第六采集任务中是否包含该第一变量;若包含,则执行步骤505;若不包含,则执行步骤506。
步骤505、将该第六采集任务中的第一变量对应的引用计数加1,并缓存该第六采集任务对应的该第一周期。结束。
步骤506、在该第六采集任务中增加该第一变量。结束。
步骤507、将该第六采集任务的周期修改为该第一周期,并执行步骤504。
步骤508、创建第七采集任务,该第七采集任务包括该第一变量,且该第七采集任务的周期为该第一周期。
图7为本发明数据采集处理方法的另一个实施例的流程图,在本实施例中,以数据采集处理请求为删除数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图7所示,本实施例的方法包括:
步骤601、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤602、判断是否存在第一采集任务;该第一采集任务中包括该第一变量;若存在,则执行步骤603;若不存在,则结束。
在本实施例中,可选地,当不存在第一采集任务时,可以返回异常消息,用于表示未找到要删除的变量。
步骤603、将该第一变量对应的引用计数减1。
步骤604、判断该第一变量对应的引用计数减1后的引用计数是否为0;若为0,则执行步骤605;若不为0,则执行步骤608。
步骤605、判断该第一采集任务中是否包括除该第一变量的其他变量;如包括,则执行步骤606;若不包括,则执行步骤607。
步骤606、将该第一采集任务中的第一变量删除。并执行步骤608。
步骤607、将该第一采集任务删除。结束。
步骤608、在该第一采集任务中的第五周期大于该第一采集任务的周期时,修改该第一采集任务的周期为该第五周期,其中,该第五周期为该第一采集任务中的一个变量缓存的周期,且小于或等于该第一采集任务中每个变量缓存的周期。结束。
图8为本发明数据采集处理方法的又一个实施例的流程图,在本实施例中,以数据采集处理请求为修改数据采集处理请求,且采集参数包括第一变量、第三周期和第四周期为例,详细介绍本实施例的技术方案,如图8所示,本实施例的方法包括:
步骤701、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量、第三周期和第四周期。
步骤702、判断是否存在第一采集任务;该第一采集任务中包括该第一变量;若存在,则执行步骤703;若不存在,则结束。
在本实施例中,可选地,当不存在第一采集任务时,可以返回异常消息,用于表示未找到要修改的变量。
步骤703、将该第一变量缓存的该第三周期修改为该第四周期;并在该第一变量的缓存的周期修改后,第五周期不等于该第一采集任务的周期时,修改该第一采集任务的周期为该第五周期。
其中,该第三周期为该第一变量缓存的一个周期,该第四周期为修改后的周期;该第五周期为该第一采集任务中的一个变量缓存的周期,且小于或等于该第一采集任务中每个变量缓存的周期。
通过上述图6至图8所示实施例,可知,其实现方式与图2至图4所示的实施例的基本相同,其区别在于只是在变量有更小的周期的采集要求时不是只将本变量的采集周期改小而是将所属的采集任务的周期改小。
基于上述图6至图8所示实施例,图9a至图9f为本发明数据采集处理方法的另一个具体实现方式的原理示意图,举例来说。有两组可以采集的变量,分别为第一组(oid1~oid5),第二组(oid6~oid10),采集的具体实现方式如图9a至图9f所示,初始时,如图9a所示,由于没有任何定时采集任务(即为上述数据采集处理请求),因此,定时轮询框架上没有任何采集任务。
以数据采集处理请求为增加数据采集处理请求为例,其数据采集处理方法可以有如下几种实现方式:
第一种:当需要5分钟(即为上述第一周期)采集一次oid2(即为上述第一变量)的数据时,由于此时没有第一组且周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务(即为上述第三采集任务),该采集任务包括oid2,并将oid2的引用计数标记为1,具体可以如图9b所示。
第二种:当需要5分钟采集一次oid6的数据,此时没有第二组周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务,该采集任务包括oid6,并将oid6的引用计数标记为1,具体如图9c所示。
第三种:需要5分钟采集一次oid3的数据,由于已经存在第一组且周期为5分钟的采集任务,因此,可以对当前这个采集任务进行处理,即在当前采集任务中增加oid3,并将oid3的引用计数标记为1,具体可以如图9d所示。
第四种:其他应用需要1分钟采集一次oid2的数据,虽然oid2已经采集,但是当前需要的周期更小,因此,可以将oid2所在的采集任务的周期由原来的5分钟修改为1分钟,并将oid2的引用计数标记为2,具体可以如图9e所示。
第五种:其他应用需要5分钟采集一次oid6的数据,由于oid6已经在采集并且采集周期也相同,因此,只需要将oid6的引用计数增加为2,具体可以如图9f所示。
图10为本发明数据采集处理方法的还一个实施例的流程图,在本实施例中,以数据采集处理请求为增加数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图10所示,本实施例的方法包括:
步骤901、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤902、判断是否存在第二采集任务;该第二采集任务中的变量与该第一变量属于同一分组,且该第二采集任务的周期与该第一周期相同;若存在,则执行步骤903;若不存在,则执行步骤906。
步骤903、判断该第二采集任务中是否包括该第一变量;若包括,则执行步骤904;若不包括,则执行步骤905。
步骤904、将该第二采集任务中的第一变量对应的引用计数加1。结束。
步骤905、在该第二采集任务中增加该第一变量。结束。
步骤906、创建该第三采集任务,该第三采集任务包括该第一变量,且该第三采集任务的周期为该第一周期。结束。
图11为本发明数据采集处理方法的再一个实施例的流程图,在本实施例中,以数据采集处理请求为删除数据采集处理请求,且采集参数包括第一变量和第一周期为例,详细介绍本实施例的技术方案,如图11所示,本实施例的方法包括:
步骤1001、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量和第一周期。
步骤1002、判断是否存第七采集任务;该第七采集任务包括该第一变量,且该第七采集任务的周期与该第一周期相同;若存在,则执行步骤1003;若不存在,则结束。
在本实施例中,可选地,在不存在时,可以返回异常消息,用于表示未找到要删除的变量。
步骤1003、将该第一变量对应的引用计数减1。
步骤1004、在该第一变量对应的引用计数减1后的引用计数为0时,判断该第七采集任务中是否包括除该第一变量的其他变量;若包括,则执行步骤1005;若不包括,则执行步骤1006。
步骤1005、将该第七采集任务中的第一变量删除。结束。
步骤1006、将该第七采集任务删除。结束。
图12为本发明数据采集处理方法的另一个实施例的流程图,在本实施例中,以数据采集处理请求为修改数据采集处理请求,且采集参数包括第一变量、第三周期和第四周期为例,详细介绍本实施例的技术方案,如图12所示,本实施例的方法包括:
步骤1101、接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;该采集参数包括第一变量、第三周期和第四周期。
步骤1102、判断是否存在第八采集任务;该第八采集任务中的变量与该第一变量属于同一分组,且该第八采集任务的周期与该第四周期相同;若存在,则执行步骤1103;若不存在,则执行步骤1111。
其中,该第三周期为该第一变量对应的修改前的周期,该第四周期为该第一变量对应的修改后的周期。
步骤1103、判断该第八采集任务中是否包括该第一变量;若包括,则执行步骤1104;若不包括,则步骤1105。
步骤1104、将该第一变量对应的引用计数加1;并执行步骤1106。
步骤1105、将该第八采集任务中增加该第一变量。
步骤1106、判断是否存在第九采集任务,该第九采集任务中包括该第一变量,且该第九采集任务的周期与该第三周期相同;若存在,则执行步骤1107;若不存在,则结束。
步骤1107、将该第九采集任务中的第一变量对应的引用计数减1。
步骤1108、若该第一变量的引用计数为0,则判断该第九采集任务是否还包括除该第一变量之外的其他变量;若包括,则执行步骤1109;若不包括,则执行步骤1110。
步骤1109、将该第九采集任务中的该第一变量删除。结束。
步骤1110、删除该第九采集任务。结束。
步骤1111、创建第十采集任务,该第十采集任务包括该第一变量,且该第十采集任务的周期为该第四周期,并执行步骤1106。
通过上述图10至图12所示实施例,可知,其实现方式与图2至图4所示的实施例以及图6至图8所示的实施例基本相同,其区别在于不对不同周期的采集请求进行复用,如果同一变量需要的采集周期不同,则采用不同的采集任务。
基于上述图10至图12所示实施例,图13a至图13f为本发明数据采集处理方法的另一个具体实现方式的原理示意图,举例来说。有两组可以采集的变量,分别为第一组(oid1~oid5),第二组(oid6~oid10),采集的具体实现方式如图13a至图13f所示,初始时,如图13a所示,由于没有任何定时采集任务(即为上述数据采集处理请求),因此,定时轮询框架上没有任何采集任务。
以数据采集处理请求为增加数据采集处理请求为例,其数据采集处理方法可以有如下几种实现方式:
第一种:当需要5分钟(即为上述第一周期)采集一次oid2(即为上述第一变量)的数据时,由于此时没有第一组且周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务(即为上述第三采集任务),该采集任务包括oid2,并将oid2的引用计数标记为1,具体可以如图13b所示。
第二种:当需要5分钟采集一次oid6的数据,此时没有第二组周期为5分钟的采集任务,因此,可以在定时轮询框架上创建一个采集任务,该采集任务包括oid6,并将oid6的引用计数标记为1,具体如图13c所示。
第三种:需要5分钟采集一次oid3的数据,由于已经存在第一组且采集周期为5分钟的采集任务,因此,修改当前采集任务,即将当前采集任务中增加oid3,并将oid3的引用计数标记为1,具体可以如图13d所示。
第四种:其他应用需要1分钟采集一次oid2的数据,虽然oid2已经采集,但是当前需要的周期更小,因此,在定时轮询框架中创建一个新的采集任务,其周期为1分钟,包括oid2,并将oid2的引用计数标记为1,具体可以如图13e所示。
第五种:其他应用需要5分钟采集一次oid6的数据,由于oid6已经在采集并且采集周期也相同,因此,只需要将oid6的引用计数增加为2,具体可以如图13f所示。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
图14为本发明数据采集处理装置的一个实施例的结构示意图,如图14所示,本实施例的装置包括:SNMP采集模块11、定时任务处理模块12和SNMP处理模块13;其中,SNMP采集模块11用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和该采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使该采集参数中的变量通过该变量对应的引用计数归并复用到一个采集任务中;定时任务处理模块12用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;SNMP处理模块13用于发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据。
本实施例的数据采集处理装置可以执行图1所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
优选地,定时任务处理模块12可以定时驱动SNMP处理模块13发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该采集对象实例对应的被管理的网络节点。
在本实施例中,通过根据预设的归并复用规则和接收到的数据采集处理请求中的采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,并按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送该创建后的采集任务和/或处理后的采集任务对应的SNMP请求给该数据采集处理请求中的采集对象实例对应的被管理的网络节点,以获取该被管理的网络节点中该创建后的采集任务和/或处理后的采集任务中的变量的数据,由于将采集参数中的变量通过变量对应的引用计数归并复用到一个采集任务中,因此,使得一组内的变量归并为一个SNMP请求来一同采集,从而有效地解决了现有技术中采集不必要的数据,SNMP请求过多,以及重复采集而导致数据不一致的问题,进而有效地提高了采集效率。
图15为本发明数据采集处理装置的另一个实施例的结构示意图,在上述图14所示实施例的基础上,如图15所示,该SNMP采集模块11包括:接收单元111、判断单元112和采集处理单元113;其中,接收单元111用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为增加数据采集处理请求,且该集参数包括第一变量和第一周期;判断单元112用于判断是否存在第一采集任务;该第一采集任务包含该第一变量;判断单元112还用于若判断出存在该第一采集任务,则判断该第一采集任务的第二周期是否小于或等于该第一周期;采集处理单元113用于若该判断单元112判断出该第二周期小于或等于该第一周期,则将该第一采集任务中的第一变量对应的引用计数加1,并缓存该第一变量对应的该第一周期。
可选地,判断单元112还用于若判断出该第二周期大于该第一周期,则判断该第一采集任务中是否还存在除该第一变量的其他变量;采集处理单元113还用于若判断单元112判断出该第一采集任务中还存在除该第一变量的其他变量,则将该第一采集任务中的第一变量删除。
更为可选地,采集处理单元113还用于若判断单元112判断出该第一采集任务中不存在除该第一变量的其他变量,则将该第一采集任务删除。
更为可选地,该判断单元112还用于判断是否存在第二采集任务,该第二采集任务中的变量与该第一变量属于同一分组,且该第二采集任务的周期与该第一周期相同;该处理单元113还用于若该判断单元112判断出存在该第二采集任务,则在该二采集任务中增加该第一变量;或者,若该判断单元112判断出不存在该第二采集任务,则创建第三采集任务,该第三采集任务包括该第一变量,且该第三采集任务的周期为该第一周期。
本实施例可以执行图2所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
进一步的,在本发明的又一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为删除数据采集处理请求,且该采集参数包括第一变量和第一周期;判断单元,用于判断是否存在第一采集任务;该第一采集任务包括该第一变量;采集处理单元,用于若该判断单元判断出存在该第一采集任务,则将该第一采集任务中的第一变量对应的引用计数减1;该判断单元还用于判断该第一变量对应的引用计数减1后的引用计数是否为0;该判断单元还用于若判断出该第一变量对应的引用计数减1后的引用计数为0,则判断该第一采集任务中是否包括除该第一变量的其他变量;该采集处理单元还用于若该判断单元判断出该第一采集任务中包括除该第一变量的其他变量,则将该第一采集任务中的第一变量删除;或者,若该判断单元判断出该第一采集任务中不包括除该第一变量的其他变量,则将该第一采集任务删除。
可选地,该判断单元还用于若判断出该第一变量对应的引用计数减1后的引用计数不为0,则在该第一变量的最小采集周期大于该第一采集任务的周期时,判断该第一采集任务中是否存在除该第一变量的其他变量;该采集处理单元还用于若该判断单元判断出该第一采集任务中存在除该第一变量的其他变量,则将该第一采集任务中的第一变量删除;或者,该采集处理单元还用于若该判断单元判断出所述第一采集任务中不存在除该第一变量的其他变量,则将该第一采集任务删除。
更为可选地,该判断单元还用于判断是否存在第四采集任务,该第四采集任务中的变量与该第一变量属于同一分组,且该第四采集任务的周期与该第一变量的最小周期相同;
该采集处理单元还用于若该判断单元判断出存在该第四采集任务,则在该第四采集任务中增加该第一变量;或者,若该判断单元判断出不存在该第四采集任务,则创建第五采集任务,该第五采集任务包括该第一变量,且该第五采集任务的周期为该第一变量的最小周期。
本实施例可以执行图3所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的还一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为修改数据采集处理请求,且该采集参数包括:第一变量、第三周期和第四周期;判断单元用于判断是否存在第一采集任务;该第一采集任务包括该第一变量;采集处理单元,用于若该判断单元判断存在该第一采集任务,则将该第一变量缓存的第三周期修改为该第四周期;其中,该第三周期为该第一变量缓存的一个周期,该第四周期为修改后的周期;该判断单元还用于在修改后的该第一变量缓存的周期中的最小周期不等于该第一采集任务的周期时,判断该第一采集任务是否存在除该第一变量的其他变量;该采集处理单元还用于若该判断单元判断出该第一采集任务中存在除该第一变量的其他变量,则将该第一采集任务中的第一变量删除;或者,该采集处理单元还用于若该判断单元判断出该第一采集任务中不存在除该第一变量的其他变量,则将该第一采集任务删除。
可选地,在采集处理单元还用于若该判断单元判断出该第一采集任务中存在除该第一变量的其他变量,则将该第一采集任务中的第一变量删除;或者,该采集处理单元还用于若该判断单元判断出该第一采集任务中不存在除该第一变量的其他变量,则将该第一采集任务删除之后,该判断单元还用于判断是否存在第四采集任务,该第四采集任务中的变量与该第一变量属于同一分组,且该第四采集任务的周期与该第一变量的最小周期相同;该采集处理单元还用于若该判断单元判断出存在该第四采集任务,则在该第四采集任务中增加该第一变量。
更为可选地,该采集处理单元还用于若该判断单元判断出不存在该第四采集任务,则创建第五采集任务,该第五采集任务包括该第一变量,且该第五采集任务的周期为该第一变量的最小周期。
本实施例可以执行图4所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的再一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为增加数据采集处理请求,且该采集参数包括:第一变量和第一周期;判断单元,用于判断是否存第六采集任务;该第六采集任务中的变量与该第一变量属于同一分组;该判断单元还用于若判断出存在该第六采集任务,则判断该第六采集任务的周期是否小于或等于该第一周期;该判断单元还用于若判断出该第六采集任务的周期小于或等于该第一周期,则判断该第六采集任务中是否包含该第一变量;采集处理单元,用于若该判断单元判断出该第六采集任务中包含该第一变量,则将该第六采集任务中的第一变量对应的引用计数加1,并缓存该第六采集任务对应的该第一周期;或者,若该判断单元判断出该第六采集任务中不包含该第一变量,则在该第六采集任务中增加该第一变量。
可选地,该采集处理单元还用于若该判断单元判断出该第六采集任务的周期大于该第一周期,则将该第六采集任务的周期修改为该第一周期。
更为可选地,该采集处理单元还用于若该判断单元判断出不存在该第六采集任务,则创建第七采集任务,该第七采集任务包括该第一变量,且该第七采集任务的周期为该第一周期。
本实施例可以执行图6所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的另一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为删除数据采集处理请求,且该采集参数包括:第一变量和第一周期;判断单元,用于判断是否存在第一采集任务;该第一采集任务中包括该第一变量;采集处理单元,用于若该判断单元判断存在该第一采集任务,则将该第一变量对应的引用计数减1;该判断单元还用于判断该第一变量对应的引用计数减1后的引用计数是否为0;该判断单元还用于若判断出该第一变量对应的引用计数减1后的引用计数为0,则判断该第一采集任务中是否包括除该第一变量的其他变量;该采集处理单元还用于若该判断单元判断出该第一采集任务中包括除该第一变量的其他变量,则将该第一采集任务中的第一变量删除;或者,若该判断单元判断出该第一采集任务中不包括除该第一变量的其他变量,则将该第一采集任务删除。
可选地,该采集处理单元还用于在该第一采集任务中的第五周期大于该第一采集任务的周期时,修改该第一采集任务的周期为该第五周期,其中,该第五周期为该第一采集任务中的一个变量缓存的周期,且小于或等于该第一采集任务中每个变量缓存的周期。
本实施例可以执行图7所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的又一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为修改数据采集处理请求,且该采集参数包括:第一变量、第三周期和第四周期;判断单元,用于判断是否存在第一采集任务;该第一采集任务中包括该第一变量;采集处理单元,用于若该判断单元判断出存在,则将该第一变量缓存的该第三周期修改为该第四周期;并在该第一变量的缓存的周期修改后,第五周期不等于该第一采集任务的周期时,修改该第一采集任务的周期为该第五周期;其中,该第三周期为该第一变量缓存的一个周期,该第四周期为修改后的周期;该第五周期为该第一采集任务中的一个变量缓存的周期,且小于或等于该第一采集任务中每个变量缓存的周期。
本实施例可以执行图8所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的还一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为增加数据采集处理请求,且该采集参数包括:第一变量和第一周期;判断单元用于判断是否存在第二采集任务;该第二采集任务中的变量与该第一变量属于同一分组,且该第二采集任务的周期与该第一周期相同;该判断单元还用于若判断出存在该第二采集任务,则判断该第二采集任务中是否包括该第一变量;采集处理单元,用于若该判断单元判断出该第二采集任务中包括该第一变量,则将该第二采集任务中的第一变量对应的引用计数加1;或者,若该判断单元判断出该第二采集任务中不包括该第一变量,则在该第二采集任务中增加该第一变量。
可选地,该采集处理单元还用于若该判断单元判断出不存在该第二采集任务,则创建该第三采集任务,该第三采集任务包括该第一变量,且该第三采集任务的周期为该第一周期。
本实施例可以执行图10所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的再一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为删除数据采集处理请求,且该采集参数包括:第一变量和第一周期;判断单元,用于判断是否存第七采集任务;该第七采集任务包括该第一变量,且该第七采集任务的周期与该第一周期相同;采集处理单元,用于若该判断单元判断出存在该第七采集任务,则将该第一变量对应的引用计数减1;判断单元还用于在该第一变量对应的引用计数减1后的引用计数为0时,判断该第七采集任务中是否包括除该第一变量的其他变量;该采集处理单元还用于若该判断单元判断出该第七采集任务中包括除该第一变量的其他变量,则将该第七采集任务中的第一变量删除;或者,若该判断单元判断出该第七采集任务中不包括除该第一变量的其他变量,则将该第七采集任务删除。
本实施例可以执行图11所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
更进一步的,在本发明的另一个实施例中,在上述图14所示实施例的基础上,该SNMP采集模块11包括:接收单元、判断单元和采集处理单元;其中,接收单元,用于接收数据采集处理请求,该数据采集处理请求包括采集对象实例和采集参数;其中,该数据采集处理请求为修改数据采集处理请求,且该采集参数包括:第一变量、第三周期和第四周期;判断单元,用于判断是否存在第八采集任务;该第八采集任务中的变量与该第一变量属于同一分组,且该第八采集任务的周期与该第四周期相同;该判断单元还用于若判断出存在该第八采集任务,则判断该第八采集任务中是否包括该第一变量;采集处理单元,用于若该判断单元判断出该第八采集任务中包括该第一变量,则将该第一变量对应的引用计数加1;或者,若该判断单元判断出该第八采集任务中不包括该第一变量,则将该第八采集任务中增加该第一变量;该判断单元还用于判断是否存在第九采集任务,该第九采集任务中包括该第一变量,且该第九采集任务的周期与该第三周期相同;该采集处理单元还用于若该判断单元判断出存在该第九采集任务,则将该第一变量对应的引用计数减1;其中,该第三周期为该第一变量对应的修改前的周期,该第四周期为该第一变量对应的修改后的周期。
可选地,该采集处理单元还用于若该判断单元判断出不存在该第八采集任务,则创建第十采集任务,该第十采集任务包括该第一变量,且该第十采集任务的周期为该第四周期。
更为可选地,该采集处理单元在将该第一变量对应的引用计数减1之后,若该第一变量对应的引用计数为0,则该判断单元还用于判断该第九采集任务是否还包括除该第一变量之外的其他变量;
该采集处理单元还用于若该判断单元判断出该第九采集任务还包括除该第一变量之外的其他变量,则将该第九采集任务中的该第一变量删除;或者,若该判断单元判断出该第九采集任务不包括除该第一变量之外的其他变量,则删除该第九采集任务。
本实施例可以执行图12所示方法实施例的技术方案,其实现原理相类似,此处不再赘述。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (42)
1.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包含所述第一变量;
若判断出存在所述第一采集任务,则判断所述第一采集任务的第二周期是否小于或等于所述第一周期;
若判断出所述第二周期小于或等于所述第一周期,则将所述第一采集任务中的第一变量对应的引用计数加1,并缓存所述第一变量对应的所述第一周期。
2.根据权利要求1所述的数据采集处理方法,其特征在于,还包括:
若判断出所述第二周期大于所述第一周期,则判断所述第一采集任务中是否还存在除所述第一变量的其他变量;
若判断出所述第一采集任务中还存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除。
3.根据权利要求2所述的数据采集处理方法,其特征在于,还包括:
若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
4.根据权利要求1或2或3所述的数据采集处理方法,其特征在于,若判断不存在所述第一采集任务,或者,在所述将所述第一采集任务中的第一变量删除之后,或者,在所述将所述第一采集任务删除之后,所述方法还包括;
判断是否存在第二采集任务,所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
若存在所述第二采集任务,则在所述二采集任务中增加所述第一变量;或者,若不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
5.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
若判断出存在所述第一采集任务,则将所述第一采集任务中的第一变量对应的引用计数减1;
判断所述第一变量对应的引用计数减1后的引用计数是否为0,若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
6.根据权利要求5所述的数据采集处理方法,其特征在于,还包括:
若判断出所述第一变量对应的引用计数减1后的引用计数不为0,则在所述第一变量的最小采集周期大于所述第一采集任务的周期时,判断所述第一采集任务中是否存在除所述第一变量的其他变量;
若判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
7.根据权利要求6所述的数据采集处理方法,其特征在于,还包括:
判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
若判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;
若判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
8.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则、所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
若判断存在所述第一采集任务,则将所述第一变量缓存的第三周期修改为所述第四周期;其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;
在修改后的所述第一变量缓存的周期中的最小周期不等于所述第一采集任务的周期时,判断所述第一采集任务是否存在除所述第一变量的其他变量;
若判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;
判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
若判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;
若判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
9.根据权利要求8所述的数据采集处理方法,其特征在于,在所述判断是否存在第四采集任务之前,所述方法还包括:
若判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
10.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存第六采集任务;所述第六采集任务中的变量与所述第一变量属于同一分组;
若判断出存在所述第六采集任务,则判断所述第六采集任务的周期是否小于或等于所述第一周期;
若判断出所述第六采集任务的周期小于或等于所述第一周期,则判断所述第六采集任务中是否包含所述第一变量;
若判断出所述第六采集任务中包含所述第一变量,则将所述第六采集任务中的第一变量对应的引用计数加1,并缓存所述第六采集任务对应的所述第一周期;或者,若判断出所述第六采集任务中不包含所述第一变量,则在所述第六采集任务中增加所述第一变量。
11.根据权利要求10所述的数据采集处理方法,其特征在于,在所述判断所述第六采集任务的周期是否小于或等于所述第一周期之后,所述方法还包括:
若判断出所述第六采集任务的周期大于所述第一周期,则将所述第六采集任务的周期修改为所述第一周期。
12.根据权利要求10所述的数据采集处理方法,其特征在于,还包括:
若判断出不存在所述第六采集任务,则创建第七采集任务,所述第七采集任务包括所述第一变量,且所述第七采集任务的周期为所述第一周期。
13.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
若判断存在所述第一采集任务,则将所述第一变量对应的引用计数减1;
判断所述第一变量对应的引用计数减1后的引用计数是否为0,若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
14.根据权利要求13所述的数据采集处理方法,其特征在于,在所述将所述第一采集任务中的第一变量删除之后,或者,在判断出所述第一变量对应的引用计数减1后的引用计数不为0时,所述方法还包括:
在所述第一采集任务中的第五周期大于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期,其中,所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
15.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
若判断出存在,则将所述第一变量缓存的所述第三周期修改为所述第四周期;并在所述第一变量的缓存的周期修改后,第五周期不等于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期;
其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
16.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为增加数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第二采集任务;所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
若判断出存在所述第二采集任务,则判断所述第二采集任务中是否包括所述第一变量;
若判断出所述第二采集任务中包括所述第一变量,则将所述第二采集任务中的第一变量对应的引用计数加1;或者,若判断出所述第二采集任务中不包括所述第一变量,则在所述第二采集任务中增加所述第一变量。
17.根据权利要求16所述的数据采集处理方法,其特征在于,还包括:
若判断出不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
18.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为删除数据采集处理请求时,所述采集参数包括:第一变量和第一周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存第七采集任务;所述第七采集任务包括所述第一变量,且所述第七采集任务的周期与所述第一周期相同;
若判断出存在所述第七采集任务,则将所述第一变量对应的引用计数减1;
在所述第一变量对应的引用计数减1后的引用计数为0时,判断所述第七采集任务中是否包括除所述第一变量的其他变量;
若判断出所述第七采集任务中包括除所述第一变量的其他变量,则将所述第七采集任务中的第一变量删除;或者,若判断出所述第七采集任务中不包括除所述第一变量的其他变量,则将所述第七采集任务删除。
19.一种数据采集处理方法,其特征在于,包括:
接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;
根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
按照创建后的采集任务和/或处理后的采集任务中的周期,构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
当所述数据采集处理请求为修改数据采集处理请求时,所述采集参数包括:第一变量、第三周期和第四周期,则所述根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,包括:
判断是否存在第八采集任务;所述第八采集任务中的变量与所述第一变量属于同一分组,且所述第八采集任务的周期与所述第四周期相同;
若判断出存在所述第八采集任务,则判断所述第八采集任务中是否包括所述第一变量;
若判断出所述第八采集任务中包括所述第一变量,则将所述第一变量对应的引用计数加1;或者,若判断出所述第八采集任务中不包括所述第一变量,则将所述第八采集任务中增加所述第一变量;
判断是否存在第九采集任务,所述第九采集任务中包括所述第一变量,且所述第九采集任务的周期与所述第三周期相同;
若判断出存在所述第九采集任务,则将所述第一变量对应的引用计数减1;
其中,所述第三周期为所述第一变量对应的修改前的周期,所述第四周期为所述第一变量对应的修改后的周期。
20.根据权利要求19所述的数据采集处理方法,其特征在于,还包括:
若判断出不存在所述第八采集任务,则创建第十采集任务,所述第十采集任务包括所述第一变量,且所述第十采集任务的周期为所述第四周期。
21.根据权利要求19所述的数据采集处理方法,其特征在于,还包括:
在将所述第一变量对应的引用计数减1之后,若所述第一变量对应的引用计数为0,则判断所述第九采集任务是否还包括除所述第一变量之外的其他变量;
若判断出所述第九采集任务还包括除所述第一变量之外的其他变量,则将所述第九采集任务中的所述第一变量删除;
若判断出所述第九采集任务不包括除所述第一变量之外的其他变量,则删除所述第九采集任务。
22.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述集参数包括第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包含所述第一变量;
所述判断单元还用于若判断出存在所述第一采集任务,则判断所述第一采集任务的第二周期是否小于或等于所述第一周期;
采集处理单元,用于若所述判断单元判断出所述第二周期小于或等于所述第一周期,则将所述第一采集任务中的第一变量对应的引用计数加1,并缓存所述第一变量对应的所述第一周期。
23.根据权利要求22所述的数据采集处理装置,其特征在于,所述判断单元还用于若判断出所述第二周期大于所述第一周期,则判断所述第一采集任务中是否还存在除所述第一变量的其他变量;
所述采集处理单元还用于若判断单元判断出所述第一采集任务中还存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除。
24.根据权利要求23所述的数据采集处理装置,其特征在于,所述采集处理单元还用于若判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
25.根据权利要求22或23或24所述的数据采集处理装置,其特征在于,所述判断单元还用于判断是否存在第二采集任务,所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第二采集任务,则在所述二采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
26.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
采集处理单元,用于若所述判断单元判断出存在所述第一采集任务,则将所述第一采集任务中的第一变量对应的引用计数减1;
所述判断单元还用于判断所述第一变量对应的引用计数减1后的引用计数是否为0;
所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若所述判断单元判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
27.根据权利要求26所述的数据采集处理装置,其特征在于,所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数不为0,则在所述第一变量的最小采集周期大于所述第一采集任务的周期时,判断所述第一采集任务中是否存在除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
28.根据权利要求27所述的数据采集处理装置,其特征在于:所述判断单元还用于判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
29.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务包括所述第一变量;
采集处理单元,用于若所述判断单元判断存在所述第一采集任务,则将所述第一变量缓存的第三周期修改为所述第四周期;其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;
所述判断单元还用于在修改后的所述第一变量缓存的周期中的最小周期不等于所述第一采集任务的周期时,判断所述第一采集任务是否存在除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中存在除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中不存在除所述第一变量的其他变量,则将所述第一采集任务删除。
30.根据权利要求29所述的数据采集处理装置,其特征在于,所述判断单元还用于判断是否存在第四采集任务,所述第四采集任务中的变量与所述第一变量属于同一分组,且所述第四采集任务的周期与所述第一变量的最小周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第四采集任务,则在所述第四采集任务中增加所述第一变量;或者,若所述判断单元判断出不存在所述第四采集任务,则创建第五采集任务,所述第五采集任务包括所述第一变量,且所述第五采集任务的周期为所述第一变量的最小周期。
31.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存第六采集任务;所述第六采集任务中的变量与所述第一变量属于同一分组;
所述判断单元还用于若判断出存在所述第六采集任务,则判断所述第六采集任务的周期是否小于或等于所述第一周期;
所述判断单元还用于若判断出所述第六采集任务的周期小于或等于所述第一周期,则判断所述第六采集任务中是否包含所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第六采集任务中包含所述第一变量,则将所述第六采集任务中的第一变量对应的引用计数加1,并缓存所述第六采集任务对应的所述第一周期;或者,若所述判断单元判断出所述第六采集任务中不包含所述第一变量,则在所述第六采集任务中增加所述第一变量。
32.根据权利要求31所述的数据采集处理装置,其特征在于,所述采集处理单元还用于若所述判断单元判断出所述第六采集任务的周期大于所述第一周期,则将所述第六采集任务的周期修改为所述第一周期。
33.根据权利要求31所述的数据采集处理装置,其特征在于,所述采集处理单元还用于若所述判断单元判断出不存在所述第六采集任务,则创建第七采集任务,所述第七采集任务包括所述第一变量,且所述第七采集任务的周期为所述第一周期。
34.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
采集处理单元,用于若所述判断单元判断存在所述第一采集任务,则将所述第一变量对应的引用计数减1;
所述判断单元还用于判断所述第一变量对应的引用计数减1后的引用计数是否为0;
所述判断单元还用于若判断出所述第一变量对应的引用计数减1后的引用计数为0,则判断所述第一采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第一采集任务中包括除所述第一变量的其他变量,则将所述第一采集任务中的第一变量删除;或者,若所述判断单元判断出所述第一采集任务中不包括除所述第一变量的其他变量,则将所述第一采集任务删除。
35.根据权利要求34所述的数据采集处理装置,其特征在于,所述采集处理单元还用于在所述第一采集任务中的第五周期大于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期,其中,所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于或等于所述第一采集任务中每个变量缓存的周期。
36.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第一采集任务;所述第一采集任务中包括所述第一变量;
采集处理单元,用于若所述判断单元判断出存在,则将所述第一变量缓存的所述第三周期修改为所述第四周期;并在所述第一变量的缓存的周期修改后,第五周期不等于所述第一采集任务的周期时,修改所述第一采集任务的周期为所述第五周期;
其中,所述第三周期为所述第一变量缓存的一个周期,所述第四周期为修改后的周期;所述第五周期为所述第一采集任务中的一个变量缓存的周期,且小于所述第一采集任务中每个变量缓存的周期。
37.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为增加数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存在第二采集任务;所述第二采集任务中的变量与所述第一变量属于同一分组,且所述第二采集任务的周期与所述第一周期相同;
所述判断单元还用于若判断出存在所述第二采集任务,则判断所述第二采集任务中是否包括所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第二采集任务中包括所述第一变量,则将所述第二采集任务中的第一变量对应的引用计数加1;或者,若所述判断单元判断出所述第二采集任务中不包括所述第一变量,则在所述第二采集任务中增加所述第一变量。
38.根据权利要求37所述的数据采集处理装置,其特征在于,所述采集处理单元还用于若所述判断单元判断出不存在所述第二采集任务,则创建第三采集任务,所述第三采集任务包括所述第一变量,且所述第三采集任务的周期为所述第一周期。
39.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为删除数据采集处理请求,且所述采集参数包括:第一变量和第一周期;
判断单元,用于判断是否存第七采集任务;所述第七采集任务包括所述第一变量,且所述第七采集任务的周期与所述第一周期相同;
采集处理单元,用于若所述判断单元判断出存在所述第七采集任务,则将所述第一变量对应的引用计数减1;
判断单元还用于在所述第一变量对应的引用计数减1后的引用计数为0时,判断所述第七采集任务中是否包括除所述第一变量的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第七采集任务中包括除所述第一变量的其他变量,则将所述第七采集任务中的第一变量删除;或者,若所述判断单元判断出所述第七采集任务中不包括除所述第一变量的其他变量,则将所述第七采集任务删除。
40.一种数据采集处理装置,其特征在,包括:
SNMP采集模块,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;根据预设的归并复用规则和所述采集参数,创建采集任务和/或对当前存储的采集任务进行相应的处理,以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中;
定时任务处理模块,用于按照创建后的采集任务和/或处理后的采集任务中的周期,构建创建后的采集任务和/或处理后的采集任务对应的SNMP请求;
SNMP处理模块,用于发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点,以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据;
所述SNMP采集模块包括:
接收单元,用于接收数据采集处理请求,所述数据采集处理请求包括采集对象实例和采集参数;其中,所述数据采集处理请求为修改数据采集处理请求,且所述采集参数包括:第一变量、第三周期和第四周期;
判断单元,用于判断是否存在第八采集任务;所述第八采集任务中的变量与所述第一变量属于同一分组,且所述第八采集任务的周期与所述第四周期相同;
所述判断单元还用于若判断出存在所述第八采集任务,则判断所述第八采集任务中是否包括所述第一变量;
采集处理单元,用于若所述判断单元判断出所述第八采集任务中包括所述第一变量,则将所述第一变量对应的引用计数加1;或者,若所述判断单元判断出所述第八采集任务中不包括所述第一变量,则将所述第八采集任务中增加所述第一变量;
所述判断单元还用于判断是否存在第九采集任务,所述第九采集任务中包括所述第一变量,且所述第九采集任务的周期与所述第三周期相同;
所述采集处理单元还用于若所述判断单元判断出存在所述第九采集任务,则将所述第一变量对应的引用计数减1;
其中,所述第三周期为所述第一变量对应的修改前的周期,所述第四周期为所述第一变量对应的修改后的周期。
41.根据权利要求40所述的数据采集处理装置,其特征在于,所述采集处理单元还用于若所述判断单元判断出不存在所述第八采集任务,则创建第十采集任务,所述第十采集任务包括所述第一变量,且所述第十采集任务的周期为所述第四周期。
42.根据权利要求40所述的数据采集处理装置,其特征在于,所述采集处理单元在将所述第一变量对应的引用计数减1之后,若所述第一变量对应的引用计数为0,则所述判断单元还用于判断所述第九采集任务是否还包括除所述第一变量之外的其他变量;
所述采集处理单元还用于若所述判断单元判断出所述第九采集任务还包括除所述第一变量之外的其他变量,则将所述第九采集任务中的所述第一变量删除;或者,若所述判断单元判断出所述第九采集任务不包括除所述第一变量之外的其他变量,则删除所述第九采集任务。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310611213.3A CN103684851B (zh) | 2013-11-26 | 2013-11-26 | 数据采集方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310611213.3A CN103684851B (zh) | 2013-11-26 | 2013-11-26 | 数据采集方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103684851A CN103684851A (zh) | 2014-03-26 |
CN103684851B true CN103684851B (zh) | 2017-03-08 |
Family
ID=50321232
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310611213.3A Active CN103684851B (zh) | 2013-11-26 | 2013-11-26 | 数据采集方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103684851B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107797465A (zh) * | 2016-09-06 | 2018-03-13 | 北京百度网讯科技有限公司 | 监控方法和装置 |
CN106506072B (zh) * | 2016-10-28 | 2019-06-07 | 瑞斯康达科技发展股份有限公司 | 一种数据采集方法和装置 |
CN106603282B (zh) * | 2016-12-08 | 2019-11-29 | 上海斐讯数据通信技术有限公司 | 一种网络资源管理系统以及网络中性能数据的采集方法 |
CN108347482B (zh) * | 2018-02-06 | 2021-10-08 | 阿里巴巴(中国)有限公司 | 信息采集方法及装置 |
CN111082960B9 (zh) * | 2019-04-15 | 2023-01-24 | 中兴通讯股份有限公司 | 数据的处理方法及装置 |
CN112134730B (zh) * | 2020-09-07 | 2022-02-22 | 广州爱浦路网络技术有限公司 | 网络数据采集方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090235344A1 (en) * | 2008-03-17 | 2009-09-17 | Hiroki Ohzaki | Information processing apparatus, information processing method, and information processing program product |
CN102035664A (zh) * | 2009-09-27 | 2011-04-27 | 中兴通讯股份有限公司 | 简单网络管理协议设备的数据并行采集归并方法及系统 |
CN102291269A (zh) * | 2011-09-29 | 2011-12-21 | 迈普通信技术股份有限公司 | 一种数据归并处理方法 |
CN102298601A (zh) * | 2011-05-23 | 2011-12-28 | 北京捷成世纪科技股份有限公司 | 面向广电行业的存储设备的监控数据转换方法及转换器 |
-
2013
- 2013-11-26 CN CN201310611213.3A patent/CN103684851B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090235344A1 (en) * | 2008-03-17 | 2009-09-17 | Hiroki Ohzaki | Information processing apparatus, information processing method, and information processing program product |
CN102035664A (zh) * | 2009-09-27 | 2011-04-27 | 中兴通讯股份有限公司 | 简单网络管理协议设备的数据并行采集归并方法及系统 |
CN102298601A (zh) * | 2011-05-23 | 2011-12-28 | 北京捷成世纪科技股份有限公司 | 面向广电行业的存储设备的监控数据转换方法及转换器 |
CN102291269A (zh) * | 2011-09-29 | 2011-12-21 | 迈普通信技术股份有限公司 | 一种数据归并处理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103684851A (zh) | 2014-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103684851B (zh) | 数据采集方法和装置 | |
CN104025549B (zh) | 与服务器事务延迟信息相关的技术 | |
CN104283948B (zh) | 服务器集群系统及其负载均衡实现方法 | |
CN104520814B (zh) | 用于配置云计算系统的系统和方法 | |
CN104541247B (zh) | 用于调整云计算系统的系统和方法 | |
CN103533097B (zh) | 一种网络爬虫下载解析方法及装置 | |
CN106130796B (zh) | Sdn网络拓扑流量可视化监控方法及控制终端 | |
CN104283897B (zh) | 基于多数据流聚类分析的木马通信特征快速提取方法 | |
CN107508722A (zh) | 一种业务监控方法和装置 | |
CN109617878A (zh) | 一种蜜网的组建方法及系统、计算机可读存储介质 | |
CN111726421B (zh) | 一种实现网络靶场与工控设备互联的方法与装置 | |
CN103200190A (zh) | 一种面向QualNet网络半实物仿真的实物接入方法 | |
CN106027406A (zh) | 基于Netflow的NS3仿真系统流量导入方法 | |
CN110519077A (zh) | 一种日志采集系统、方法、装置、服务器及存储介质 | |
CN111209460A (zh) | 基于scrapy爬虫框架的数据采集系统及方法 | |
CN109271793A (zh) | 物联网云平台设备类别识别方法及系统 | |
CN102142991B (zh) | 网络割接仿真的方法和系统 | |
CN106899503A (zh) | 一种数据中心网络的路由选择方法及网络管理器 | |
CN101741608A (zh) | 一种基于流量特征的p2p应用识别系统及方法 | |
CN109818820A (zh) | 流量数据监控方法、装置、电子设备及存储介质 | |
CN107733696A (zh) | 一种机器学习和人工智能应用一体机部署方法 | |
CN110266679A (zh) | 容器网络隔离方法及装置 | |
CN105337764B (zh) | 一种设备资源信息采集方法 | |
CN108924203A (zh) | 数据副本自适应分布方法、分布式计算系统及相关设备 | |
Iannaccone | Fast prototyping of network data mining applications |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |