CN105099742B - 一种采集数据的方法、装置、系统及终端 - Google Patents
一种采集数据的方法、装置、系统及终端 Download PDFInfo
- Publication number
- CN105099742B CN105099742B CN201410212234.2A CN201410212234A CN105099742B CN 105099742 B CN105099742 B CN 105099742B CN 201410212234 A CN201410212234 A CN 201410212234A CN 105099742 B CN105099742 B CN 105099742B
- Authority
- CN
- China
- Prior art keywords
- label information
- notification message
- data
- network
- matched
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
Abstract
本发明公开了一种采集数据的方法、装置、系统及终端,其中,该方法包括:判断接收到的通知消息中的标签信息与预定标签信息是否匹配;在标签信息与预定标签信息相匹配的情况下,对网络设备发送的数据进行采集。本发明利用了通知消息,根据通知消息中的标签信息来判断是否需要进行数据采集,当根据标签信息确定要采集数据时,再对该标签信息对应的网络设备进行数据采集,该方法无需检测网络设备在线与否,且只针对需要采集的网络设备进行采集,效率较高,解决了现有技术中的采集方法需要系统主动检测设备是否在线,执行的效率较低,且该方法还会在短时间内造成网络风暴的问题。
Description
技术领域
本发明涉及通讯领域,特别是涉及一种采集数据的方法、装置、系统及终端。
背景技术
网络系统中的网络设备的数量通常是海量的,为了掌握设备业务信息或状态信息,所以需要对网络中海量的网络设备进行数据采集。
传统的数据采集方案一般采用定时调度的方式对设备进行流量采集,即在同一时刻批量向所有终端发起反向连接请求,然后终端向其反馈通知消息。但此种采集方案是针对网络中百万级的网络设备,如果使用定时调度往往会在短时间造成网络风暴;而且大量的设备是处在离线状态,这就需要系统去主动检测设备是否在线,执行的效率与成功率往往也比较低下。
发明内容
本发明提供一种采集数据的方法、装置、系统及终端,用以解决现有技术中的采集方法需要系统主动检测设备是否在线,执行的效率较低,且该方法还会在短时间内造成网络风暴的问题。
为解决上述技术问题,一方面,本发明提供一种采集数据的方法,包括:判断接收到的通知消息中的标签信息与预定标签信息是否匹配;在所述标签信息与预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集。
进一步,根据接收到的通知消息中的标签信息确定是否对网络设备进行数据采集之前,还包括:接收所述网络设备按照预定时间段上报的所述通知消息,其中,所述通知消息中携带有所述标签信息;从所述通知消息中获取所述标签信息。
进一步,所述网络设备为支持TR069协议的网络设备。
进一步,所述通知消息包括:心跳Inform消息。
进一步,所述标签信息包括:TR069协议的Inform事件号。
另一方面,本发明还提供一种采集数据的装置,包括:解析模块,用于判断接收到的通知消息中的标签信息与预定标签信息是否匹配;采集模块,用于在所述标签信息与预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集。
进一步,所述装置还包括:监听模块,用于接收所述网络设备按照预定时间段上报的所述通知消息,其中,所述通知消息中携带有所述标签信息;所述解析模块,还用于从所述通知消息中获取所述标签信息。
进一步,所述网络设备为支持TR069协议的网络设备。
又一方面,本发明还提供一种终端,包括:上述任一项所述的采集数据的装置。
再一方面,本发明还提供一种采集数据的系统,包括:上述任一项所述的采集数据的装置与网络设备;其中,所述网路设备,用于按照预定时间段上报通知消息,其中,所述通知消息中携带有所述标签信息;所述采集数据的装置,用于判断所述标签信息与预定标签信息是否匹配,并在所述标签信息与预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集。
本发明利用了通知消息,根据通知消息中的标签信息来判断是否需要进行数据采集,当根据标签信息确定要采集数据时,再对该标签信息对应的网络设备进行数据采集,该方法无需检测网络设备在线与否,且只针对需要采集的网络设备进行采集,效率较高,解决了现有技术中的采集方法需要系统主动检测设备是否在线,执行的效率较低,且该方法还会在短时间内造成网络风暴的问题。
附图说明
图1是本发明实施例中采集数据的方法的流程图;
图2是本发明实施例中采集数据的装置的结构示意图;
图3是本发明实施例中采集数据的装置的优选结构示意图;
图4是本发明实施例中采集数据的系统的架构示意图;
图5是本发明优选实施例中传统对网络设备数据采集处理流程示意图;
图6是本发明优选实施例中网络设备数据采集的方法的流程图。
具体实施方式
为了解决现有技术中的采集方法需要系统主动检测设备是否在线,执行的效率较低,且该方法还会在短时间内造成网络风暴的问题,本发明提供了一种采集数据的方法、装置、系统及终端,以下结合附图以及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不限定本发明。
本发明实施例提供了一种采集数据的方法,该方法的流程如图1所示,包括步骤S102至步骤S104:
S102,判断接收到的通知消息中的标签信息与预定标签信息是否匹配。
S104,在标签信息与预定标签信息相匹配的情况下,对网络设备发送的数据进行采集。
本发明实施例利用了通知消息,根据通知消息中的标签信息来判断是否需要进行数据采集,当根据标签信息确定要采集数据时,再对该标签信息对应的网络设备进行数据采集,该方法无需检测网络设备在线与否,且只针对需要采集的网络设备进行采集,效率较高,解决了现有技术中的采集方法需要系统主动检测设备是否在线,执行的效率较低,且该方法还会在短时间内造成网络风暴的问题。
实施过程中,在判断接收到的通知消息中的标签信息与预定标签信息是否匹配之前,还需要接收网络设备按照预定时间段上报的通知消息,其中,通知消息中携带有标签信息;再从通知消息中获取标签信息。
本发明实施例针对的是海量设备数据采集,因此,网络设备可以为支持TR069协议的网络设备,例如,机顶盒、调制解调器等。
在网络设备为支持TR069协议的情况下,通知消息可以为心跳(Inform)消息;标签信息为TR069协议的Inform事件号。
本发明实施例还提供了一种采集数据的装置,该装置的结构示意如图2所示,包括:解析模块10,用于判断接收到的通知消息中的标签信息与预定标签信息是否匹配;采集模块20,与解析模块10耦合,用于在标签信息与预定标签信息相匹配的情况下,对网络设备发送的数据进行采集。其中,该网络设备为支持TR069协议的网络设备。
图3示出了上述装置的优选结构示意图,上述装置还包括:监听模块30,与解析模块10耦合,用于接收网络设备按照预定时间段上报的通知消息,其中,通知消息中携带有标签信息;解析模块10,还用于从通知消息中获取标签信息。
本发明实施例还提供了一种终端,其包括上述采集数据的装置,当然,采集数据的装置可以只是该终端的一部分,本领域技术人员可以根据需求在该终端上设置其他功能。
本发明实例还提供了一种采集数据的系统,其架构示意如图4所示,包括:上述的采集数据的装置与网络设备;其中,网路设备,用于按照预定时间段上报通知消息,其中,通知消息中携带有标签信息;采集数据的装置,用于判断标签信息与预定标签信息是否匹配,并在标签信息与预定标签信息相匹配的情况下,对网络设备发送的数据进行采集。当然,还可以将采集数据的装置设置为独立的终端,本领域技术人员根据上述内容可以知晓如何实现,此处不进行赘述。
优选实施例
图5是传统对网络设备数据采集处理流程示意图,其缺陷主要在于在短时间内对海量网络设备发起数据采集请求,对网管造成业务压力,并对网络造成网络风暴。
为了解决上述问题,本发明实施例提供了一种采集数据的系统该,该系统应用的采集数据的方法能够解决传统对网络设备数据采集处理方法的缺陷。该方案针对支持TR069协议的网络设备,该系统中包括:
A:支持TR069协议的网络设备;B:网络管理系统中TR069消息的监听模块;C:网络管理系统中TR069消息的解析模块;D:网络管理系统中数据的采集模块。其中,A为被管理的网络设备,也是数据采集的对象,负责上报TR069Infrom消息并上报数据;B负责与被管理设备交互,接收与发送TR069消息;C负责解析设备上报TR069协议消息,并确定是否对网络设备进行数据采集;D负责确定数据采集内容,并执行数据采集。
实现时,各个模块之间的交互关系如下:
A发送TR069协议消息致网络管理系统;B监听模块A上报的TR069协议消息,并负责向A发送管理指令;C收到B接收到的TR069协议消息后解析消息,生成网络管理系统可识别的数据对象,并解析出来的消息事件号确定是否需要数据采集;D确定采集哪些数据,并下发数据采集指令。
本发明实施例网络设备数据采集的方法如图6所示,包括步骤S601至S605:
S601,网络设备上报TR069Inform消息,即进入数据采集流程。
S602,接收设备上报的TR069Inform消息,并获取TR069Infrom事件号。
S603,根据事件号判断是否对该网络设备进行数据采集。在该过程中,如事件号为需要采集数据的事件号,则执行步骤S604,否则执行步骤S605。
S604,发送采集指令以获取采集数据。
S605,结束数据采集流程。
采用本发明实施例提供的系统和方法,能够利用TR069事件驱动的方式将网络压力分散开,解决了传统采用时间触发对海量设备数据集中采集而造成的网络风暴的问题,减轻了数据采集对网络及网管服务器造成的压力。采集的网络设备一定是在线的设备,提高了数据采集的有效性,并且无需网络管理系统向网络设备发送反向连接请求提高了数据采集效率。
尽管为示例目的,已经公开了本发明的优选实施例,本领域的技术人员将意识到各种改进、增加和取代也是可能的,因此,本发明的范围应当不限于上述实施例。
Claims (8)
1.一种采集数据的方法,其特征在于,包括:
判断接收到的网络设备上报的通知消息中的标签信息与预定标签信息是否匹配;
在所述标签信息与所述预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集;
所述通知消息包括:心跳Inform消息;
所述标签信息包括:TR069协议的Inform事件号。
2.如权利要求1所述的方法,其特征在于,判断接收到的通知消息中的标签信息与预定标签信息是否匹配之前,还包括:
接收所述网络设备按照预定时间段上报的所述通知消息,其中,所述通知消息中携带有所述标签信息;
从所述通知消息中获取所述标签信息。
3.如权利要求1所述的方法,其特征在于,所述网络设备为支持TR069协议的网络设备。
4.一种采集数据的装置,其特征在于,包括:
解析模块,用于判断接收到的网络设备上报的通知消息中的标签信息与预定标签信息是否匹配;
采集模块,用于在所述标签信息与所述预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集;
所述通知消息包括:心跳Inform消息;
所述标签信息包括:TR069协议的Inform事件号。
5.如权利要求4所述的装置,其特征在于,还包括:
监听模块,用于接收所述网络设备按照预定时间段上报的所述通知消息,其中,所述通知消息中携带有所述标签信息;
所述解析模块,还用于从所述通知消息中获取所述标签信息。
6.如权利要求4或5所述的装置,其特征在于,所述网络设备为支持TR069协议的网络设备。
7.一种终端,其特征在于,包括:权利要求4至6中任一项所述的采集数据的装置。
8.一种采集数据的系统,其特征在于,包括:
权利要求4至6中任一项所述的采集数据的装置与网络设备;
其中,所述网络设备,用于按照预定时间段上报通知消息,其中,所述通知消息中携带有所述标签信息;
所述采集数据的装置,用于判断所述标签信息与预定标签信息是否匹配,并在所述标签信息与所述预定标签信息相匹配的情况下,对所述网络设备发送的数据进行采集。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410212234.2A CN105099742B (zh) | 2014-05-20 | 2014-05-20 | 一种采集数据的方法、装置、系统及终端 |
PCT/CN2014/082848 WO2015176383A1 (zh) | 2014-05-20 | 2014-07-23 | 一种采集数据的方法、装置、系统及终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410212234.2A CN105099742B (zh) | 2014-05-20 | 2014-05-20 | 一种采集数据的方法、装置、系统及终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105099742A CN105099742A (zh) | 2015-11-25 |
CN105099742B true CN105099742B (zh) | 2020-01-14 |
Family
ID=54553290
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410212234.2A Active CN105099742B (zh) | 2014-05-20 | 2014-05-20 | 一种采集数据的方法、装置、系统及终端 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN105099742B (zh) |
WO (1) | WO2015176383A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109150588A (zh) * | 2018-07-25 | 2019-01-04 | 河北华沃通信科技有限公司 | 设备管理方法及装置 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6253243B1 (en) * | 1998-12-04 | 2001-06-26 | Sun Microsystems, Inc. | Automated trap control for a distributed network management system |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100403690C (zh) * | 2005-04-30 | 2008-07-16 | 华为技术有限公司 | 用户驻地设备配置管理方法及其系统 |
CN101217512B (zh) * | 2008-01-11 | 2010-08-18 | 腾讯科技(深圳)有限公司 | 客户端状态维护方法、系统及应用服务器 |
CN101383737B (zh) * | 2008-08-25 | 2011-04-20 | 中兴通讯股份有限公司 | 一种基于链路层发现协议进行链路质量检测的方法及系统 |
CN101459544B (zh) * | 2009-01-05 | 2012-08-08 | 中兴智能交通(无锡)有限公司 | 一种采集性能数据的方法及系统 |
CN101883002A (zh) * | 2009-05-08 | 2010-11-10 | 中兴通讯股份有限公司 | 一种外挂设备安装方法及系统 |
CN101854305B (zh) * | 2010-06-07 | 2015-12-16 | 中兴通讯股份有限公司 | 流量采集系统及其方法、装置 |
CN101937531A (zh) * | 2010-08-31 | 2011-01-05 | 中山大学 | 一种智能家居设备管理系统及方法 |
CN102546594B (zh) * | 2011-12-07 | 2014-07-02 | 北京星网锐捷网络技术有限公司 | 一种网络资源访问控制方法、装置及相关设备 |
CN102611578A (zh) * | 2012-03-15 | 2012-07-25 | 中兴通讯股份有限公司 | 一种多网络设备环境下的网络设备数据管理系统 |
-
2014
- 2014-05-20 CN CN201410212234.2A patent/CN105099742B/zh active Active
- 2014-07-23 WO PCT/CN2014/082848 patent/WO2015176383A1/zh active Application Filing
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6253243B1 (en) * | 1998-12-04 | 2001-06-26 | Sun Microsystems, Inc. | Automated trap control for a distributed network management system |
Also Published As
Publication number | Publication date |
---|---|
WO2015176383A1 (zh) | 2015-11-26 |
CN105099742A (zh) | 2015-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109067618B (zh) | 分布式实时数据iot采集系统及方法 | |
CN100536403C (zh) | 一种通信网络智能巡检的方法及设备 | |
CA2931150C (en) | Automatic inspection and monitoring method based on time domain slotting control | |
CN106559270B (zh) | 一种城轨信号设备的数据分析方法及装置 | |
CN102739428B (zh) | 一种数据采集方法、装置及系统 | |
CN103414916A (zh) | 一种故障诊断系统及方法 | |
CN112134754A (zh) | 压力测试方法、装置、网络设备及存储介质 | |
EP2882216B1 (en) | Device and method for controlling, supervising and giving an alarming from a power supply of base station | |
CN108418891A (zh) | 一种高压发生器监控系统和方法 | |
CN105099742B (zh) | 一种采集数据的方法、装置、系统及终端 | |
CN103558819A (zh) | 一种切片机故障诊断系统 | |
WO2018119643A1 (zh) | 一种设备监测方法、装置及系统 | |
CN109343488A (zh) | 基于微信和fdt技术的现场总线监控预警系统和方法 | |
CN110300021B (zh) | 一种计算子站录波简报数据处理时间的方法及计算装置 | |
CN105743695A (zh) | 一种基于iec104 规约的监听方法及系统 | |
TW201303753A (zh) | 應用於影像監控平台的分散式運算系統 | |
CN112000544A (zh) | 一种物联网设备大屏实时监控方法 | |
CN109062801B (zh) | 软件接口自动转换系统 | |
CN103414595B (zh) | 电力调度数据网链路监测系统拓扑图生成方法 | |
CN112312376B (zh) | 一种远程交互管理多功能电表的方法及系统 | |
CN113013992B (zh) | 一种保信主站功能监控方法及装置 | |
CN101917699B (zh) | 基于用户的随机上报信令跟踪方法和装置 | |
CN104796294A (zh) | 一种云加速网络监控系统及方法 | |
CN105610595B (zh) | 一种故障数据获取系统和远程设备控制系统及其对应方法 | |
KR101303042B1 (ko) | 철도신호설비 통합유지보수시스템 및 운영 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |