CN104125100A - 一种通信网管中dashboard实时监控的方法 - Google Patents

一种通信网管中dashboard实时监控的方法 Download PDF

Info

Publication number
CN104125100A
CN104125100A CN201410390986.8A CN201410390986A CN104125100A CN 104125100 A CN104125100 A CN 104125100A CN 201410390986 A CN201410390986 A CN 201410390986A CN 104125100 A CN104125100 A CN 104125100A
Authority
CN
China
Prior art keywords
dashboard
data
data file
time
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410390986.8A
Other languages
English (en)
Inventor
杨继伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Communication Information System Co Ltd
Original Assignee
Inspur Communication Information System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Communication Information System Co Ltd filed Critical Inspur Communication Information System Co Ltd
Priority to CN201410390986.8A priority Critical patent/CN104125100A/zh
Publication of CN104125100A publication Critical patent/CN104125100A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种通信网管中dashboard实时监控的方法,属于dashboard技术领域,指标数据经过采集、解析、数据处理、入库的步骤;入数据库成功后,发送消息通知给JMS队列,dashboard引擎监听到消息通知并进行过滤和分析,根据消息通知内容与缓存中的dashboard配置数据作出决策是否要生成dashboard数据文件;dashboard引擎生成dashboard数据文件,给前台dashboard图形组件发送更新消息;前台dashboard图形组件根据更新消息的路径来获取dashboard数据文件;实时展示指标数据。本发明能有效的减少dashboard展示的时间延迟。

Description

一种通信网管中dashboard实时监控的方法
 
技术领域
本发明涉及一种dashboard实时监控技术领域,具体地说是一种通信网管中dashboard实时监控的方法。综合运用消息通知和数据文件,使dashboard可以实时展示指标数据的方法。
背景技术
随着以电子计算机技术为核心的信息技术的飞速发展,网络已经深入到国民经济的各个部门,网络管理技术也随之兴起,并日益重要。
Dashboard,中文名称为仪表盘,是将多个仪表、图表、报表等内容整合在一个页面上进行显示的工具。
在通信网管中,经常需要查看各类指标数据。一般的方法是采用dashboard(仪表盘)的方式将这些指标数据以多种图形(比如线图、柱图、饼图、条形图等) 的方式呈现在一个面板上,然后通过定时刷新的方式更新这些图形。不同的用户可能会定义不同的dashboard面板。随着同时在线人数的增多,以及dashboard图形数量的增多,这种定时刷新的方式,势必对后台服务和数据库造成很大压力,而且由于要等待一个轮询周期,达不到实时监控的目的。
发明内容
本发明的技术任务是提供一种能有效的减少dashboard展示的时间延迟,更加实时准确的监控指标数据,规避无谓的轮询对数据库的压力的一种通信网管中dashboard实时监控的方法。
一种通信网管中dashboard实时监控的方法,运用消息通知和dashboard数据文件的方法,使前台dashboard图形组件可以实时展示指标数据;由dashboard引擎来集中负责实时生成dashboard数据文件,具体包括如下步骤:
(1)、指标数据经过采集、解析、数据处理、入库的步骤;
(2)、入库模块在指标数据入数据库成功之后,发送消息通知给JMS队列,dashboard引擎负责监听JMS队列,一旦监听到消息通知,dashboard引擎首先会对消息通知进行过滤和分析,并根据消息通知内容与缓存中的dashboard配置数据作出决策,即决策是否要生成dashboard数据文件;
(3)、决策为要生成dashboard数据文件后,dashboard引擎查询数据库的指标数据,生成dashboard数据文件,并给前台dashboard图形组件发送更新消息;
(4)、更新消息内容会包含指标数据的id和dashboard数据文件的路径;
(5)、前台dashboard图形组件收到更新消息后,直接根据路径来获取该dashboard数据文件;
(6)、前台dashboard图形组件加载dashboard数据文件,实时展示指标数据。
步骤(1)中dashboard数据文件,为前台dashboard图形组件展示指标数据图形所需加载的文件,是dashboard的数据源。
FusionCharts图形组件中,FusionCharts定义一种XML格式的dashboard数据文件,其中包括图形的属性和数据的值,前台dashboard图形组件正确加载了这个dashboard数据文件,实时展示指标数据图形。
步骤(2)中,使用内存数据库放置缓存中的dashboard配置数据,缓存中的dashboard配置数据需要提前加载并能实时更新。
入库模块在一批指标数据入库后只发送一条消息通知给JMS队列;dashboard引擎在一定时间内收不到消息通知后,主动从数据库中获取消息通知;上述的一批指标数据的指标数据的数量以及一定时间的时间值提前配置在dashboard配置数据中。
加入心跳机制,通过心跳机制,在打开前台dashboard图形组件时,定时发送心跳时间到数据库中,直至关闭该dashboard;通过心跳机制判断当前系统有哪些指标数据处于监控中;dashboard引擎在生成dashboard数据文件的时候,仅对有心跳的指标数据生成dashboard数据文件。
前台dashboard图形组件主动查询数据库的步骤为:
(1)、根据前台dashboard图形组件所展示的指标数据的时间粒度来判断dashboard数据文件是否过时,即系统当前时间与dashboard数据文件最后修改时间之差,是否大于时间粒度;
(2)、如果大于时间粒度,则表示dashboard数据文件过时;
(3)、如果小于时间粒度,再判断该指标数据是否处于监控中,即判断是否有心跳,如果判断该指标数据处于监控中,则表示dashboard数据文件没有过时,如果判断该指标数据没有处于监控中,则表示dashboard数据文件过时;
(4)、当判断dashboard数据文件没有过时后,直接加载当前dashboard数据文件,展示指标数据;
(5)、当判断dashboard数据文件过时后,前台dashboard图形组件主动查询数据库内的指标数据。
本发明的一种通信网管中dashboard实时监控的方法具有以下优点:
1、有效的减少dashboard展示的时间延迟,更加实时准确的监控指标数据,规避无谓的轮询对数据库的压力;
2、前台dashboard图形组件收到更新消息后,直接根据路径来获取该dashboard数据文件,时间消耗很少;
3、dashboard引擎在生成dashboard数据文件的时候,仅对有心跳的指标数据生成dashboard数据文件,这样会进一步减少对数据库的压力;
4、前台dashboard图形组件主动查询数据库的机制,如果dashboard数据文件未过时,则可以直接读取dashboard数据文件展示,从而加快展示的速度;如果dashboard数据文件已经过时,主动查询数据库,保证了数据的准确性。
附图说明
下面结合附图对本发明进一步说明。
附图1为一种通信网管中dashboard实时监控的方法的总体数据流图;
    附图2为一种图1中输入流②的流程图;
附图3为一种图1中输入流③的流程图;
附图4为一种通信网管中dashboard实时监控的方法的前台dashboard图形组件主动查询数据库的流程图;
附图5为图4中判断dashboard数据文件是否过时的流程图。
具体实施方式
参照说明书附图和具体实施例对本发明的一种通信网管中dashboard实时监控的方法作以下详细地说明。
实施例1:
本发明的一种通信网管中dashboard实时监控的方法,运用消息通知和dashboard数据文件的方法,使前台dashboard图形组件可以实时展示指标数据;由dashboard引擎来集中负责实时生成dashboard数据文件,具体包括如下步骤:
(1)、指标数据经过采集、解析、数据处理、入库的步骤;
(2)、入库模块在指标数据入数据库成功之后,发送消息通知给JMS队列,dashboard引擎负责监听JMS队列,一旦监听到消息通知,dashboard引擎首先会对消息通知进行过滤和分析,并根据消息通知内容与缓存中的dashboard配置数据作出决策,即决策是否要生成dashboard数据文件;
(3)、决策为要生成dashboard数据文件后,dashboard引擎查询数据库的指标数据,生成dashboard数据文件,并给前台dashboard图形组件发送更新消息;
(4)、更新消息内容会包含指标数据的id和dashboard数据文件的路径;
(5)、前台dashboard图形组件收到更新消息后,直接根据路径来获取该dashboard数据文件;
(6)、前台dashboard图形组件加载dashboard数据文件,实时展示指标数据。
步骤(1)中dashboard数据文件,为前台dashboard图形组件展示指标数据图形所需加载的文件,是dashboard的数据源。
步骤(2)中,使用内存数据库放置缓存中的dashboard配置数据,缓存中的dashboard配置数据需要提前加载并能实时更新。
实施例2:
如图1所示,一种通信网管中dashboard实时监控的方法,运用消息通知和dashboard数据文件的方法,使前台dashboard图形组件可以实时展示指标数据;由dashboard引擎来集中负责实时生成dashboard数据文件,具体包括如下步骤:
(1)、指标数据经过采集、解析、数据处理、入库的步骤;
(2)、入库模块在指标数据入数据库成功之后,发送消息通知给JMS队列,dashboard引擎负责监听JMS队列,一旦监听到消息通知,dashboard引擎首先会对消息通知进行过滤和分析,并根据消息通知内容与缓存中的dashboard配置数据作出决策,即决策是否要生成dashboard数据文件;
(3)、决策为要生成dashboard数据文件后,dashboard引擎查询数据库的指标数据,生成dashboard数据文件,并给前台dashboard图形组件发送更新消息;
(4)、更新消息内容会包含指标数据的id和dashboard数据文件的路径;
(5)、前台dashboard图形组件收到更新消息后,直接根据路径来获取该dashboard数据文件;
(6)、前台dashboard图形组件加载dashboard数据文件,实时展示指标数据。
步骤(1)中dashboard数据文件,为前台dashboard图形组件展示指标数据图形所需加载的文件,是dashboard的数据源。
FusionCharts图形组件中,FusionCharts定义一种XML格式的dashboard数据文件,其中包括图形的属性和数据的值,前台dashboard图形组件正确加载了这个dashboard数据文件,实时展示指标数据图形。
步骤(2)中,使用内存数据库放置缓存中的dashboard配置数据,缓存中的dashboard配置数据需要提前加载并能实时更新。
入库模块在一批指标数据入库后只发送一条消息通知给JMS队列;dashboard引擎在一定时间内收不到消息通知后,主动从数据库中获取消息通知;上述的一批指标数据的指标数据的数量以及一定时间的时间值提前配置在dashboard配置数据中。
加入心跳机制,通过心跳机制,在打开前台dashboard图形组件时,定时发送心跳时间到数据库中,直至关闭该dashboard;通过心跳机制判断当前系统有哪些指标数据处于监控中;dashboard引擎在生成dashboard数据文件的时候,仅对有心跳的指标数据生成dashboard数据文件。
前台dashboard图形组件不仅仅只是被动的收到更新消息后再加载数据文件,在很多场景下,必须要主动的去查询数据库。例如,当用户打开一个长时间没人监控的dashboard时,如果直接读取已有的dashboard数据文件,显然已经是过时的,此时需要主动的去查询数据库,并更新数据文件。这就需要一种机制来判断dashboard的数据文件是否已经过时,如果未过时,则可以直接读取文件展示,从而加快展示的速度,如果已经过时,通过查询数据库,保证数据的准确性。
前台dashboard图形组件主动查询数据库的步骤为:
(1)、根据前台dashboard图形组件所展示的指标数据的时间粒度来判断dashboard数据文件是否过时,即系统当前时间与dashboard数据文件最后修改时间之差,是否大于时间粒度;
(2)、如果大于时间粒度,则表示dashboard数据文件过时;
(3)、如果小于时间粒度,再判断该指标数据是否处于监控中,即判断是否有心跳,如果判断该指标数据处于监控中,则表示dashboard数据文件没有过时,如果判断该指标数据没有处于监控中,则表示dashboard数据文件过时;
(4)、当判断dashboard数据文件没有过时后,直接加载当前dashboard数据文件,展示指标数据;
(5)、当判断dashboard数据文件过时后,前台dashboard图形组件主动查询数据库内的指标数据。
实施例3:
一种通信网管中dashboard实时监控的方法,图1是本发明的总体数据流图,描述了dashboard引擎的输入和输出数据流。主要的输入流以①②③来表示。
输入流①:该流程描述了dashboard配置数据的加载和缓存的流程,即dashboard引擎启动的时候,dashboard配置数据加载模块会从dashboard配置表中加载dashboard配置数据,并缓存到内存中。这样,决策模块和数据文件生成模块可以直接从缓存中获取相应的dashboard配置数据参与计算。
如图2所示,输入流②主要流程如下):
(1)、当前台dashboard图形组件新增(或者删除、修改)了dashboard配置时,dashboard配置服务会发送数据更新通知消息;
(2)、dashboard引擎会实时监听该消息;
(3)、当收到消息后,会调用配置数据加载模块重新加载配置数据,并重新生成数据文件。
如图3所示,输入流③主要流程如下:
(1)、后台数据处理会发送入库消息;
(2)、dashboard引擎会实时监听这种消息;
(3)、当收到消息后,决策模块会根据消息内容,结合缓存里的配置数据,决策出是否可以生成dashboard数据文件;
(4)、一旦决策出可以生成dashboard数据文件,数据文件生成模块就会查询数据库,并根据查询结果生成dashboard数据文件;
(5)、一旦dashboard数据文件生成成功,dashboard引擎就会给前台dashboard图形组件发送消息通知;
(6)、前台dashboard图形组件收到消息通知后,再到后台获取相应的dashboard数据文件并刷新前台dashboard图形组件界面。 
图4是前台dashboard图形组件主动主动查询数据库的流程图。其主要流程是,当前台dashboard图形组件回显一个dashboard时,首先判断其是否存在dashboard数据文件,如果存在dashboard数据文件,再判断dashboard数据文件是否过时,如果未过时,直接展示dashboard数据文件;如果不存在或者已经过时,直接查询数据库展示,然后以合并的方式生成dashboard数据文件,最后更新心跳。
附图5所示,判断dashboard数据文件是否过时的流程如下:
(1)、根据前台dashboard图形组件所展示的指标数据的时间粒度来判断dashboard数据文件是否过时,即系统当前时间与dashboard数据文件最后修改时间之差,是否大于时间粒度;
(2)、如果大于时间粒度,则表示dashboard数据文件过时;
(3)、如果小于时间粒度,再判断该指标数据是否处于监控中,即判断是否有心跳,如果判断该指标数据处于监控中,则表示dashboard数据文件没有过时,如果判断该指标数据没有处于监控中,则表示dashboard数据文件过时。
通过上面具体实施方式,所述技术领域的技术人员可容易的实现本发明。但是应当理解,本发明并不限于上述的3种具体实施方式。在公开的实施方式的基础上,所述技术领域的技术人员可任意组合不同的技术特征,从而实现不同的技术方案。

Claims (7)

1.一种通信网管中dashboard实时监控的方法,其特征在于运用消息通知和dashboard数据文件的方法,使前台dashboard图形组件可以实时展示指标数据;由dashboard引擎来集中负责实时生成dashboard数据文件,具体包括如下步骤:
(1)、指标数据经过采集、解析、数据处理、入库的步骤;
(2)、入库模块在指标数据入数据库成功之后,发送消息通知给JMS队列,dashboard引擎负责监听JMS队列,一旦监听到消息通知,dashboard引擎首先会对消息通知进行过滤和分析,并根据消息通知内容与缓存中的dashboard配置数据作出决策,即决策是否要生成dashboard数据文件;
(3)、决策为要生成dashboard数据文件后,dashboard引擎查询数据库的指标数据,生成dashboard数据文件,并给前台dashboard图形组件发送更新消息;
(4)、更新消息内容会包含指标数据的id和dashboard数据文件的路径;
(5)、前台dashboard图形组件收到更新消息后,直接根据路径来获取该dashboard数据文件;
(6)、前台dashboard图形组件加载dashboard数据文件,实时展示指标数据。
2.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于步骤(1)中dashboard数据文件,为前台dashboard图形组件展示指标数据图形所需加载的文件,是dashboard的数据源。
3.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于FusionCharts图形组件中,FusionCharts定义一种XML格式的dashboard数据文件,其中包括图形的属性和数据的值,前台dashboard图形组件正确加载了这个dashboard数据文件,实时展示指标数据图形。
4.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于步骤(2)中,使用内存数据库放置缓存中的dashboard配置数据,缓存中的dashboard配置数据需要提前加载并能实时更新。
5.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于入库模块在一批指标数据入库后只发送一条消息通知给JMS队列;dashboard引擎在一定时间内收不到消息通知后,主动从数据库中获取消息通知;上述的一批指标数据的指标数据的数量以及一定时间的时间值提前配置在dashboard配置数据中。
6.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于加入心跳机制,通过心跳机制,在打开前台dashboard图形组件时,定时发送心跳时间到数据库中,直至关闭该dashboard;通过心跳机制判断当前系统有哪些指标数据处于监控中;dashboard引擎在生成dashboard数据文件的时候,仅对有心跳的指标数据生成dashboard数据文件。
7.根据权利要求1所述的一种通信网管中dashboard实时监控的方法,其特征在于前台dashboard图形组件主动查询数据库的步骤为:
(1)、根据前台dashboard图形组件所展示的指标数据的时间粒度来判断dashboard数据文件是否过时,即系统当前时间与dashboard数据文件最后修改时间之差,是否大于时间粒度;
(2)、如果大于时间粒度,则表示dashboard数据文件过时;
(3)、如果小于时间粒度,再判断该指标数据是否处于监控中,即判断是否有心跳,如果判断该指标数据处于监控中,则表示dashboard数据文件没有过时,如果判断该指标数据没有处于监控中,则表示dashboard数据文件过时;
(4)、当判断dashboard数据文件没有过时后,直接加载当前dashboard数据文件,展示指标数据;
(5)、当判断dashboard数据文件过时后,前台dashboard图形组件主动查询数据库内的指标数据。
CN201410390986.8A 2014-08-11 2014-08-11 一种通信网管中dashboard实时监控的方法 Pending CN104125100A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410390986.8A CN104125100A (zh) 2014-08-11 2014-08-11 一种通信网管中dashboard实时监控的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410390986.8A CN104125100A (zh) 2014-08-11 2014-08-11 一种通信网管中dashboard实时监控的方法

Publications (1)

Publication Number Publication Date
CN104125100A true CN104125100A (zh) 2014-10-29

Family

ID=51770370

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410390986.8A Pending CN104125100A (zh) 2014-08-11 2014-08-11 一种通信网管中dashboard实时监控的方法

Country Status (1)

Country Link
CN (1) CN104125100A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071809A (zh) * 2017-02-17 2017-08-18 山东浪潮商用系统有限公司 一种移动通信网管数据时效提升方法
CN107070737A (zh) * 2017-02-07 2017-08-18 济南浪潮高新科技投资发展有限公司 一种通信指标数据实时监控系统和方法
CN110795460A (zh) * 2019-11-01 2020-02-14 浪潮云信息技术有限公司 一种前端页面数据缓存方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1983952A (zh) * 2005-12-14 2007-06-20 中兴通讯股份有限公司 网络优化系统中的网管数据同步方法及网管数据同步系统
CN101286895A (zh) * 2008-05-22 2008-10-15 上海交通大学 可动态配置的分布式网络数据监控系统及方法
CN101772051A (zh) * 2010-01-21 2010-07-07 浪潮通信信息系统有限公司 一种通信性能网管系统汇总数据的异步处理方法
US20120017165A1 (en) * 2010-07-19 2012-01-19 Soasta, Inc. Apparatus and method for combining / correlating data sets

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1983952A (zh) * 2005-12-14 2007-06-20 中兴通讯股份有限公司 网络优化系统中的网管数据同步方法及网管数据同步系统
CN101286895A (zh) * 2008-05-22 2008-10-15 上海交通大学 可动态配置的分布式网络数据监控系统及方法
CN101772051A (zh) * 2010-01-21 2010-07-07 浪潮通信信息系统有限公司 一种通信性能网管系统汇总数据的异步处理方法
US20120017165A1 (en) * 2010-07-19 2012-01-19 Soasta, Inc. Apparatus and method for combining / correlating data sets

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
徐驰: "电信设备性能数据监管系统", 《中国优秀硕士学位论文全文数据库(信息科技辑)》 *
朱骏: "移动话务网管系统中性能数据采集的设计实现", 《中国优秀硕士学位论文全文数据库(信息科技辑)》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107070737A (zh) * 2017-02-07 2017-08-18 济南浪潮高新科技投资发展有限公司 一种通信指标数据实时监控系统和方法
CN107071809A (zh) * 2017-02-17 2017-08-18 山东浪潮商用系统有限公司 一种移动通信网管数据时效提升方法
CN110795460A (zh) * 2019-11-01 2020-02-14 浪潮云信息技术有限公司 一种前端页面数据缓存方法及系统

Similar Documents

Publication Publication Date Title
CN108073625B (zh) 用于元数据信息管理的系统及方法
CN112765152B (zh) 用于合并数据表的方法和装置
CN110990420A (zh) 数据查询方法、装置
CN112527848B (zh) 基于多数据源的报表数据查询方法、装置、系统及存储介质
CN110472109B (zh) 动态化数据质量分析方法及平台系统
CN111382182A (zh) 数据处理方法、装置、电子设备及存储介质
CN111737443B (zh) 答案文本的处理方法和装置、关键文本的确定方法
CN111694866A (zh) 数据搜索及存储方法、数据搜索系统、装置、设备及介质
CN110737655B (zh) 用于上报数据的方法和装置
CN104125100A (zh) 一种通信网管中dashboard实时监控的方法
CN111680799A (zh) 用于处理模型参数的方法和装置
CN109634986B (zh) 系统监测方法、装置、计算机及计算机可读存储介质
CN111046245A (zh) 多源异构数据源融合计算方法、系统、设备和存储介质
CN108520401B (zh) 用户名单管理方法、装置、平台及存储介质
CN107633080B (zh) 一种用户任务处理方法及装置
CN115827646A (zh) 索引配置方法、装置和电子设备
CN107332824B (zh) 一种云应用的识别方法和装置
CN116204428A (zh) 一种测试用例生成方法和装置
CN105630997A (zh) 一种数据并行处理方法、装置及设备
CN110472055B (zh) 用于标注数据的方法和装置
CN113704486A (zh) 图谱数据构建方法及装置和图谱数据查询方法及装置
CN107562901B (zh) 一种客户端数据的更新方法及系统
CN113779017A (zh) 数据资产管理的方法和装置
CN110674119A (zh) 数据处理方法、系统与计算机可读存储介质
CN111506644A (zh) 一种应用数据处理方法、装置和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141029