CN106302024A - 一种基于多维度的链路指标实时监控的方法及装置 - Google Patents

一种基于多维度的链路指标实时监控的方法及装置 Download PDF

Info

Publication number
CN106302024A
CN106302024A CN201610702572.3A CN201610702572A CN106302024A CN 106302024 A CN106302024 A CN 106302024A CN 201610702572 A CN201610702572 A CN 201610702572A CN 106302024 A CN106302024 A CN 106302024A
Authority
CN
China
Prior art keywords
data structure
time
data
index
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610702572.3A
Other languages
English (en)
Inventor
罗鹰
王坤
林康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CHENGDU COLASOFT Co Ltd
Original Assignee
CHENGDU COLASOFT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHENGDU COLASOFT Co Ltd filed Critical CHENGDU COLASOFT Co Ltd
Priority to CN201610702572.3A priority Critical patent/CN106302024A/zh
Publication of CN106302024A publication Critical patent/CN106302024A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/04Processing captured monitoring data, e.g. for logfile generation
    • H04L43/045Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于多维度的链路指标实时监控的方法及装置,涉及互联网网络链路指标监控技术,本发明技术要点包括:步骤1:接收用户指定的指标类型、指标项、图表类型、时间刻度及链路;步骤2:在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定;步骤3:根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。

Description

一种基于多维度的链路指标实时监控的方法及装置
技术领域
本发明涉及互联网网络链路指标监控技术。
背景技术
随着互联网的飞速发展,网络的安全与健康是当今最重要的话题之一,尤其是在对网络性能指标监控时,传统的网络性能分析软件往往不能从用户需要的视角去监控网络性能,导致网络管理员不能及时的了解网络运行状况,不便于发现网络运行中的潜在问题或潜在风险,因此有必要提供一种多维度探针(或链路)指标实时监控方法,以满足用户各种维度的监控需求。
发明内容
本发明所要解决的技术问题是:针对上述存在的问题,提供一种基于多维度的链路指标实时监控的方法,包括:
步骤1:接收用户指定的指标类型、指标项、图表类型、时间刻度及链路;
步骤2:在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定;
步骤3:根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。
进一步,步骤3中,依次将生成好的每个时间点对应的数据结构存入缓存区之后再将数据结构推送到显示界面;如果缓存区存满则删除缓存区中最早进入的数据结构,同时存入最新的数据结构。
进一步,步骤2中,在数据采集中心获取数据前先在缓存区中寻找用户指定的链路下的指标类型的指标项内容对应的当前时间点的数据结构,如缓存区中存在所述数据结构,则将所述数据结构推送到显示界面。
进一步,步骤3中,根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,并在下一个时间点到来前将生成好的当前时间点对应的数据结构推送到显示界面呈现给用户;如果未能将某段时间内的数据结构推送到显示界面,则在后续某时间点将前时间段内的未能推送的数据结构及当前时间点的数据结构推送到显示界面。
进一步,指标类型为网络监控中的监控对象,指标项为监控对象中需要监控的指标,图表类型为向用户展示的图表样式,时间刻度为实时监控的最小时间间隔;
其中指标类型包括指标趋势图及前n条指标数据展示;
指标趋势图是指将包含至少一个指标项随时间的变化趋势进行展示;
前n条指标数据展示是指将指标项最高的前n个监控对象及其指标项进行展示。
本发明还提供了一种基于多维度的链路指标实时监控的装置,包括:
配置模块,用于接收用户指定的指标类型、指标项、图表类型、时间刻度及链路;
数据获取模块,用于在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定;
数据结构生成模块,用于根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。
数据结构生成模块进一步用于,依次将生成好的每个时间点对应的数据结构存入缓存区之后再将数据结构推送到显示界面;如果缓存区存满则删除缓存区中最早进入的数据结构,同时存入最新的数据结构。
数据获取模块进一步用于,在数据采集中心获取数据前先在缓存区中寻找用户指定的链路下的指标类型的指标项内容对应的当前时间点的数据结构,如缓存区中存在所述数据结构,则将所述数据结构推送到显示界面。
数据结构生成模块进一步用于,根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,并在下一个时间点到来前将生成好的当前时间点对应的数据结构推送到显示界面呈现给用户;如果未能将某段时间内的数据结构推送到显示界面,则在后续某时间点将前时间段内的未能推送的数据结构及当前时间点的数据结构推送到显示界面。
由于采用了上述技术方案,本发明的有益效果是:
本发明提供了多维度的网络对象监控方法,将复杂的网络中各项指标灵活地以图表方式展示给用户,显著的降低网络运行维护的技术门槛,全方位的透视了网络性能,大大地提升了网络运行维护能力和故障发现、处置效率。
附图说明
本发明将通过例子并参照附图的方式说明,其中:
图1为本发明中用户选择指标类型为“指标趋势图”时的配置页面。
图2为本发明中用户选择总流量前15的内网主机的配置页面。
图3为本发明中同一链路下不同指标项的趋势图展示结果。
图4为本发明中总流量前5的应用展示结果。
具体实施方式
本说明书中公开的所有特征,或公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。
本说明书中公开的任一特征,除非特别叙述,均可被其他等效或具有类似目的的替代特征加以替换。即,除非特别叙述,每个特征只是一系列等效或类似特征中的一个例子而已。
本发明提供的基于多维度的链路指标实时监控的方法,包括:
步骤1:接收用户指定的指标类型、指标项、图表类型、时间刻度及链路。这里的指标类型是指网络监控中的监控对象,例如指标趋势图、应用、主机(内网)、主机(外网)、IP会话、网段间、网段等。
指标项为监控对象中需要监控的指标,如总流量、进网流量、出网流量、总数据包、进网数据包、出网数据包、总利用率、进网利用率、出网利用率、IP单播流量、IP广播流量、IP组播流量、IP单播数据包、IP组播数据包、IP广播数据包、TCP同步包、TCP确认包、TCP同步确认包等七十多种指标项。
图表类型为向用户展示的图表样式,包括曲线图、折线图、柱状图、区域图、叠加图、饼状图等。
时间刻度为实时监控的最小时间间隔,如1秒、10秒、1分钟、1小时。
参见图1,用户在配置界面上设置指标类型为指标趋势图,指标项为总流量,图表类型为曲线图,时间刻度为1s,选择的监控链路为5. 157huisu(5. 157huisu)及5. 157net(5. 157huisu)两条。
这意味着用户需要监控上述两条链路的总流量随时间变化的趋势,数据取样频率为1s中一次,最后数据的展示形式采用曲线图。
图2展示的是用户在配置前n条指标数据展示的界面,本实施例中用户选择的指标类型为主机(内网),指标项为总流量,图表类型为饼状图,时间刻度为1s,选择的链路为5.157huisu(5. 157huisu)。在指标项后边用户可以选TOP5、TOP10或TOP15。
本实施例意味着用户需要监控5. 157huisu(5. 157huisu)链路下总流量前15的内网主机,数据展示方式为饼状图,每隔1s更新图表数据。
步骤2:当用户在页面前端配置完毕后,后端服务器在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定。如图2所示的配置方式,意味着在数据采集中心需要获取5. 157huisu(5. 157huisu)链路下内网主机的总流量,间隔1s获取一次。
步骤3:服务器再根据每个时间点获取到的数据生成与用户指定的图标类型(或称为监控视图)相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。还是以图2的配置方式为例,从获取的数据中选出总流量前15的内网主机,不同时间点总流量前15的内网主机可能是不同的。图4展示的是另一个实施例中用户配置的总流量为前5的应用。图3展示的是又一实施例中用户配置的同一链路进网流量与出网流量岁时间变化的曲线图。
实际应用中很可能出现多个页面同时监控某一监控对象的情形,为了提高页面响应效率,防止用户在过多页面或PC终端启用同一个监控视图而占用过多服务器的CPU和内存资源,在一个优选实施例中,步骤3把已经生成好的数据结构加入缓存区,同时为了防止缓存区占用过多的内存资源,系统将对缓存区大小进行限制,限制每个监控视图对应的数据结构最多存放一定条数(系统运维可根据内存资源配置)的缓存记录,如果缓存已满,则删除最旧的数据,并存入最新的数据,依次循环存储,将生成好的数据结构存入缓存之后,再将数据结构返回给页面。
相应的,本优选实施例的步骤2会在从数据采集中心取实时数据之前,首先从缓存区中取,如果缓存中已经存在需要的监控视图的数据结构,则直接从缓存区中取出并返回给页面,如果缓存中不存在,再到数据采集中心实时获取,生成数据结构后加入缓存区。
有时候由于服务器资源、网络等原因,可能导致数据的实时获取延迟,为此本发明有一个优选实施例采用了超时控制机制。
正常情况下超时控制机制将根据时间刻度的设置进行超时控制,也就是说根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,并在下一个时间点到来前将生成好的当前时间点对应的数据结构推送到显示界面呈现给用户,保证了实时数据能够按时推送给页面。
当出现数据延迟到达或服务器卡顿的问题时,某些时间点上的数据结构不能按时获取、生成,本实施例的超时控制机制则会在系统恢复正常后的第一个时间点将前时间段内的未能推送的数据结构及当前时间点的数据结构推送到显示界面,保证了实时数据的完整性和准确性,例如:时间刻度设置为1秒,即每秒需要返回一条实时的结构数据到页面,如果因为服务器资源不足或网络原因导致1秒没有完成处理,系统将返回一条空数据作为超时数据,并且在下一秒将会把上一秒未推送的数据及当前这1秒的数据一并获取、生成并一次性推送给页面。
为了提供系统的服务器端与页面前端的交互速度,有一个优选实施例在服务器及页面前端之间采用Web Socket的方式实时通信,用户一旦进入页面的监控视图,每一个设置的视图均将会与后端服务器建立Web Socket通信,直到页面关闭或服务器主动断开,大大降低了页面的请求频率和请求数,服务器将根据设置的时间刻度定时通过Web Socket的方式定时向页面推送实时数据,保证了数据的及时性。
本发明还提供了一种与前述方法步骤一一对应的软系统。
本发明并不局限于前述的具体实施方式。本发明扩展到任何在本说明书中披露的新特征或任何新的组合,以及披露的任一新的方法或过程的步骤或任何新的组合。

Claims (10)

1.一种基于多维度的链路指标实时监控的方法,其特征在于,包括:
步骤1:接收用户指定的指标类型、指标项、图表类型、时间刻度及链路;
步骤2:在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定;
步骤3:根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。
2.根据权利要求1所述的基于多维度的链路指标实时监控的方法,其特征在于,步骤3中,依次将生成好的每个时间点对应的数据结构存入缓存区之后再将数据结构推送到显示界面;如果缓存区存满则删除缓存区中最早进入的数据结构,同时存入最新的数据结构。
3.根据权利要求2所述的基于多维度的链路指标实时监控的方法,其特征在于,步骤2中,在数据采集中心获取数据前先在缓存区中寻找用户指定的链路下的指标类型的指标项内容对应的当前时间点的数据结构,如缓存区中存在所述数据结构,则将所述数据结构推送到显示界面。
4.根据权利要求1所述的基于多维度的链路指标实时监控的方法,其特征在于,步骤3中,根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,并在下一个时间点到来前将生成好的当前时间点对应的数据结构推送到显示界面呈现给用户;如果未能将某段时间内的数据结构推送到显示界面,则在后续某时间点将前时间段内的未能推送的数据结构及当前时间点的数据结构推送到显示界面。
5.根据权利要求1所述的基于多维度的链路指标实时监控的方法,其特征在于,指标类型为网络监控中的监控对象,指标项为监控对象中需要监控的指标,图表类型为向用户展示的图表样式,时间刻度为实时监控的最小时间间隔;
其中指标类型包括指标趋势图及前n条指标数据展示;
指标趋势图是指将包含至少一个指标项随时间的变化趋势进行展示;
前n条指标数据展示是指将指标项最高的前n个监控对象及其指标项进行展示。
6.一种基于多维度的链路指标实时监控的装置,其特征在于,包括:
配置模块,用于接收用户指定的指标类型、指标项、图表类型、时间刻度及链路;
数据获取模块,用于在数据采集中心获取用户指定的链路下的指标类型的指标项内容,获取时间间隔由用户指定的时间刻度决定;
数据结构生成模块,用于根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,依次将生成好的每个时间点对应的数据结构推送到显示界面呈现给用户。
7.根据权利要求6所述的基于多维度的链路指标实时监控的装置,其特征在于,数据结构生成模块进一步用于,依次将生成好的每个时间点对应的数据结构存入缓存区之后再将数据结构推送到显示界面;如果缓存区存满则删除缓存区中最早进入的数据结构,同时存入最新的数据结构。
8.根据权利要求7所述的基于多维度的链路指标实时监控的装置,其特征在于,数据获取模块进一步用于,在数据采集中心获取数据前先在缓存区中寻找用户指定的链路下的指标类型的指标项内容对应的当前时间点的数据结构,如缓存区中存在所述数据结构,则将所述数据结构推送到显示界面。
9.根据权利要求6所述的基于多维度的链路指标实时监控的装置,其特征在于,数据结构生成模块进一步用于,根据每个时间点获取到的数据生成与用户指定的图标类型相匹配的数据结构,并在下一个时间点到来前将生成好的当前时间点对应的数据结构推送到显示界面呈现给用户;如果未能将某段时间内的数据结构推送到显示界面,则在后续某时间点将前时间段内的未能推送的数据结构及当前时间点的数据结构推送到显示界面。
10.根据权利要求6所述的基于多维度的链路指标实时监控的装置,其特征在于,指标类型为网络监控中的监控对象,指标项为监控对象中需要监控的指标,图表类型为向用户展示的图表样式,时间刻度为实时监控的最小时间间隔;
其中指标类型包括指标趋势图及前n条指标数据展示;
指标趋势图是指将包含至少一个指标项随时间的变化趋势进行展示;
前n条指标数据展示是指将指标项最高的前n个监控对象及其指标项进行展示。
CN201610702572.3A 2016-08-23 2016-08-23 一种基于多维度的链路指标实时监控的方法及装置 Pending CN106302024A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610702572.3A CN106302024A (zh) 2016-08-23 2016-08-23 一种基于多维度的链路指标实时监控的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610702572.3A CN106302024A (zh) 2016-08-23 2016-08-23 一种基于多维度的链路指标实时监控的方法及装置

Publications (1)

Publication Number Publication Date
CN106302024A true CN106302024A (zh) 2017-01-04

Family

ID=57661056

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610702572.3A Pending CN106302024A (zh) 2016-08-23 2016-08-23 一种基于多维度的链路指标实时监控的方法及装置

Country Status (1)

Country Link
CN (1) CN106302024A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106921518A (zh) * 2017-02-21 2017-07-04 腾讯科技(北京)有限公司 监控视图展示方法及装置
CN110611715A (zh) * 2019-09-23 2019-12-24 国云科技股份有限公司 一种服务链路集合云监控信息的系统和方法
WO2024045576A1 (zh) * 2022-08-30 2024-03-07 中兴通讯股份有限公司 网络链路生成方法、服务器及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010026251A (ko) * 1999-09-03 2001-04-06 윤종용 프레임 릴레이 서비스를 위한 사용자 그래픽 인터페이스 구현방법
CN1747397A (zh) * 2004-09-08 2006-03-15 中兴通讯股份有限公司 一种电信网管中性能数据补采系统及其方法
CN101404803A (zh) * 2008-11-13 2009-04-08 浪潮通信信息系统有限公司 一种网管系统的多维监控方法
CN102932201A (zh) * 2012-09-26 2013-02-13 迈普通信技术股份有限公司 一种网络监控数据的显示控制系统和方法
CN104407964A (zh) * 2014-12-08 2015-03-11 国家电网公司 一种基于数据中心的集中监控系统及方法
CN105490869A (zh) * 2015-11-19 2016-04-13 浪潮(北京)电子信息产业有限公司 一种监控数据获取方法、装置和系统
CN105634795A (zh) * 2015-12-21 2016-06-01 成都科来软件有限公司 一种网络指标趋势显示方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010026251A (ko) * 1999-09-03 2001-04-06 윤종용 프레임 릴레이 서비스를 위한 사용자 그래픽 인터페이스 구현방법
CN1747397A (zh) * 2004-09-08 2006-03-15 中兴通讯股份有限公司 一种电信网管中性能数据补采系统及其方法
CN101404803A (zh) * 2008-11-13 2009-04-08 浪潮通信信息系统有限公司 一种网管系统的多维监控方法
CN102932201A (zh) * 2012-09-26 2013-02-13 迈普通信技术股份有限公司 一种网络监控数据的显示控制系统和方法
CN104407964A (zh) * 2014-12-08 2015-03-11 国家电网公司 一种基于数据中心的集中监控系统及方法
CN105490869A (zh) * 2015-11-19 2016-04-13 浪潮(北京)电子信息产业有限公司 一种监控数据获取方法、装置和系统
CN105634795A (zh) * 2015-12-21 2016-06-01 成都科来软件有限公司 一种网络指标趋势显示方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106921518A (zh) * 2017-02-21 2017-07-04 腾讯科技(北京)有限公司 监控视图展示方法及装置
CN106921518B (zh) * 2017-02-21 2022-06-14 腾讯科技(北京)有限公司 监控视图展示方法及装置
CN110611715A (zh) * 2019-09-23 2019-12-24 国云科技股份有限公司 一种服务链路集合云监控信息的系统和方法
CN110611715B (zh) * 2019-09-23 2023-11-28 国云科技股份有限公司 一种服务链路集合云监控信息的系统和方法
WO2024045576A1 (zh) * 2022-08-30 2024-03-07 中兴通讯股份有限公司 网络链路生成方法、服务器及存储介质

Similar Documents

Publication Publication Date Title
CN103699580B (zh) 数据库同步方法及装置
CN105306585B (zh) 一种多数据中心的数据同步方法
CN103324669B (zh) 一种对网页书签进行处理的方法和客户端
US9009336B2 (en) Method and system for pacing, acking, timing, and handicapping (path) for simultaneous receipt of documents
CN105959371B (zh) 网页分享系统
US8824687B2 (en) Method and system for pacing, acking, timing, and handicapping (path) for simultaneous receipt of documents employing encryption
CN104504006B (zh) 对新闻客户端的数据采集及解析的方法及系统
CN106302024A (zh) 一种基于多维度的链路指标实时监控的方法及装置
US10795744B2 (en) Identifying failed customer experience in distributed computer systems
WO2012083870A1 (zh) 一种论坛回帖增量采集方法及系统
CN104615627B (zh) 一种基于微博平台的事件舆情信息提取方法及系统
CN106452944A (zh) 一种基于多维度的业务性能分析数据获取方法及装置
CN105553758B (zh) 一种网络性能的监测方法及装置
CN107766570A (zh) 一种档案同源核查方法
CN108270860A (zh) 环境质量在线监测数据的采集系统及方法
CN106411629A (zh) 一种用于监控cdn节点的状态的方法和设备
CN108965003A (zh) 一种分布式集群的部署方法、装置、系统及存储介质
CN107451208A (zh) 一种数据搜索方法与装置
Reddy et al. Preprocessing the web server logs: an illustrative approach for effective usage mining
CN104077293A (zh) 网页获取方法和装置
CN105357071A (zh) 一种网络复杂流量识别方法及识别系统
CN106455042B (zh) 一种节点间时间同步方法、无线传感网络及其节点
CN109510800A (zh) 一种网络请求处理方法、装置、电子设备及存储介质
EP2611109B1 (en) System for high reliability and high performance application message delivery
CN106910082A (zh) 一种调取广告进行推送的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170104

RJ01 Rejection of invention patent application after publication