CN106100928B - 应用于数据中心的监控数据的传输方法和装置 - Google Patents

应用于数据中心的监控数据的传输方法和装置 Download PDF

Info

Publication number
CN106100928B
CN106100928B CN201610453931.6A CN201610453931A CN106100928B CN 106100928 B CN106100928 B CN 106100928B CN 201610453931 A CN201610453931 A CN 201610453931A CN 106100928 B CN106100928 B CN 106100928B
Authority
CN
China
Prior art keywords
monitoring data
network element
element device
computer room
monitored item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610453931.6A
Other languages
English (en)
Other versions
CN106100928A (zh
Inventor
陈云飞
田文杰
熊亚军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201610453931.6A priority Critical patent/CN106100928B/zh
Publication of CN106100928A publication Critical patent/CN106100928A/zh
Application granted granted Critical
Publication of CN106100928B publication Critical patent/CN106100928B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876Network utilisation, e.g. volume of load or congestion level

Landscapes

  • Engineering & Computer Science (AREA)
  • Environmental & Geological Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Computer And Data Communications (AREA)

Abstract

本申请公开了应用于数据中心的监控数据的传输方法和装置。所述方法的一具体实施方式包括:接收客户端发送的监控项查询请求;确定与所述监控项对应的预设监控数据集合;发送所述预设监控数据集合至所述客户端。该实施方式实现了高时效地传输监控数据。

Description

应用于数据中心的监控数据的传输方法和装置
技术领域
本申请涉及计算机技术领域,具体涉及互联网技术领域,尤其涉及应用于数据中心的监控数据的传输方法和装置。
背景技术
随着互联网行业的不断发展壮大,数据中心的数量和规模也在急剧增长,而网络是数据中心运作的基础命脉,网络结构随着数据中心的发展日益复杂,网络规模随着数据中心的发展日益扩大,对网络进行监控产生的监控数据量十分庞大。
然而,现有的应用于数据中心的监控数据的传输方法是首先存储原始监控数据,然后对于监控项,例如公网IP流量,从大量原始监控数据中查找与这个公网IP相关联的监控数据,再后分析这些监控数据才能做出判断,传输环节过多,从而,存在着监控数据传输时效性差的问题。
发明内容
本申请的目的在于提出一种改进的应用于数据中心的监控数据的传输方法和装置,来解决以上背景技术部分提到的技术问题。
第一方面,本申请提供了一种应用于数据中心的监控数据的传输方法,被监控的数据中心包括机房,所述机房中设置有网元设备,机房中至少一个网元设备与第三方平台之间设置有数据传输通道,所述方法包括:接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、所述机房与所述第三方平台之间的流量,所述公网IP流量是配置该公网IP的网元设备产生的流量,所述机房与所述第三方平台之间的流量是所述数据传输通道中的流量总和;确定与所述监控项对应的预设监控数据集合,其中,所述预设监控数据集合通过预先对属性信息与所述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而所述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;发送所述预设监控数据集合至所述客户端。
在一些实施例中,所述方法还包括:采集网元设备的原始监控数据;根据所述属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据;将所述属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,所述属性信息为键值。
在一些实施例中,所述根据所述属性信息,从采集到的原始监控数据中查找出与所述预设的各个监控项分别匹配的原始监控数据,包括:对于监控所述机房与所述第三方平台之间的流量,查找出所述机房标识与所述机房一致的网元设备;从所述机房标识与所述机房一致的网元设备中,查找出所述平台标识与所述第三方平台一致的网元设备;提取采集到的所述平台标识与所述第三方平台一致的网元设备的原始监控数据。
在一些实施例中,所述根据所述属性信息,从采集到的原始监控数据中查找出与所述预设的各个监控项分别匹配的原始监控数据,包括:对于监控所述公网IP流量,查找出所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;提取采集到的所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
在一些实施例中,所述确定与所述监控项对应的预设监控数据集合,包括:确定所述监控项对应的键值;根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与键值与所述监控项对应的预设监控数据集合。
在一些实施例中,所述方法还包括:监控所述预设监控数据集合中的监控数据是否符合预先设置的告警规则;如果是,则向所述客户端发出告警。
在一些实施例中,所述方法还包括:将缓存的预设监控数据集合存储到内存以及硬盘。
第二方面,本申请提供了一种应用于数据中心的监控数据的传输方法装置,被监控的数据中心包括机房,所述机房中设置有网元设备,机房中至少一个网元设备与第三方平台之间设置有数据传输通道,所述装置包括:接收模块,用于接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、所述机房与所述第三方平台之间的流量,所述公网IP流量是配置该公网IP的网元设备产生的流量,所述机房与所述第三方平台之间的流量是所述数据传输通道中的流量总和;确定模块,用于确定与所述监控项对应的预设监控数据集合,其中,所述预设监控数据集合通过预先对属性信息与所述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而所述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;发送模块,用于发送所述预设监控数据集合至所述客户端。
在一些实施例中,所述装置还包括:采集模块,用于采集网元设备的原始监控数据;查找模块,用于根据所述属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据;缓存模块,用于将所述属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,所述属性信息为键值。
在一些实施例中,所述查找模块,进一步用于:对于监控所述机房与所述第三方平台之间的流量,查找出所述机房标识与所述机房一致的网元设备;从所述机房标识与所述机房一致的网元设备中,查找出所述平台标识与所述第三方平台一致的网元设备;提取采集到的所述平台标识与所述第三方平台一致的网元设备的原始监控数据。
在一些实施例中,所述查找模块,进一步用于:对于监控所述公网IP流量,查找出所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;提取采集到的所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
在一些实施例中,所述确定模块,进一步用于:确定所述监控项对应的键值;根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与键值与所述监控项对应的预设监控数据集合。
在一些实施例中,所述装置还包括:监控告警模块,用于监控所述预设监控数据集合中的监控数据是否符合预先设置的告警规则;如果是,则向所述客户端发出告警。
在一些实施例中,所述装置还包括:存储模块,用于将缓存的预设监控数据集合存储到内存以及硬盘。
本申请提供的应用于数据中心的监控数据的传输方法和装置,通过接收客户端发送的监控项查询请求,然后确定与监控项对应的预设监控数据集合,再后将预设监控数据集合发送至客户端,这种提前对监控项对应的监控数据的进行聚合的方式,减少了接收到监控项查询请求后进行查找的次数,实现了高时效地传输监控数据。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1a是本申请可以应用于其中的示例性系统架构图;
图1b是本申请的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本申请的应用于数据中心的监控数据的传输方法的一个实施例的流程图;
图3是根据本申请的应用于数据中心的监控数据的传输方法的又一个实施例的流程图;
图4是根据本申请的应用于数据中心的监控数据的传输装置的一个实施例的结构示意图;
图5是适于用来实现本申请实施例的服务器的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1a示出了可以应用本申请的应用于数据中心的监控数据的传输方法或应用于数据中心的监控数据的传输方法装置的实施例的示例性系统架构1001。
如图1a所示,系统架构1001可以包括终端设备101、102、103,网络104、服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
一般情况下,用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等,其中,终端设备101、102、103上可以安装有各种数据监控客户端应用。
终端设备101、102、103可以是具有显示屏的各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture Experts Group Audio LayerIII,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group AudioLayer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
需要说明的是,本申请中的客户端也可以安装在服务器105上。用户可以使用服务器105的输入设备和输出设备与服务器105进行交互。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103发出的数据监控查询请求提供支持的后台服务器。后台服务器可以对接收到的监控项查询请求等数据进行分析等处理,并将处理结果(例如与监控项查询请求中的监控项对应的预设监控数据集合)反馈给终端设备。
需要说明的是,本申请实施例所提供的应用于数据中心的监控数据的传输方法一般由服务器105执行,相应地,应用于数据中心的监控数据的传输方法装置一般设置于服务器105中。
应该理解,图1a中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本申请的应用于数据中心的监控数据的传输方法的一个实施例的流程200。需要说明的是,本申请中被监控的数据中心包括机房,上述机房中设置有网元设备,机房中至少一个网元设备与第三方平台之间设置有数据传输通道,上述应用于数据中心的监控数据的传输方法,包括以下步骤:
步骤201,接收客户端发送的监控项查询请求。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1a所示的服务器105)可以通过有线连接方式或者无线连接方式从用户利用其进行监控项查询的客户端所在的电子设备接收上述监控项查询请求。
在本实施例中,上述客户端可以安装于上述传输方法运行于其上的电子设备(例如图1a所示的服务器105),也可以安装于不同于上述传输方法运行于其上的电子设备(例如图1a所示的终端设备);当上述客户端安装于上述传输方法运行于其上的电子设备时,用户通过上述传输方法运行于其上的电子设备的输入输出设备与该电子设备进行交互;当上述客户端安装于不同于上述传输方法运行于其上的电子设备时,用户通过客户所安装于的电子设备(例如图1a所示的终端设备)以及有线和/无线连接与上述传输方法运行于其上的电子设备(例如图1a所示的服务器)进行交互。
在本实施例中,上述客户端可以是用于对数据中心中的各种数据进行监控的客户端,作为示例,上述各种数据可以是数据中心中的流量数据、温度数据、各个网元设备的内存使用率。
在本实施例中,上述客户端可以接收用户做出的查询监控项的操作,然后将用户需要查询的监控项转换为相应的监控项查询请求发送至上述传输方法运行于其上的电子设备。
在本实施例中,上述监控项包括但不限于公网IP流量、上述机房与上述第三方平台之间的流量,上述公网IP流量是配置该公网IP的网元设备产生的流量,上述机房与上述第三方平台之间的流量是上述数据传输通道中的流量总和。作为示例,第三方平台可以是网络运营商平台,相应地,上述机房与上述第三方平台之间的流量可以是甲机房与网络运营商平台之间的数据交互产生的流量。第三方平台与机房可以通过至少一个网元设备上的一个或多个端口进行数据交互,每个端口都对应一条数据传输通道,上述机房与上述第三方平台之间的流量可以是所有数据传输通道中的流量总和。本领域普通技术人员可以理解的是,IP地址是IP Address(互联网协议地址,Internet Protocol Address)在中文中的常用写法。IP地址是IP协议提供的一种统一的地址格式,它为互联网上的每一个网络和每一台主机分配一个逻辑地址,以此来屏蔽物理地址的差异。
步骤202,确定与监控项对应的预设监控数据集合。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1所示的服务器105)可以基于步骤201接收到的监控项查询请求中的监控项,确定与上述监控项对应的预设监控数据集合。
在本实施例中,上述预设监控数据集合通过预先对属性信息与上述监控项相匹配的网元设备的原始监控数据进行聚合而生成;其中,上述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识。在这里,网元设备可以包括但不限于交换机、路由器、负载均衡设备、网络地址转换设备。作为示例,在监控项是公网IP流量的情况下,例如可以是a流量(即公网IP是a)的情况下,如果网络地址转换设备的公网IP标识这一属性信息是a标识,那么可以认为这个网络地址转换设备的属性信息与监控项相匹配。可以理解的是,与a流量这一监控项匹配的网元设备可以是多个,那么将与a流量这一监控项相匹配的所有网元设备的原始监控数据进行聚合,则可以生成a流量这一监控项的预设监控数据集合。
步骤203,发送预设监控数据集合至客户端。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1所示的服务器105)可以将基于步骤202确定的预设监控数据集合发送至客户端,以供客户端分析并监控上述预设监控数据集合中的监控数据。
在本实施例的一些可选的实现方式中,上述方法还包括:监控上述预设监控数据集合中的监控数据是否符合预先设置的告警规则;如果是,则向上述客户端发出告警。作为示例,a流量这一监控项的预设监控数据集合中有甲乙丙三个网元设备的原始监控数据;监控规则如果是甲乙丙三个网元设备的流量总和高于预设阈值,则发出告警,那么当甲乙丙三个网元设备的流量总和高于预设阈值时,则向上述客户端发出告警;监控规则如果是网元设备甲的流量高于预设阈值且网元设备乙以及网元设备丙的流量均低于预设阈值,则发出告警,那么当网元设备甲的流量高于预设阈值且网元设备乙以及网元设备丙的流量均低于预设阈值时,则向上述客户端发出告警。
本申请的上述实施例提供的方法通过接收客户端发送的监控项查询请求,然后确定与监控项对应的预设监控数据集合,再后将预设监控数据集合发送至客户端,提前对监控项对应的监控数据的进行聚合,减少了接收到监控项查询请求后进行查找的次数,实现了高时效地传输监控数据。
进一步参考图3,其示出了应用于数据中心的监控数据的传输方法的又一个实施例的流程300。需要说明的是,如图1b所示,其示出了图3对应的实施例的系统架构1002,本申请中被监控的数据中心106包括机房,上述机房中设置有网元设备,机房中至少一个网元设备与第三方平台107之间设置有数据传输通道,该应用于数据中心的监控数据的传输方法的流程300,包括以下步骤:
步骤301,采集网元设备的原始监控数据。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1b所示的服务器105)可以采集网元设备的原始监控数据。作为示例,应用于数据中心的监控数据的传输方法运行于其上的电子设备可以通过简单网络管理协议(SNMP,Simple Network Management Protocol)等网络管理接口从网元设备(如交换机、路由器、负载均衡设备、网络地址转换设备等)上采集流量数据、内存利用率等原始监控数据。
步骤302,根据属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1b所示的服务器105)可以基于网元设备的属性信息,从采集到的原始监控数据中查找出与各个监控项分别匹配的原始监控数据,其中,各个监控项可以是预先设置的。
在本实施例的一些可选的实现方式中,可以预先设置用户希望查询的或者数据中心需要监控的监控项。作为示例,可以将网络配置管理数据库(CMDB,ConfigurationManagement Database)中设置的监控项作为预设的监控项。
在本实施例的一些可选的实现方式中,可以从网络配置管理数据库中查找与各个监控项中每一个监控项匹配的网元设备,监控项与网元设备的匹配关系可以称为聚合规则,然后从管理信息库(MIB,Management Information Base)中提取该网元设备的原始监控数据。
在本实施例的一些可选的实现方式中,对于监控上述机房与上述第三方平台之间的流量这一监控项,查找出上述机房标识与上述机房一致的网元设备;从上述机房标识与上述机房一致的网元设备中,查找出上述平台标识与上述第三方平台一致的网元设备;提取采集到的上述平台标识与上述第三方平台一致的网元设备的原始监控数据。
在本实施例的一些可选的实现方式中,对于监控上述公网IP流量这一监控项,查找出上述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;提取采集到的上述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
步骤303,将属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1b所示的服务器105)可以将属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,属性信息是键值。
作为示例,对于甲机房与乙运营商之间的流量这一监控项,查找出交换机a的属性信息是甲机房、乙运营商,交换机b的属性信息是甲机房、乙运营商;那么将甲机房、乙运营商这两个属性信息作为键值,交换机a和交换机b的原始监控数据作为值,将这一键值对进行缓存作为甲机房与乙运营商之间的流量这一监控项的预设监控数据集合。
在本实施例的一些可选的实现方式中,上述方法还包括:将缓存的预设监控数据集合存储到内存以及硬盘。将缓存的预设监控数据集合存储到内存,查询在内存中完成,查询效率较高的同时减轻硬盘存储的压力;将缓存的预设监控数据集合存储到硬盘,可以持久存储上述缓存的预设监控数据集合,方便后续分析呈现使用,并且如果CMDB中数据变化导致无法还原之前状态,如某机房出口因割接下线或设备升级,网口发生变化,那么要正确还原之前历史数据比较困难,提前聚合保存有利于安装历史情况对数据进行保存。
需要说明的是,传统监控思路是先将原始监控数据长期固化存储,然后再聚合分析,但是原始监控数据项规模大、查询时效要求高,对存储的查询并发压力高。本方案的高时效查询在内存存储上完成,减轻对硬盘存储压力。
步骤304,接收客户端发送的监控项查询请求。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1a所示的服务器)可以通过有线连接方式或者无线连接方式从用户利用其进行监控项查询的客户端所在的电子设备接收上述监控项查询请求。
步骤305,确定与监控项对应的预设监控数据集合。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1b所示的服务器105)可以基于步骤304接收到的监控项查询请求中的监控项,确定与上述监控项对应的预设监控数据集合。
在本实施例的一些可选的实现方式中,确定上述监控项对应的键值;根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与键值与上述监控项对应的预设监控数据集合。作为示例,对于甲机房与乙运营商之间的流量这一监控项,确定该监控项对应的键值是甲机房、乙运营商,根据甲机房、乙运营商这一键值,从缓存的至少一个预设监控数据集合中查找出键值是甲机房、乙运营商的预设监控数据集合,确定预设监控数据集合是甲机房与乙运营商之间的流量这一监控项的预设监控数据集合。
步骤306,发送预设监控数据集合至客户端。
在本实施例中,应用于数据中心的监控数据的传输方法运行于其上的电子设备(例如图1b所示的服务器105)可以将基于步骤305确定的预设监控数据集合发送至客户端,以供客户端分析并监控上述预设监控数据集合中的监控数据。
从图3中可以看出,与图2对应的实施例相比,本实施例中的应用于数据中心的监控数据的传输方法的流程300突出了从原始监控数据中提取预设监控数据集合的过程,从而实现更全面和更有效的应用于数据中心的监控数据的传输方法。
进一步参考图4,作为对上述各图所示方法的实现,本申请提供了一种应用于数据中心的监控数据的传输方法装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图4所示,本实施例上述的应用于数据中心的监控数据的传输方法装置400包括:接收模块401、确定模块402和发送模块403;其中,接收模块401,用于接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、上述机房与上述第三方平台之间的流量,上述公网IP流量是配置该公网IP的网元设备产生的流量,上述机房与上述第三方平台之间的流量是上述数据传输通道中的流量总和;确定模块402,用于确定与上述监控项对应的预设监控数据集合,其中,上述预设监控数据集合通过预先对属性信息与上述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而上述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;发送模块403,用于发送上述预设监控数据集合至上述客户端。
在本实施例中,接收模块401可以通过有线连接方式或者无线连接方式从用户利用其进行监控项查询的客户端所在的电子设备接收上述监控项查询请求。
在本实施例中,确定模块402可以基于接收模块401接收到的监控项查询请求中的监控项,确定与上述监控项对应的预设监控数据集合。
在本实施例中,发送模块403可以将基于确定模块402确定的预设监控数据集合发送至客户端,以供客户端分析并监控上述预设监控数据集合中的监控数据。
在本实施例的一些可选的实现方式中,上述装置还包括:采集模块(未示出),用于采集网元设备的原始监控数据;查找模块(未示出),用于根据上述属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据;缓存模块(未示出),用于将上述属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,上述属性信息为键值。
在本实施例的一些可选的实现方式中,上述查找模块,进一步用于:对于监控上述机房与上述第三方平台之间的流量,查找出上述机房标识与上述机房一致的网元设备;从上述机房标识与上述机房一致的网元设备中,查找出上述平台标识与上述第三方平台一致的网元设备;提取采集到的上述平台标识与上述第三方平台一致的网元设备的原始监控数据。
在本实施例的一些可选的实现方式中,上述查找模块,进一步用于:对于监控上述公网IP流量,查找出上述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;提取采集到的上述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
在本实施例的一些可选的实现方式中,上述确定模块,进一步用于:确定上述监控项对应的键值;根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与键值与上述监控项对应的预设监控数据集合。
在本实施例的一些可选的实现方式中,上述装置还包括:监控告警模块(未示出),用于监控上述预设监控数据集合中的监控数据是否符合预先设置的告警规则;如果是,则向上述客户端发出告警。
在本实施例的一些可选的实现方式中,上述装置还包括:存储模块(未示出),用于将缓存的预设监控数据集合存储到内存以及硬盘。
下面参考图5,其示出了适于用来实现本申请实施例的服务器的计算机系统500的结构示意图。
如图5所示,计算机系统500包括中央处理单元(CPU)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中,还存储有系统500操作所需的各种程序和数据。CPU 501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
以下部件连接至I/O接口505:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的计算机程序根据需要被安装入存储部分508。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括有形地包含在机器可读介质上的计算机程序,上述计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(CPU)501执行时,执行本申请的方法中限定的上述功能。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括接收模块、确定模块、发送模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,接收模块还可以被描述为“接收客户端发送的监控项查询请求的模块”。
作为另一方面,本申请还提供了一种非易失性计算机存储介质,该非易失性计算机存储介质可以是上述实施例中上述装置中所包含的非易失性计算机存储介质;也可以是单独存在,未装配入终端中的非易失性计算机存储介质。上述非易失性计算机存储介质存储有一个或者多个程序,当上述一个或者多个程序被一个设备执行时,使得上述设备:接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、上述机房与上述第三方平台之间的流量,上述公网IP流量是配置该公网IP的网元设备产生的流量,上述机房与上述第三方平台之间的流量是上述数据传输通道中的流量总和;确定与上述监控项对应的预设监控数据集合,其中,上述预设监控数据集合通过预先对属性信息与上述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而上述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;发送上述预设监控数据集合至上述客户端。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (14)

1.一种应用于数据中心的监控数据的传输方法,其特征在于,被监控的数据中心包括机房,所述机房中设置有网元设备,机房中至少一个网元设备与第三方平台之间设置有数据传输通道,所述方法包括:
接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、所述机房与所述第三方平台之间的流量,所述公网IP流量是配置该公网IP的网元设备产生的流量,所述机房与所述第三方平台之间的流量是所述数据传输通道中的流量总和;
确定与所述监控项对应的预设监控数据集合,其中,所述预设监控数据集合通过预先对属性信息与所述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而所述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;
发送所述预设监控数据集合至所述客户端。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
采集网元设备的原始监控数据;
根据所述属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据;
将所述属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,所述属性信息为键值。
3.根据权利要求2所述的方法,其特征在于,所述根据所述属性信息,从采集到的原始监控数据中查找出与所述预设的各个监控项分别匹配的原始监控数据,包括:
对于监控所述机房与所述第三方平台之间的流量,查找出所述机房标识与所述机房一致的网元设备;
从所述机房标识与所述机房一致的网元设备中,查找出所述平台标识与所述第三方平台一致的网元设备;
提取采集到的所述平台标识与所述第三方平台一致的网元设备的原始监控数据。
4.根据权利要求2或3所述的方法,其特征在于,所述根据所述属性信息,从采集到的原始监控数据中查找出与所述预设的各个监控项分别匹配的原始监控数据,包括:
对于监控所述公网IP流量,查找出所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;
提取采集到的所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
5.根据权利要求4所述的方法,其特征在于,所述确定与所述监控项对应的预设监控数据集合,包括:
确定所述监控项对应的键值;
根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与所述监控项对应的预设监控数据集合。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
监控所述预设监控数据集合中的监控数据是否符合预先设置的告警规则;
如果是,则向所述客户端发出告警。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
将缓存的预设监控数据集合存储到内存以及硬盘。
8.一种应用于数据中心的监控数据的传输装置,其特征在于,被监控的数据中心包括机房,所述机房中设置有网元设备,机房中至少一个网元设备与第三方平台之间设置有数据传输通道,所述装置包括:
接收模块,用于接收客户端发送的监控项查询请求,其中,监控项包括公网IP流量、所述机房与所述第三方平台之间的流量,所述公网IP流量是配置该公网IP的网元设备产生的流量,所述机房与所述第三方平台之间的流量是所述数据传输通道中的流量总和;
确定模块,用于确定与所述监控项对应的预设监控数据集合,其中,所述预设监控数据集合通过预先对属性信息与所述监控项相匹配的网元设备的原始监控数据进行聚合而生成,而所述属性信息包括网元设备所配置的公网IP的公网IP标识、网元设备所属机房的机房标识、与网元设备进行数据传输的第三方平台的平台标识;
发送模块,用于发送所述预设监控数据集合至所述客户端。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
采集模块,用于采集网元设备的原始监控数据;
查找模块,用于根据所述属性信息,从采集到的原始监控数据中查找出与预设的各个监控项分别匹配的原始监控数据;
缓存模块,用于将所述属性信息与查找出的与该属性信息对应的原始监控数据以键值对形式进行缓存,作为该属性信息对应的监控项的预设监控数据集合,其中,所述属性信息为键值。
10.根据权利要求9所述的装置,其特征在于,所述查找模块,进一步用于:
对于监控所述机房与所述第三方平台之间的流量,查找出所述机房标识与所述机房一致的网元设备;
从所述机房标识与所述机房一致的网元设备中,查找出所述平台标识与所述第三方平台一致的网元设备;
提取采集到的所述平台标识与所述第三方平台一致的网元设备的原始监控数据。
11.根据权利要求9或10所述的装置,其特征在于,所述查找模块,进一步用于:
对于监控所述公网IP流量,查找出所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备;
提取采集到的所述公网IP标识与公网IP流量查询请求中的公网IP一致的网元设备的原始监控数据。
12.根据权利要求11所述的装置,其特征在于,所述确定模块,进一步用于:
确定所述监控项对应的键值;
根据监控项对应的键值,从缓存的至少一个预设监控数据集合中查找出与所述监控项对应的预设监控数据集合。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
监控告警模块,用于监控所述预设监控数据集合中的监控数据是否符合预先设置的告警规则;如果是,则向所述客户端发出告警。
14.根据权利要求13所述的装置,其特征在于,所述装置还包括:
存储模块,用于将缓存的预设监控数据集合存储到内存以及硬盘。
CN201610453931.6A 2016-06-21 2016-06-21 应用于数据中心的监控数据的传输方法和装置 Active CN106100928B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610453931.6A CN106100928B (zh) 2016-06-21 2016-06-21 应用于数据中心的监控数据的传输方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610453931.6A CN106100928B (zh) 2016-06-21 2016-06-21 应用于数据中心的监控数据的传输方法和装置

Publications (2)

Publication Number Publication Date
CN106100928A CN106100928A (zh) 2016-11-09
CN106100928B true CN106100928B (zh) 2019-02-26

Family

ID=57237726

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610453931.6A Active CN106100928B (zh) 2016-06-21 2016-06-21 应用于数据中心的监控数据的传输方法和装置

Country Status (1)

Country Link
CN (1) CN106100928B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106100928B (zh) * 2016-06-21 2019-02-26 北京百度网讯科技有限公司 应用于数据中心的监控数据的传输方法和装置
CN106789889B (zh) * 2016-11-22 2020-05-05 广州市诚毅科技软件开发有限公司 一种基于网状结构的网络监控方法及装置
CN106534182A (zh) * 2016-12-10 2017-03-22 武汉白虹软件科技有限公司 一种基于用户态协议栈的无痕网络取证方法
CN110673549A (zh) * 2019-09-05 2020-01-10 国家计算机网络与信息安全管理中心 基于分布式架构的数据中心智能监控系统和方法
CN111007761A (zh) * 2019-11-28 2020-04-14 上海蓝色帛缔智能工程有限公司 数据中心自动化监控和管理系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854399A (zh) * 2010-06-09 2010-10-06 宇龙计算机通信科技(深圳)有限公司 一种网络数据的聚合方法及装置
CN103118051A (zh) * 2011-11-17 2013-05-22 阿里巴巴集团控股有限公司 一种对信息发布过程进行监控的方法和设备
WO2014023245A1 (zh) * 2012-08-09 2014-02-13 中兴通讯股份有限公司 一种流量预测方法、系统及流量监测方法、系统
CN105490835A (zh) * 2015-11-20 2016-04-13 北京百度网讯科技有限公司 信息监控方法和装置
CN106100928A (zh) * 2016-06-21 2016-11-09 北京百度网讯科技有限公司 应用于数据中心的监控数据的传输方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854399A (zh) * 2010-06-09 2010-10-06 宇龙计算机通信科技(深圳)有限公司 一种网络数据的聚合方法及装置
CN103118051A (zh) * 2011-11-17 2013-05-22 阿里巴巴集团控股有限公司 一种对信息发布过程进行监控的方法和设备
WO2014023245A1 (zh) * 2012-08-09 2014-02-13 中兴通讯股份有限公司 一种流量预测方法、系统及流量监测方法、系统
CN105490835A (zh) * 2015-11-20 2016-04-13 北京百度网讯科技有限公司 信息监控方法和装置
CN106100928A (zh) * 2016-06-21 2016-11-09 北京百度网讯科技有限公司 应用于数据中心的监控数据的传输方法和装置

Also Published As

Publication number Publication date
CN106100928A (zh) 2016-11-09

Similar Documents

Publication Publication Date Title
CN106100928B (zh) 应用于数据中心的监控数据的传输方法和装置
CN106201661B (zh) 用于弹性伸缩虚拟机集群的方法和装置
CN105071976B (zh) 数据传输方法和装置
CN106911697B (zh) 访问权限设置方法、装置、服务器及存储介质
CN109697075A (zh) 文件更新方法、系统和装置
CN104778178B (zh) 一种应用分类方法、装置、及业务服务器
CN104536965B (zh) 一种大数据条件下的数据查询展示系统及方法
CN110058987A (zh) 用于对计算系统进行追踪的方法、设备和计算机可读介质
CN109992406A (zh) 图片请求方法、响应图片请求的方法及客户端
CN108563509A (zh) 数据查询实现方法、装置、介质及电子设备
CN106547790B (zh) 一种关系型数据库服务系统
CN110019539A (zh) 一种数据仓库的数据同步的方法和装置
CN110737634A (zh) 日志搜索方法、客户端、服务端与计算机可读存储介质
CN109597810A (zh) 一种任务切分方法、装置、介质及电子设备
CN109033312A (zh) 用于获取信息的方法和装置
CN107844488A (zh) 数据查询方法和装置
US9256641B1 (en) Dynamic optimization of data aggregation
CN111352809A (zh) 一种分布式告警方法、系统及计算机可读存储介质
CN108399046A (zh) 文件操作请求处理方法和装置
CN114205641A (zh) 一种视频数据处理方法及装置
CN114091704A (zh) 一种告警压制方法和装置
CN108900603A (zh) 一种服务器发现方法、装置和系统
CN109150927A (zh) 用于文件存储系统的文件下发方法和装置
CN107968798A (zh) 一种网管资源标签获取方法、缓存同步方法、装置及系统
CN116527554A (zh) 基于服务网格的监测系统、方法、设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant