CN111881144A - 监控软件的测点数据处理方法、装置和计算机设备 - Google Patents

监控软件的测点数据处理方法、装置和计算机设备 Download PDF

Info

Publication number
CN111881144A
CN111881144A CN202010752901.1A CN202010752901A CN111881144A CN 111881144 A CN111881144 A CN 111881144A CN 202010752901 A CN202010752901 A CN 202010752901A CN 111881144 A CN111881144 A CN 111881144A
Authority
CN
China
Prior art keywords
measuring point
point data
type
storage object
data storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010752901.1A
Other languages
English (en)
Inventor
陈光琳
冯玉祥
李国强
杨科
丘佳淼
朱建
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Grid Information Technology Co ltd
Original Assignee
Shenzhen Grid Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Grid Information Technology Co ltd filed Critical Shenzhen Grid Information Technology Co ltd
Priority to CN202010752901.1A priority Critical patent/CN111881144A/zh
Publication of CN111881144A publication Critical patent/CN111881144A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一种监控软件的测点数据处理方法、装置和计算机设备。所述方法包括:获取监控软件发送的测点数据处理请求;解析所述测点数据处理请求,确定所述测点数据处理请求所针对的测点数据的测点数据类型;根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型;调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理。采用本方法能够提高监控软件的测点数据的处理性能。

Description

监控软件的测点数据处理方法、装置和计算机设备
技术领域
本申请涉及计算机技术领域,特别是涉及一种监控软件测点数据处理方法、装置和计算机设备。
背景技术
随着计算机技术的发展,出现了可以用于对智能设备进行监控的监控软件,在监控软件对智能设备进行监控的过程中,会产生大量的测点数据,因此,对监控软件的测点数据进行处理非常重要。
传统方法中,一般是监控软件对接一个关系型数据库,由监控软件将测点数据存储至关系型数据库,或者从关系型数据库中读取测点数据。然而,对于某些类型的测点数据,对接关系型数据库容易出现问题,从而影响对监控软件的测点数据的处理性能。比如:当测点数据的类型为实时测点数据时,对测点数据的实时性要求很高,几乎每两秒钟就需要更新数据库中的测点数据,当需要更新的实时测点数据的数据量非常大时,容易造成关系型数据库宕机等问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高处理性能的监控软件的测点数据处理方法、装置、计算机设备和存储介质。
一种监控软件的测点数据处理方法,所述方法包括:
获取监控软件发送的测点数据处理请求;
解析所述测点数据处理请求,确定所述测点数据处理请求所针对的测点数据的测点数据类型;
根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型;
调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理。
在其中一个实施例中,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为配置测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述配置测点数据类型对应的字典型数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述配置测点数据类型的测点数据为配置测点数据。
在其中一个实施例中,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为实时测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述实时测点数据类型对应的数字典型数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述实时测点数据类型的测点数据为实时测点数据。
在其中一个实施例中,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为历史测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述历史测点数据类型的测点数据为历史测点数据。
在其中一个实施例中,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为告警测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述告警测点数据类型对应的消息队列,作为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述告警测点数据类型的测点数据为告警测点数据。
在其中一个实施例中,所述调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理包括:
当所述测点数据处理请求所对应的请求类型为持久化请求时,则
调用所述目标数据存储对象类型所对应的数据存储对象,将所述所针对的测点数据、以及所述测点数据所对应的被监控智能设备的唯一标识符对应持久化至所述目标数据存储对象类型所对应的数据存储对象。
在其中一个实施例中,所述调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理包括:
当所述测点数据处理请求所对应的请求类型为读取请求时,则
调用所述目标数据存储对象类型所对应的数据存储对象,从所述目标数据存储对象类型所对应的数据存储对象中,读取所述所针对的测点数据。
在其中一个实施例中,在所述调用所述目标数据存储对象类型所对应的数据存储对象之前,所述方法还包括:
从预先存储的数据存储对象静态信息中,提取所述目标数据存储对象类型所对应的数据存储对象的IP地址、IP端口、用户名和密码;
根据所述用户名和所述密码,向所述IP地址对应的数据存储对象的所述IP端口,发送连接请求,以使所述数据存储对象对所述用户名和所述密码进行验证;
当验证通过时,则与所述数据存储对象建立连接。
一种监控软件的测点数据处理装置,所述装置包括:
请求获取模块,用于获取监控软件发送的测点数据处理请求;
数据类型确定模块,用于解析所述测点数据处理请求,确定所述测点数据处理请求所针对的测点数据的测点数据类型;
目标数据存储对象确定模块,用于根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型;
测点数据处理模块,用于调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理。
一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行本申请各实施例所述的监控软件的测点数据处理方法中的步骤。
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行本申请各实施例所述的监控软件的测点数据处理方法中的步骤。
上述监控软件的测点数据处理方法、装置、计算机设备和存储介质,获取监控软件发送的测点数据处理请求并解析,确定测点数据处理请求所针对的测点数据的测点数据类型,然后根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的测点数据类型对应的目标数据存储对象类型,并调用目标数据存储对象类型所对应的数据存储对象,按照测点数据处理请求所对应的请求类型,对所针对的测点数据进行处理。这样可以使不同类型的测点数据各自对应合适类型的数据存储对象,从而提高监控软件的测点数据的处理性能。
附图说明
图1为一个实施例中监控软件的测点数据处理方法的应用环境图;
图2为另一个实施例中监控软件的测点数据处理方法的应用环境图;
图3为一个实施例中监控软件的测点数据处理方法的流程示意图;
图4为一个实施例中测点数据服务调度中心的功能示意图;
图5为一个实施例中监控软件的测点数据处理方法的时序图;
图6为一个实施例中监控软件的测点数据处理装置的结构框图;
图7为另一个实施例中监控软件的测点数据处理装置的结构框图;
图8为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的监控软件的测点数据处理方法,可以应用于如图1所示的应用环境中。其中,监控软件102设置于监控设备中,监控设备通过网络或蓝牙等方式与被监控的智能设备104进行通信,监控设备通过网络与测点数据服务调度中心106进行通信,测点数据服务调度中心106通过网络与数据存储对象108进行通信。监控设备中的监控软件102对被监控的智能设备104进行监控来获取测点数据,监控设备中的监控软件102向测点数据服务调度中心106发送测点数据处理请求,测点数据服务调度中心106根据测点数据处理请求所针对的测点数据的测点数据类型,确定与测点数据类型对应的目标数据存储对象类型所对应的数据存储对象108,测点数据服务调度中心106调用数据存储对象108,按照测点数据处理请求所对应的请求类型对所针对的测点数据进行处理,即,将监控软件获取的测点数据持久化至数据存储对象108,或者从数据存储对象108读取测点数据。其中,监控设备可以为终端或服务器,智能设备104可以为智能空调和智能音响等智能设备,测点数据服务调度中心106可以设置于终端或服务器中。
本申请提供的监控软件的测点数据处理方法,可以应用于如图2所示的应用环境中。其中,监控软件102与数据服务调度中心106可以设置于同一设备(终端或服务器)中。监控软件102、智能设备104、数据服务调度中心106和数据存储对象108之间的交互方式与上述交互方式相同。
可以理解,本申请各实施例中,测点数据服务调度中心或监控软件,是基于其所运行于的设备(终端或服务器)所提供的硬件性能,来实现本申请各实施例中的监控软件的测点数据处理方法。
在一个实施例中,如图3所示,提供了一种监控软件的测点数据处理方法,以该方法应用于图1中的测点数据服务调度中心为例进行说明,包括以下步骤:
S302,获取监控软件发送的测点数据处理请求。
其中,监控软件,是用于对智能设备进行监控的软件或服务。测点数据,是监控软件对智能设备进行监测所得到的数据。测点数据处理请求,是由监控软件发送的、且用于调用数据存储对象对测点数据进行处理的请求。数据存储对象,是用于存储数据的对象。
在一个实施例中,数据存储对象可以包括消息队列和数据库等中的至少一种。数据库可以包括关系型数据库、字典型数据库和分布式列式数据库等中的至少一种。
在一个实施例中,监控软件,可以包括监控采集软件、远端监控服务器软件和监控客户端等中的至少一种。不同的监控软件可以实现不同的功能。监控软件的功能可以包括采集测点数据和展示测点数据等中的至少一种。
在一个实施例中,测点数据处理请求,可以是将监控软件从智能设备获取的测点数据持久化至数据存储对象的请求。在一个实施例中,当监控软件从智能设备获取到测点数据并需要将测点数据持久化至数据存储对象时,则向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。
在另一个实施例中,测点数据处理请求,也可以是从数据存储对象读取数据存储对象中存储的测点数据的请求。在一个实施例中,当监控软件需要从数据存储对象中读取测点数据来进行展示或其他处理时,则向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。
S304,解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型。
其中,测点数据类型,用于表征测点数据的类型。
在一个实施例中,测点数据类型,可以包括配置测点数据类型、实时测点数据类型、历史测点数据类型和告警测点数据类型等中的至少一种。相应地,测点数据,可以包括配置测点数据、实时测点数据、历史测点数据和告警测点数据等中的至少一种。其中,配置测点数据,即所监测到的配置数据。实时测点数据,是实时监测到的数据。历史测点数据,历史(即之前)监测到的数据。告警测点数据,即所监测到的告警数据。
在一个实施例中,测点数据服务调度中心可以根据测点数据处理请求所针对的测点数据的测点数据类型标识,确定测点数据处理请求所针对的测点数据的测点数据类型。具体地,测点数据处理请求中携带测点数据类型标识,测点数据服务调度中心可以从测点数据处理请求中提取所携带的测点数据类型标识,从而确定测点数据处理请求所针对的测点数据的测点数据类型。
S306,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的测点数据类型对应的目标数据存储对象类型。
其中,测点数据类型和数据存储对象类型之间的映射关系,即,测点数据类型和数据存储对象类型之间的对应关系。目标数据存储对象类型,是与测点数据处理请求所针对的测点数据的测点数据类型相对应的数据存储对象类型。
在一个实施例中,测点数据服务调度中心中可以以测点数据存储对象类型标识和数据存储对象类型标识的形式将两者对应存储。测点数据服务调度中心可以根据测点数据处理请求中的测点数据类型标识,从预先存储的测点数据存储对象类型标识和数据存储对象类型标识之间的映射关系中,确定目标数据存储对象类型。
S308,调用目标数据存储对象类型所对应的数据存储对象,按照测点数据处理请求所对应的请求类型,对所针对的测点数据进行处理。
其中,请求类型,是指请求对测点数据进行处理的处理类型。
在一个实施例中,测点数据处理请求所对应的请求类型,可以包括持久化请求和读取请求中的至少一种。
在一个实施例中,当测点数据处理请求所对应的请求类型为持久化请求时,测点数据服务调度中心可以调用目标数据存储对象类型所对应的数据存储对象,将测点数据处理请求所针对的测点数据持久化至目标数据存储对象类型所对应的数据存储对象。
在一个实施例中,当测点数据处理请求所对应的请求类型为读取请求时,测点数据服务调度中心可以调用目标数据存储对象类型所对应的数据存储对象,从目标数据存储对象类型所对应的数据存储对象中,读取所针对的测点数据。
上述监控软件的测点数据处理方法中,获取监控软件发送的测点数据处理请求并解析,确定测点数据处理请求所针对的测点数据的测点数据类型,然后根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的测点数据类型对应的目标数据存储对象类型,并调用目标数据存储对象类型所对应的数据存储对象,按照测点数据处理请求所对应的请求类型,对所针对的测点数据进行处理。这样可以使不同类型的测点数据各自对应合适类型的数据存储对象,从而提高监控软件的测点数据的处理性能。
在一个实施例中,步骤S306具体包括如下步骤:当测点数据类型为配置测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与配置测点数据类型对应的字典型数据库为目标数据存储对象类型。
其中,测点数据处理请求所针对的、且对应于配置测点数据类型的测点数据为配置测点数据。配置测点数据,是监控软件从智能设备获取的智能设备的配置数据。
在一个实施例中,当监控软件监控到智能设备的配置数据发生修改时,则向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为配置测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与配置测点数据类型对应的字典型数据库(比如:Redis,Remote Dictionary Server,远程字典服务)为目标数据存储对象类型。即,在测点数据服务调度中心预先存储的映射关系中,配置测点数据类型与字典型数据库相对应。
在一个实施例中,当监控软件需要从数据存储对象中读取智能设备的配置数据时,则向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为配置测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与配置测点数据类型对应的字典型数据库为目标数据存储对象类型。
本实施例中,当测点数据类型为配置测点数据类型时,测点数据服务调度中心根据预先存储的映射关系,确定与配置测点数据类型对应的字典型数据库为目标数据存储对象类型。字典型数据库能够很好地适用于配置测点数据,满足配置测点数据的实时调用,避免了传统方法中当配置测点数据的数据量达到一定量级之后,监控软件从数据存储对象读取配置测点数据时,通常需要使用多表联合查询,联合查询会导致数据量之间的匹配难度按指数级增长,监控软件频繁从传统的关系型数据库中读取配置测点数据将会占用关系型数据库的大量资源,容易出现软件宕机等问题。因此,提高了监控软件的测点数据的处理性能。
在一个实施例中,步骤S306具体包括如下步骤:当测点数据类型为实时测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与实时测点数据类型对应的数字典型数据库为目标数据存储对象类型。
其中,测点数据处理请求所针对的、且对应于实时测点数据类型的测点数据为实时测点数据。实时测点数据,是监控软件从智能设备获取的实时数据。比如:智能设备实时测得的温度或湿度等数据。
在一个实施例中,当监控软件从智能设备采集到实时测点数据时,则向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为实时测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与实时测点数据类型对应的字典型数据库为目标数据存储对象类型。即,在测点数据服务调度中心预先存储的映射关系中,实时测点数据类型与字典型数据库相对应。
在一个实施例中,当监控软件需要从数据存储对象中读取智能设备的实时测点数据进行展示或分析等处理时,则向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为实时测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与实时测点数据类型对应的字典型数据库为目标数据存储对象类型。
本实施例中,当测点数据类型为实时测点数据类型时,测点数据服务调度中心根据预先存储的映射关系,确定与实时测点数据类型对应的字典型数据库为目标数据存储对象类型。字典型数据库能够很好地适用于实时测点数据的性能需求,可以满足大量实时测点数据存储更新而导致的性能需求,以及大量实时测点的实时调用需求。避免了传统方法中,当实时测点数据的数据量达到一定程度时,对传统的关系型数据库造成非常大的压力,导致数据库宕机等问题。因此,提高了监控软件的测点数据的处理性能。
在一个实施例中,步骤S306具体包括如下步骤:当测点数据类型为历史测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型。
其中,测点数据处理请求所针对的、且对应于历史测点数据类型的测点数据为历史测点数据。历史测点数据,是监控软件从智能设备获取的历史数据。比如:智能设备历史测得的温度或湿度等数据。
在一个实施例中,当监控软件需要向数据存储对象存储历史测点数据时,则向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为历史测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与历史测点数据类型对应的分布式列式数据库(比如:clickhouse,一种分布式列式数据库)为目标数据存储对象类型。即,在测点数据服务调度中心预先存储的映射关系中,历史测点数据类型与分布式列式数据库相对应。
在一个实施例中,当监控软件需要从数据存储对象中读取智能设备的历史测点数据进行展示或分析等处理时,则向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为历史测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型。
本实施例中,当测点数据类型为历史测点数据类型时,测点数据服务调度中心根据预先存储的映射关系,确定与历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型。分布式列式数据库可以满足对大量历史测点数据进行读取的性能需求,分布式列式数据库不同于传统的行式数据库,可以一次性使用少量的列,并检索大量的数据行,由分布式列式数据库保证不同维度数据的查询和分析的及时性,响应上层软件的查询统计需求。避免了传统方法中,在历史测点数据的数据量比较大的情况下,通过关系型数据库进行数据查询,会耗费大量时间的问题。因此,提高了监控软件的测点数据的处理性能。
在一个实施例中,步骤S306具体包括如下步骤:当测点数据类型为告警测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与告警测点数据类型对应的消息队列,作为目标数据存储对象类型。
其中,测点数据处理请求所针对的、且对应于告警测点数据类型的测点数据为告警测点数据。告警测点数据,是监控软件接收到的智能设备所发出的告警数据。
在一个实施例中,当监控软件从智能设备采集到告警测点数据时,则向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为告警测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与告警测点数据类型对应的消息队列(比如:kafka)为目标数据存储对象类型。即,在测点数据服务调度中心预先存储的映射关系中,告警测点数据类型与消息队列相对应。
在一个实施例中,当监控软件需要从数据存储对象中读取智能设备的告警测点数据时,则向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型为告警测点数据类型,并根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与告警测点数据类型对应的消息队列(比如:kafka,一种高吞吐量的分布式发布订阅消息系统)为目标数据存储对象类型。
本实施例中,当测点数据类型为告警测点数据类型时,测点数据服务调度中心根据预先存储的映射关系,确定与告警测点数据类型对应的消息队列为目标数据存储对象类型。消息队列,可对瞬间产生的大量告警测点数据进行消锋、并通知其他监控软件进行消费,能够满足告警测点数据对数据存储对象的性能需求。避免了传统方法中大量告警测点数据爆发的瞬间,由于关系型数据库的性能问题,导致告警测点数据漏存的情况。因此,提高了监控软件的测点数据的处理性能。
如图4所示,为测点数据服务调度中心的功能示意图。测点数据服务调度中心可以对接多个监控软件,以及对接多种类型的数据存储对象。在一个实施例中,测点数据服务调度中心对接的数据存储对象类型可以包括非关系型数据库(比如:字典型数据库)、分布式列式数据库、消息队列和关系型数据库中的至少一种。
在一个实施例中,步骤S308具体包括如下步骤:当测点数据处理请求所对应的请求类型为持久化请求时,则调用目标数据存储对象类型所对应的数据存储对象,将所针对的测点数据、以及测点数据所对应的被监控智能设备的唯一标识符对应持久化至目标数据存储对象类型所对应的数据存储对象。
其中,持久化请求,是将测点数据持久化至数据存储对象的请求。测点数据所对应的被监控智能设备的唯一标识符,是用于唯一表征测点数据所对应的被监控智能设备的标识。测点数据所对应的被监控智能设备,是测点数据所采集自的、且被监控软件进行监控的智能设备。测点数据、以及测点数据所对应的被监控智能设备的唯一标识符在数据存储对象中对应存储。
具体地,当监控软件需要将采集到的测点数据持久化至数据存储对象时,则调用测点数据服务调度中心提供的数据存储接口,向测点数据服务调度中心发送请求类型为持久化请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型、以及测点数据处理请求所针对的测点数据对应的智能设备,然后根据预先存储的映射关系确定测点数据类型对应的目标数据存储对象类型所对应的数据存储对象。测点数据服务调度中心调用目标数据存储对象类型所对应的数据存储对象,将测点数据处理请求所针对的测点数据、以及测点数据处理请求所针对的测点数据对应的智能设备的唯一标识符对应持久化至目标数据存储对象类型所对应的数据存储对象。
本实施例中,测点数据服务调度中心可以将测点数据持久化至与测点数据类型对应的目标数据存储对象类型所对应的数据存储对象中,从而可以使不同类型的测点数据各自对应持久化至合适类型的数据存储对象,从而提高监控软件的测点数据的处理性能。
在一个实施例中,步骤S308具体包括如下步骤:当测点数据处理请求所对应的请求类型为读取请求时,则调用目标数据存储对象类型所对应的数据存储对象,从目标数据存储对象类型所对应的数据存储对象中,读取所针对的测点数据。
其中,读取请求,是从数据存储对象读取测点数据的请求。
具体地,当监控软件需要从数据存储对象中读取测点数据时,则调用测点数据服务调度中心提供的数据读取接口,向测点数据服务调度中心发送请求类型为读取请求的测点数据处理请求。测点数据服务调度中心解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型、以及测点数据处理请求所针对的测点数据对应的智能设备,然后根据预先存储的映射关系确定测点数据类型对应的目标数据存储对象类型所对应的数据存储对象。测点数据服务调度中心调用目标数据存储对象类型所对应的数据存储对象,从目标数据存储对象类型所对应的数据存储对象中,读取测点数据对应的智能设备的唯一标识符所对应的测点数据。
本实施例中,测点数据服务调度中心可以从目标数据存储对象类型所对应的数据存储对象中读取测点数据,从而可以从合适类型的数据存储对象中读取相应类型的测点数据,从而提高监控软件的测点数据的处理性能。
在一个实施例中,在步骤S308之前,该方法还包括如下步骤:从预先存储的数据存储对象静态信息中,提取目标数据存储对象类型所对应的数据存储对象的IP地址、IP端口、用户名和密码;根据用户名和密码,向IP地址对应的数据存储对象的IP端口,发送连接请求,以使数据存储对象对用户名和密码进行验证;当验证通过时,则与数据存储对象建立连接。
在一个实施例中,测点数据服务调度中心中预先存储的数据存储对象静态信息,可以包括数据存储对象的IP地址、IP端口、用户名和密码、以及测点数据类型与数据存储对象类型之间的映射关系等中的至少一种。
具体地,测点数据服务调度中心可以从预先存储的数据存储对象静态信息中,提取目标数据存储对象类型所对应的数据存储对象的IP地址、IP端口、用户名和密码,然后根据用户名和密码,向IP地址对应的数据存储对象的IP端口,发送连接请求,即,连接请求中包含用户名和密码。数据存储对象在接收到连接请求后,对用户名和密码进行验证。当验证通过时,测点数据服务调度中心则与数据存储对象建立连接,然后,测点数据服务调度中心可以执行调用目标数据存储对象类型所对应的数据存储对象,按照测点数据处理请求所对应的请求类型,对所针对的测点数据进行处理的步骤。
本实施例中,测点数据服务调度中心可以根据预先存储的数据存储对象的IP地址、IP端口、用户名和密码,能够方便、快捷地与目标数据存储对象类型对应的数据存储对象建立连接,然后对测点数据进行处理。
如图5所示,提供了一种监控软件的测点数据处理方法的时序图,该时序图具体包括如下步骤:
1)监控软件发送测点数据处理请求(持久化请求或读取请求)至测点数据服务调度中心。
2)测点数据服务调度中心确定测点数据处理请求所针对的测点数据的测点数据类型。
在一个实施例中,测点数据服务调度中心可以调用底层对象接口,访问所述测点数据的元数据,元数据包括测点数据对象的类名,属性名和属性类型等中的至少一种。测点数据服务调度中心可以根据属性名确定测点数据类型。
3)测点数据服务调度中心根据测点数据类型和数据存储对象类型之间的映射关系,确定与测点数据类型对应的目标数据存储对象类型所对应的数据存储对象。
4)测点数据服务调度中心向数据存储对象发送连接请求。
5)测点数据服务调度中心与数据存储对象建立连接,并将测点数据向所连接的数据存储对象进行映射。
在一个实施例中,测点数据服务调度中心可以根据所存储的测点数据与数据存储对象之间的映射关系,遍历数据存储对象,将测点数据与数据存储对象中的项目进行匹配,从而实现将测点数据向所连接的数据存储对象进行映射。比如:对于关系型数据库,测点数据对象中的类名可以映射为关系型数据库中的表名,测点数据对象中的属性名可以映射为关系型数据库中的字段名。对于字典型数据库,测点数据对象中的测点编号可以映射为字典型数据库中的key。
当测点数据处理请求为持久化请求时,则执行步骤6),当测点数据处理请求为读取请求时,则执行7)和8)。
6)测点数据服务调度中心将测点数据持久化至数据存储对象。
在一个实施例中,测点数据服务调度中心可以将对测点数据的存储操作,映射成对数据存储对象的持久化操作,以完成将测点数据持久化至数据存储对象。
7)测点数据服务调度中心从数据存储对象读取测点数据。
在一个实施例中,测点数据服务调度中心可以将对测点数据对象的读取操作,映射为数据存储对象的读取操作,以完成测点数据的读取。
8)测点数据服务调度中心将读取到的测点数据发送至监控软件。
应该理解的是,虽然图3的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图3中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图6所示,提供了一种监控软件的测点数据处理装置600,包括:请求获取模块602、数据类型确定模块604、目标数据存储对象确定模块606和测点数据处理模块608,其中:
请求获取模块602,用于获取监控软件发送的测点数据处理请求。
数据类型确定模块604,用于解析测点数据处理请求,确定测点数据处理请求所针对的测点数据的测点数据类型。
目标数据存储对象确定模块606,用于根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的测点数据类型对应的目标数据存储对象类型。
测点数据处理模块608,用于调用目标数据存储对象类型所对应的数据存储对象,按照测点数据处理请求所对应的请求类型,对所针对的测点数据进行处理。
在一个实施例中,目标数据存储对象确定模块606还用于当测点数据类型为配置测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与配置测点数据类型对应的字典型数据库为目标数据存储对象类型。其中,测点数据处理请求所针对的、且对应于配置测点数据类型的测点数据为配置测点数据。
在一个实施例中,目标数据存储对象确定模块606还用于当测点数据类型为实时测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与实时测点数据类型对应的数字典型数据库为目标数据存储对象类型。其中,测点数据处理请求所针对的、且对应于实时测点数据类型的测点数据为实时测点数据。
在一个实施例中,目标数据存储对象确定模块606还用于当测点数据类型为历史测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型。其中,测点数据处理请求所针对的、且对应于历史测点数据类型的测点数据为历史测点数据。
在一个实施例中,目标数据存储对象确定模块606还用于当测点数据类型为告警测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与告警测点数据类型对应的消息队列,作为目标数据存储对象类型。其中,测点数据处理请求所针对的、且对应于告警测点数据类型的测点数据为告警测点数据。
在一个实施例中,测点数据处理模块608还用于当测点数据处理请求所对应的请求类型为持久化请求时,则调用目标数据存储对象类型所对应的数据存储对象,将所针对的测点数据、以及测点数据所对应的被监控智能设备的唯一标识符对应持久化至目标数据存储对象类型所对应的数据存储对象。
在一个实施例中,测点数据处理模块608还用于当测点数据处理请求所对应的请求类型为读取请求时,则调用目标数据存储对象类型所对应的数据存储对象,从目标数据存储对象类型所对应的数据存储对象中,读取所针对的测点数据。
在一个实施例中,如图7所示,监控软件的测点数据处理装置600还包括:
连接模块610,用于从预先存储的数据存储对象静态信息中,提取目标数据存储对象类型所对应的数据存储对象的IP地址、IP端口、用户名和密码;根据用户名和密码,向IP地址对应的数据存储对象的IP端口,发送连接请求,以使数据存储对象对用户名和密码进行验证;当验证通过时,则与数据存储对象建立连接。
关于监控软件的测点数据处理装置的具体限定可以参见上文中对于监控软件的测点数据处理方法的限定,在此不再赘述。上述监控软件的测点数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图8所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储数据存储对象静态信息数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种监控软件的测点数据处理方法。
本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种监控软件的测点数据处理方法,其特征在于,所述方法包括:
获取监控软件发送的测点数据处理请求;
解析所述测点数据处理请求,确定所述测点数据处理请求所针对的测点数据的测点数据类型;
根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型;
调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理。
2.根据权利要求1所述的方法,其特征在于,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为配置测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述配置测点数据类型对应的字典型数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述配置测点数据类型的测点数据为配置测点数据。
3.根据权利要求1所述的方法,其特征在于,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为实时测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述实时测点数据类型对应的数字典型数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述实时测点数据类型的测点数据为实时测点数据。
4.根据权利要求1所述的方法,其特征在于,所述根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型包括:
当所述测点数据类型为历史测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述历史测点数据类型对应的分布式列式数据库为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述历史测点数据类型的测点数据为历史测点数据;
当所述测点数据类型为告警测点数据类型时,根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所述告警测点数据类型对应的消息队列,作为目标数据存储对象类型;
其中,所述测点数据处理请求所针对的、且对应于所述告警测点数据类型的测点数据为告警测点数据。
5.根据权利要求1所述的方法,其特征在于,所述调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理包括:
当所述测点数据处理请求所对应的请求类型为持久化请求时,则
调用所述目标数据存储对象类型所对应的数据存储对象,将所述所针对的测点数据、以及所述测点数据所对应的被监控智能设备的唯一标识符对应持久化至所述目标数据存储对象类型所对应的数据存储对象。
6.根据权利要求1所述的方法,其特征在于,所述调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理包括:
当所述测点数据处理请求所对应的请求类型为读取请求时,则
调用所述目标数据存储对象类型所对应的数据存储对象,从所述目标数据存储对象类型所对应的数据存储对象中,读取所述所针对的测点数据。
7.根据权利要求1至6中任一项所述的方法,其特征在于,在所述调用所述目标数据存储对象类型所对应的数据存储对象之前,所述方法还包括:
从预先存储的数据存储对象静态信息中,提取所述目标数据存储对象类型所对应的数据存储对象的IP地址、IP端口、用户名和密码;
根据所述用户名和所述密码,向所述IP地址对应的数据存储对象的所述IP端口,发送连接请求,以使所述数据存储对象对所述用户名和所述密码进行验证;
当验证通过时,则与所述数据存储对象建立连接。
8.一种监控软件的测点数据处理装置,其特征在于,所述装置包括:
请求获取模块,用于获取监控软件发送的测点数据处理请求;
数据类型确定模块,用于解析所述测点数据处理请求,确定所述测点数据处理请求所针对的测点数据的测点数据类型;
目标数据存储对象确定模块,用于根据预先存储的测点数据类型和数据存储对象类型之间的映射关系,确定与所确定的所述测点数据类型对应的目标数据存储对象类型;
测点数据处理模块,用于调用所述目标数据存储对象类型所对应的数据存储对象,按照所述测点数据处理请求所对应的请求类型,对所述所针对的测点数据进行处理。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN202010752901.1A 2020-07-30 2020-07-30 监控软件的测点数据处理方法、装置和计算机设备 Pending CN111881144A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010752901.1A CN111881144A (zh) 2020-07-30 2020-07-30 监控软件的测点数据处理方法、装置和计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010752901.1A CN111881144A (zh) 2020-07-30 2020-07-30 监控软件的测点数据处理方法、装置和计算机设备

Publications (1)

Publication Number Publication Date
CN111881144A true CN111881144A (zh) 2020-11-03

Family

ID=73204484

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010752901.1A Pending CN111881144A (zh) 2020-07-30 2020-07-30 监控软件的测点数据处理方法、装置和计算机设备

Country Status (1)

Country Link
CN (1) CN111881144A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112966020A (zh) * 2021-03-08 2021-06-15 徐少锋 一种工业高频大数据实时处理系统与方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103150599A (zh) * 2013-03-07 2013-06-12 江苏大学 一种电能质量数据监测与管理系统模型
US20140052727A1 (en) * 2012-07-31 2014-02-20 International Business Machines Corporation Data processing for database aggregation operation
CN106372069A (zh) * 2015-07-20 2017-02-01 深圳市奇辉电气有限公司 一种电能质量监测方法及系统
CN109582671A (zh) * 2018-11-13 2019-04-05 北京宇航系统工程研究所 一种运载火箭健康监测系统及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140052727A1 (en) * 2012-07-31 2014-02-20 International Business Machines Corporation Data processing for database aggregation operation
CN103150599A (zh) * 2013-03-07 2013-06-12 江苏大学 一种电能质量数据监测与管理系统模型
CN106372069A (zh) * 2015-07-20 2017-02-01 深圳市奇辉电气有限公司 一种电能质量监测方法及系统
CN109582671A (zh) * 2018-11-13 2019-04-05 北京宇航系统工程研究所 一种运载火箭健康监测系统及方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112966020A (zh) * 2021-03-08 2021-06-15 徐少锋 一种工业高频大数据实时处理系统与方法

Similar Documents

Publication Publication Date Title
CN109672741B (zh) 微服务监控方法、装置、计算机设备和存储介质
CN110221982B (zh) 业务系统的性能测试方法、装置、设备及可读存储介质
CN107688530B (zh) 软件测试方法及装置
CN108984388B (zh) 一种生成自动化测试用例的方法及终端设备
CN108848000B (zh) 网络请求测试方法、装置、计算机设备和存储介质
CN112261635A (zh) 蓝牙测试方法、装置、电子设备和计算机可读存储介质
CN111352836A (zh) 一种压力测试方法及相关装置
CN114356631A (zh) 故障定位方法、装置、计算机设备和存储介质
CN111881144A (zh) 监控软件的测点数据处理方法、装置和计算机设备
CN111586118A (zh) 数据处理方法、装置和计算机设备
CN113553341A (zh) 多维数据分析方法、装置、设备及计算机可读存储介质
CN113626449A (zh) 数据存储、数据查询方法及相关设备
CN116910102A (zh) 一种基于用户反馈的企业查询方法、装置及电子设备
CN111581217A (zh) 数据检测方法、装置、计算机设备和存储介质
CN113778996A (zh) 一种大数据流数据处理方法、装置、电子设备及存储介质
CN109104506B (zh) 域名解析规则的确定方法、装置和计算机可读存储介质
CN111339170A (zh) 数据处理方法、装置、计算机设备及存储介质
CN110737593B (zh) 智能容量管理方法、装置及存储介质
US20100057751A1 (en) Method for evaluating a production rule for a memory management analysis
CN114238140A (zh) 一种准入测试方法及装置
CN112231377A (zh) 数据映射方法、系统、装置、服务器和存储介质
CN117097599B (zh) 网络服务检测方法、装置、计算机设备和存储介质
CN116028731A (zh) 目标事件完成度的显示方法及相关产品
CN117453512A (zh) 业务系统的压测方法、装置、设备及存储介质
KR20180037632A (ko) Was 모니터링 시스템과 db 서버 모니터링 시스템의 연계 서비스를 제공하기 위한 시스템 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination