CN115442215A - 一种存储集群监控数据的处理方法、装置、设备及介质 - Google Patents

一种存储集群监控数据的处理方法、装置、设备及介质 Download PDF

Info

Publication number
CN115442215A
CN115442215A CN202211098080.XA CN202211098080A CN115442215A CN 115442215 A CN115442215 A CN 115442215A CN 202211098080 A CN202211098080 A CN 202211098080A CN 115442215 A CN115442215 A CN 115442215A
Authority
CN
China
Prior art keywords
data
monitoring
alarm
monitoring data
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211098080.XA
Other languages
English (en)
Inventor
戴艳文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pingan Payment Technology Service Co Ltd
Original Assignee
Pingan Payment Technology Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pingan Payment Technology Service Co Ltd filed Critical Pingan Payment Technology Service Co Ltd
Priority to CN202211098080.XA priority Critical patent/CN115442215A/zh
Publication of CN115442215A publication Critical patent/CN115442215A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06Management of faults, events, alarms or notifications
    • H04L41/0631Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Alarm Systems (AREA)

Abstract

本发明涉及数据展示领域,提出一种存储集群监控数据的处理方法、装置、设备及介质,包括:在预设时间内监听当前用户的存储集群内部数据,获取监控数据;监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听存储集群内部数据获得的;依据告警规则对监控数据进行告警判断,获取发生告警的告警时间和告警数据;依据告警时间关联监控数据中的聚合监控数据以及片区监控数据;依据告警数据、关联的聚合监控数据和片区监控数据生成并显示监控文件数据表。可准确获取告警数据及关联数据。

Description

一种存储集群监控数据的处理方法、装置、设备及介质
技术领域
本发明涉及数据展示、数据报表领域,具体涉及一种存储集群监控数据的处理方法、装置、设备及介质。
背景技术
现有的大数据存储集群中没有设置监控程序,当前用户无法获取大数据存储集群内部数据的运行状态以及健康情况。在大数据存储集群的运行状态出现问题时,当前用户无法及时发现并处理出现的运行状态问题。并且在当前用户发现大数据存储集群的运行状态出现问题时,也无法快速准确的获取到相关联数据进行参考。例如,在存储集群的运行状态出现问题情况下,当前用户无法了解到是在什么时间段出现的问题。从发现到解决大数据存储集群运行问题存在严重的滞后性,无法满足当前用户的需求。
发明内容
本发明提出一种存储集群监控数据的处理方法、装置、设备及介质,可用于解决当前用户发现大数据存储集群的运行状态出现问题时,无法快速准确的获取到相关联数据进行参考的问题,并可提出如下的技术方案。
本发明提出一种存储集群监控数据的处理方法,包括:
在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
本发明还可提出一种存储集群监控数据的处理装置,包括:
监听单元,在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
获取单元,用于依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
关联单元,用于依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
生成单元,用于依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
本发明提出一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述所述存储集群监控数据的处理方法的步骤。
本发明提出一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述所述存储集群监控数据的处理方法的步骤。
本发明提出一种存储集群监控数据的处理方法、装置、设备及介质,首先,可按照当前客户的需求,将一部分的存储集群内部数据进行监听。在多个聚合时间的相同片区内,将监听的监控数据存储为片区监控数据。将多个聚合时间内,将监听的监控数据存储为一个聚合监控数据。然后,按照当前客户的需求,将不满足告警规则的监控数据记录为告警数据。然后,可查询出与告警数据关联的告警时间,可从告警时间查询出该告警数据关联的片区监控数据,以确认出存储集群出现运行状态问题的状态。并且还可从该告警时间中查询出关联的聚合监控数据,根据该聚合监控数据,可进一步查询出该聚合监控数据下其他的监控数据是否已转变为告警数据,从而可确定存储集群出现运行状态问题的严重程度。即通过一个告警数据,可查询出该告警数据首次出现的时刻,以确认出存储集群出现运行状态问题的时刻,另外还可查询出关联的聚合监控数据下其他的监控数据是否转变为告警数据,以确定存储集群出现运行状态问题的严重程度。
附图说明
图1是本发明一实施例中存储集群监控数据的处理方法的一应用环境示意图;
图2是本发明一实施例中存储集群监控数据的处理方法的一流程示意图;
图3是本发明一实施例中存储集群监控数据的片区监控数据、聚合监控数据的示意图;
图4是本发明一实施例中存储集群监控数据的处理方法的又一流程示意图;
图5是本发明一实施例中存储集群监控数据的处理方法的模型示意图;
图6是本发明一实施例中存储集群监控数据的处理装置的一结构示意图;
图7是本发明一实施例中计算机设备的一结构示意图。
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。
需要说明的是,本实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
本发明实施例提供的存储集群监控数据的处理方法,可应用在如图1的应用环境中,其中,客户端通过网络与服务端进行通信。服务端可以通过客户端监听预设时间内当前用户的存储集群内部数据,并提取对应的监控数据;监控数据包括与聚合时间相对应的多个聚合监控数据和与片区时间相对应的多个片区监控数据;其中,预设时间包括多个聚合时间,聚合时间包括多个片区时间;一个片区监控数据包括多个聚合时间内的同一片区的所有监控数据的总和;依据告警规则对监控数据进行告警判断,获取发生告警的告警时间和告警数据;依据告警时间关联监控数据中的聚合监控数据以及片区监控数据;依据告警数据、关联的聚合监控数据和片区监控数据生成并显示监控文件数据表。在本发明中,提出一种存储集群监控数据的处理方法,可监测大数据存储集群内部的基本运行情况,判断出大数据存储集群的健康状况。并且通过告警数据可及时的发现并解决问题,防止产线事故的发生,通过展示监控数据便于当前用户进行查看,节省人力成本。
请参阅图2所示,图2是本发明一实施例提供的存储集群监控数据的处理方法的一个流程示意图,可包括有如下的步骤:
步骤S10、在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的。
在一些实施例中,获取当前用户的存储集群内部数据,根据当前用户的需求,将部分存储集群内部数据设定为监控数据。在大数据存储集群中设置采集监控数据端,采用可配置的方式来采集当前用户所需要的监控数据,可减少每次采集的数据量,加快采集的速度,减轻数据存储的负担。
请参阅图3,图3是本发明一实施例中存储集群监控数据的片区监控数据、聚合监控数据的示意图。在一些实施例中,在预设的聚合时间内,对监控数据进行监听处理,并记录为聚合监控数据。可定义聚合时间,聚合时间为监听一次所有监控数据的一个周期。在一个聚合时间内,至少监听一次所有监控数据。一个聚合时间内可包括有多个片区时间,将每个片区时间下,监听的监控数据定义为片区监控数据。
在一些实施例中,存储集群内部数据可包括多个存储集群子数据,在一个聚合时间内,一个聚合时间内包括所有片区时间的数量可大于等于所有存储集群子数据的数量。并且可在一个片区时间内,监听一个存储集群子数据。例如,一个聚合时间内的所有片区时间可分别为P1、P2、P3、……Pn,所有的存储集群子数据为Q1、Q2、Q3、……Qm,m≤n,在一个片区时间内监听一个存储集群子数据。所述存储集群内部数据包括多个存储集群子数据,一个所述片区时间监听一个所述存储集群子数据,多个所述聚合时间的该片区时间监听该存储集群子数据,以构成所述片区监控数据;所述片区时间的数量大于等于所述存储集群子数据的数量。
在一些实施例中,在一个聚合时间内,片区时间的排列顺序与存储集群子数据的排列顺序相同。例如,存储集群子数据Q1在片区时间P1内进行监听,存储集群子数据Q2在片区时间P2内进行监听,存储集群子数据Q3在片区时间P3内进行监听……,存储集群子数据Qm在片区时间Pm内进行监听。
在一些实施例中,各个片区时间的时长可相同,例如当聚合时间为3分钟时,一个聚合时间下可包括有六个片区时间,各个片区时间的时长可为30秒,即各个片区时间可分别为0秒~30秒、30秒~60秒、60秒~90秒、90秒~120秒、120秒~150秒、150秒~180秒。在一个片区时间内监听一个存储集群子数据。
请参阅图3,在一些实施例中,在每个片区时间内监听的监控数据为一个片区监控数据。例如在片区时间P1内监听的存储集群子数据Q1为第一个片区记录L1,在片区时间P2内监听的存储集群子数据Q2为第二个片区记录L2,在片区时间P3内监听的存储集群子数据Q3为第三个片区记录L3……,在片区时间Pm内监听的存储集群子数据Qm为第m个片区记录。在同一个片区记录中,可查询出该片区记录下关联的监控数据的变化情况。
在一些实施例中,存储一个聚合时间内所有监控数据为一个聚合监控数据。例如,在一个聚合时间内,在片区时间P1内监听的监控数据、在片区时间P2内监听的监控数据、在片区时间P3内监听的监控数据……,在片区时间Pm内监听的监控数据为一个聚合监控数据。在一个聚合监控数据下,可查询出所有监控数据的数值情况。
步骤S20、依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据。
在一些实施例中,可预先设定告警规则,告警规则指示不满足当前用户需求的监控数据为告警数据。例如,可对一个监控数据设置一个告警标准和一个告警阈值,当监控数据的数值大小与告警标准的数值大小的差值大于告警阈值时,即可判断此时该监控数据为告警数据。按照告警规则,可记录告警数据。
步骤S30、依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据。
在一些实施例中,记录告警数据之后,可查询出该告警数据相关联的片区监控数据和聚合监控数据。通过片区监控数据可查询出该告警数据最初的告警时间,并且在该告警时间下,可通过聚合监控数据查看其他监控数据的数值大小,或者可通过聚合监控数据查看其他监控数据是否已变成告警数据。
每间隔一个告警周期,可生成一次告警记录,告警周期是预先设定的,用于指示记录告警数据的时间间隔。
在一些实施例中,在记录告警数据之后,可预先设定一个告警周期,告警周期可用于指示记录告警数据的时间间隔。每间隔一个告警周期,可生成一次告警记录。即在告警数据存在之后,可周期性的生成告警记录,直至该告警数据得到解决和处理。
记录告警数据之后,当告警数据的告警时间大于等于告警阈值时间时,发送告警数据、告警数据关联的片区监控数据和聚合监控数据至当前用户,告警阈值时间是预先设定的,用于指示发送告警数据的最短时间。所述告警周期小于等于所述告警阈值时间。
在一些实施例中,记录告警数据之后,需要及时的将告警数据发送给当前用户。预先设定告警阈值时间,用于指示发送告警数据的最短时间。当告警数据的告警时间大于等于告警阈值时间时,可发送告警数据、告警数据关联的片区监控数据和聚合监控数据至当前用户。为了降低给当前用用户发送告警数据的频率,可将告警周期设置为小于等于告警阈值时间。即可在告警周期下持续记录告警数据,但此时并不发送告警数据至当前用户。
当告警数据的告警数量大于等于告警阈值数量时,发送告警数据的告警级别至当前用户,告警阈值数量是预先设定的,用于指示发送告警级别的最少数量,告警级别表征告警数据的数量对应的严重程度。
在一些实施例中,记录告警数据之后,需要及时的将告警数据发送给当前用户。预先设定告警阈值数量,用于指示发送告警级别的最少数量。告警级别可表征告警数据的数量对应的严重程度,例如可按照告警数量从少到多,将告警级别设定为轻级告警、中级告警和高级告警。当告警数据的告警数量大于等于告警阈值数量时,可发送告警数据的告警级别至当前用户。
对每天、每月、每年内的所述监控文件数据表记录,形成日报表、月报表、年报表。
在一些实施例中,可周期性的记录一次聚合监控数据,可分别生成一天、一月、一年内的聚合监控数据为日报表、月报表和年报表。例如,可每小时记录一次聚合监控数据,分别生成一天、一月、一年内的聚合监控数据为日报表、月报表、年报表。
步骤S40、依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
步骤S50、显示所述告警数据、关联的所述聚合监控数据和所述片区监控数据、以及所述监控文件数据表。
在一些实施例中,可展示监控数据,生成告警数据、告警数据关联的片区监控数据和聚合监控数据的监控文件数据表。对监控文件数据表设置主键,通过查询所述主键获取监控文件数据表,主键表征所述监控文件数据表的唯一标识。主键(主键,primarykey)是被挑选出来,作表的行的唯一标识的候选关键字。一个表只有一个主键。主键可以由一个字段,也可以由多个字段组成,分别称为单字段主键或多字段主键。
请参阅图4所示,在一些实施例中,一种存储集群监控数据的处理方法还可包括如下的步骤。
步骤S600、判断发送告警数据的数量是否小于预设告警阈值数量。
步骤S601、当发送告警数据的数量小于预设告警阈值数量时,发送监控文件数据表至当前用户。
步骤S602、当发送告警数据的数量大于等于预设告警阈值数量时,发送监控文件数据表至当前用户,并发送告警数据的告警级别至当前用户,告警级别表征告警数据的数量对应的严重程度。
可见,在上述方案中,请参阅图5,图5是本发明一实施例中存储集群监控数据的处理方法的模型示意图。首先,可按照当前客户的需求,将一部分的存储集群内部数据设定为监控数据。其次,可周期性的对监听监控数据100。将监听的监控数据上传至服务端101中。在聚合时间的每个片区时间内,将监听的监控数据定义为片区监控数据,并存储为片区监控数据。将聚合时间内,将监听的监控数据存储为一个聚合监控数据。然后按照当前客户的需求,将不满足需求的监控数据设定为告警数据,并且可记录告警数据。进行监控告警102,并且可对监控数据进行前端展示103,进一步的可存储监控数据至存储介质104。在记录告警数据之后,可查询出告警数据关联的片区监控数据,可从片区监控数据中查询出该告警数据首次出现的时刻,以确认出存储集群出现运行状态问题的时刻。并且还可从该片区监控数据中查询出关联的聚合监控数据,根据该聚合监控数据,可进一步查询出该聚合监控数据下,其他监控数据是否转变为告警数据,从而可确定存储集群出现运行状态问题的严重程度。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
请参阅图6,本发明提出一种存储集群监控数据的处理装置。在一些实施例中,所述存储集群监控数据的处理装置200可包括有监听单元201、获取单元202、关联单元203、生成单元204和显示单元205。各功能模块详细说明如下。
监听单元201,在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的。
获取单元202,用于依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据。
关联单元203,用于依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据。
生产单元204,用于依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
显示单元205,用于显示所述告警数据、关联的所述聚合监控数据和所述片区监控数据、以及所述监控文件数据表。
在一具体实施例中,监听单元201具体用于:
在一些实施例中,获取当前用户的存储集群内部数据,根据当前用户的需求,将部分存储集群内部数据设定为监控数据。在大数据存储集群中设置采集监控数据端,采用可配置的方式来采集当前用户所需要的监控数据,可减少每次采集的数据量,加快采集的速度,减轻数据存储的负担。
在一些实施例中,在预设的聚合时间内,对监控数据进行监听处理,并记录为聚合监控数据。可定义聚合时间,聚合时间为监听一次所有监控数据的一个周期。在一个聚合时间内,至少监听一次所有监控数据。一个聚合时间内可包括有多个片区时间,将每个片区时间下,监听的监控数据定义为片区监控数据。
在一些实施例中,存储集群内部数据可包括多个存储集群子数据,在一个聚合时间内,一个聚合时间内包括所有片区时间的数量可大于等于所有存储集群子数据的数量。并且可在一个片区时间内,监听一个存储集群子数据。例如,一个聚合时间内的所有片区时间可分别为P1、P2、P3、……Pn,所有的存储集群子数据为Q1、Q2、Q3、……Qm,m≤n,在一个片区时间内监听一个存储集群子数据。
在一些实施例中,在一个聚合时间内,片区时间的排列顺序与存储集群子数据的排列顺序相同。例如,存储集群子数据Q1在片区时间P1内进行监听,存储集群子数据Q2在片区时间P2内进行监听,存储集群子数据Q3在片区时间P3内进行监听……,存储集群子数据Qm在片区时间Pm内进行监听。
在一些实施例中,各个片区时间的时长可相同,例如当聚合时间为3分钟时,一个聚合时间下可包括有六个片区时间,各个片区时间的时长可为30秒,即各个片区时间可分别为0秒~30秒、30秒~60秒、60秒~90秒、90秒~120秒、120秒~150秒、150秒~180秒。在一个片区时间内监听一个存储集群子数据。
例如在片区时间P1内监听的存储集群子数据Q1为第一个片区记录L1,在片区时间P2内监听的存储集群子数据Q2为第二个片区记录L2,在片区时间P3内监听的存储集群子数据Q3为第三个片区记录L3……,在片区时间Pm内监听的存储集群子数据Qm为第m个片区记录。在同一个片区记录中,可查询出该片区记录下关联的监控数据的变化情况。
在一些实施例中,存储一个聚合时间内所有监控数据为一个聚合监控数据。例如,在一个聚合时间内,在片区时间P1内监听的监控数据、在片区时间P2内监听的监控数据、在片区时间P3内监听的监控数据……,在片区时间Pm内监听的监控数据为一个聚合监控数据。在一个聚合监控数据下,可查询出所有监控数据的数值情况。
在一具体实施例中,获取单元202可具体用于:
在一些实施例中,可预先设定告警规则,告警规则指示不满足当前用户需求的监控数据为告警数据。例如,可对一个监控数据设置一个告警标准和一个告警阈值,当监控数据的数值大小与告警标准的数值大小的差值大于告警阈值时,即可判断此时该监控数据为告警数据。按照告警规则,可记录告警数据。
在一具体实施例中,关联单元203可具体用于:
在一些实施例中,记录告警数据之后,可查询出该告警数据相关联的片区监控数据和聚合监控数据。通过片区监控数据可查询出该告警数据最初的告警时间,并且在该告警时间下,可通过聚合监控数据查看其他监控数据的数值大小,或者可通过聚合监控数据查看其他监控数据是否已变成告警数据。
在一具体实施例中,生成单元204可具体用于:
在一些实施例中,可展示监控数据,生成告警数据、告警数据关联的片区监控数据和聚合监控数据的监控文件数据表。对监控文件数据表设置主键,通过查询所述主键获取监控文件数据表,主键表征所述监控文件数据表的唯一标识。主键(主键,primarykey)是被挑选出来,作表的行的唯一标识的候选关键字。一个表只有一个主键。主键可以由一个字段,也可以由多个字段组成,分别称为单字段主键或多字段主键。
关于存储集群监控数据的处理装置的具体限定可以参见上文中对于存储集群监控数据的处理方法的限定,在此不再赘述。上述存储集群监控数据的处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备300可以是服务端,其内部结构图可以如图7所示。该计算机设备300包括通过系统总线连接的处理器301、存储器302、网络接口304和数据库。其中,该计算机设备300的处理器301用于提供计算和控制能力。该计算机设备300的存储器302包括非易失性和/或易失性存储介质、内存储器303。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备300的网络接口用于与外部的客户端通过网络连接通信。该计算机程序被处理器执行时以实现一种存储集群监控数据的处理方法服务端侧的功能或步骤。
在一个实施例中,提供了一种计算机设备300,包括存储器302、处理器301及存储在存储器上并可在处理器上运行的计算机程序,处理器301执行计算机程序时实现以下步骤:
在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
需要说明的是,上述关于计算机可读存储介质或计算机设备所能实现的功能或步骤,可对应参阅前述方法实施例中,服务端侧以及客户端侧的相关描述,为避免重复,这里不再一一描述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明,本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案,例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
除说明书所述的技术特征外,其余技术特征为本领域技术人员的已知技术,为突出本发明的创新特点,其余技术特征在此不再赘述。

Claims (10)

1.一种存储集群监控数据的处理方法,其特征在于,包括:
在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据,生成并显示监控文件数据表。
2.根据权利要求1所述的存储集群监控数据的处理方法,其特征在于,所述存储集群内部数据包括多个存储集群子数据,一个所述片区时间监听一个所述存储集群子数据,多个所述聚合时间的同一片区时间监听所述存储集群子数据,以构成所述片区监控数据;所述片区时间的数量大于等于所述存储集群子数据的数量。
3.根据权利要求2所述的存储集群监控数据的处理方法,其特征在于,所述片区监控数据的排列顺序与所述存储集群子数据出现的先后顺序相同。
4.根据权利要求1所述的存储集群监控数据的处理方法,其特征在于,所述依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表的步骤之后,包括:
发送所述监控文件数据表至所述当前用户;
比较所述告警数据的数量与预设的告警阈值数量的大小;
当发送所述告警数据的数量小于预设的告警阈值数量时,发送所述监控文件数据表至所述当前用户,所述告警级别表征所述告警数据的数量对应的严重程度。
5.根据权利要求4所述的存储集群监控数据的处理方法,其特征在于,所述比较所述告警数据的数量与预设的告警阈值数量的大小的步骤之后,包括:
当发送所述告警数据的数量大于等于预设的告警阈值数量时,发送所述监控文件数据表、所述告警数据的告警级别至所述当前用户。
6.根据权利要求1所述的存储集群监控数据的处理方法,其特征在于,所述生成并显示监控文件数据表的步骤之后,还包括:
设置所述监控文件数据表的主键,通过查询所述主键获取所述监控文件数据表,所述主键表征所述监控文件数据表的唯一标识。
7.根据权利要求1所述的存储集群监控数据的处理方法,其特征在于,所述依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表的步骤包括:
依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成所述监控文件数据表;
显示所述告警数据、关联的所述聚合监控数据和所述片区监控数据、以及所述监控文件数据表。
8.一种存储集群监控数据的处理装置,其特征在于,包括:
监听单元,用于在预设时间内监听当前用户的存储集群内部数据,获取监控数据;所述监控数据包括在聚合时间内监听获得的多个聚合监控数据和在片区时间监听获得的多个片区监控数据;其中,预设时间包括多个聚合时间,一个聚合时间包括多个片区时间;一个片区监控数据是在多个聚合时间内的同一片区时间监听所述存储集群内部数据获得的;
获取单元,用于依据告警规则对所述监控数据进行告警判断,获取发生告警的告警时间和告警数据;
关联单元,用于依据告警时间关联所述监控数据中的聚合监控数据以及片区监控数据;
生成单元,用于依据所述告警数据、关联的所述聚合监控数据和所述片区监控数据生成并显示监控文件数据表。
9.一种计算机设备,其特征在于,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述存储集群监控数据的处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述存储集群监控数据的处理方法的步骤。
CN202211098080.XA 2022-09-08 2022-09-08 一种存储集群监控数据的处理方法、装置、设备及介质 Pending CN115442215A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211098080.XA CN115442215A (zh) 2022-09-08 2022-09-08 一种存储集群监控数据的处理方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211098080.XA CN115442215A (zh) 2022-09-08 2022-09-08 一种存储集群监控数据的处理方法、装置、设备及介质

Publications (1)

Publication Number Publication Date
CN115442215A true CN115442215A (zh) 2022-12-06

Family

ID=84246409

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211098080.XA Pending CN115442215A (zh) 2022-09-08 2022-09-08 一种存储集群监控数据的处理方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN115442215A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150429A (zh) * 2007-10-10 2008-03-26 上海可鲁系统软件有限公司 一种远程监控或维护的方法及装置
CN101729421A (zh) * 2009-12-11 2010-06-09 杭州华三通信技术有限公司 一种基于时分复用的存储方法和装置
CN105279226A (zh) * 2015-09-09 2016-01-27 浪潮(北京)电子信息产业有限公司 一种基于大数据的数据监控方法和设备
CN107820692A (zh) * 2016-12-23 2018-03-20 深圳中兴力维技术有限公司 一种告警同步方法和系统
CN110113201A (zh) * 2019-04-30 2019-08-09 平安科技(深圳)有限公司 监控数据处理方法、装置及监控系统
CN112732405A (zh) * 2021-01-08 2021-04-30 北京数衍科技有限公司 Jvm线程监控方法、装置及电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150429A (zh) * 2007-10-10 2008-03-26 上海可鲁系统软件有限公司 一种远程监控或维护的方法及装置
CN101729421A (zh) * 2009-12-11 2010-06-09 杭州华三通信技术有限公司 一种基于时分复用的存储方法和装置
CN105279226A (zh) * 2015-09-09 2016-01-27 浪潮(北京)电子信息产业有限公司 一种基于大数据的数据监控方法和设备
CN107820692A (zh) * 2016-12-23 2018-03-20 深圳中兴力维技术有限公司 一种告警同步方法和系统
CN110113201A (zh) * 2019-04-30 2019-08-09 平安科技(深圳)有限公司 监控数据处理方法、装置及监控系统
CN112732405A (zh) * 2021-01-08 2021-04-30 北京数衍科技有限公司 Jvm线程监控方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN109274526B (zh) 测试缺陷自动预警方法、装置、计算机设备及存储介质
CN109660380B (zh) 服务器运行状态的监控方法、平台、系统及可读存储介质
CN109522287B (zh) 分布式文件存储集群的监控方法、系统、设备及介质
CN112631913B (zh) 应用程序的运行故障监控方法、装置、设备和存储介质
CN107302469B (zh) 分布式服务集群系统数据更新的监控装置及方法
CN108599977B (zh) 基于统计方法监控系统可用性的系统及方法
DE112018000539T5 (de) Alarmanzeigesystem und alarmanzeigeverfahren
CN111400367B (zh) 业务报告生成方法、装置、计算机设备和存储介质
US11770199B2 (en) Traffic data self-recovery processing method, readable storage medium, server and apparatus
CN108874618B (zh) Cognos进程的监控方法、装置、计算机设备和存储介质
CN112671613A (zh) 联邦学习集群监控方法、装置、设备及介质
CN114116396A (zh) 一种全链路追踪方法、系统、存储介质及设备
CN111131290A (zh) 流量数据处理方法和装置
CN106911519A (zh) 一种数据采集监控方法及装置
CN110363381B (zh) 一种信息处理方法和装置
CN113609230A (zh) 数据同步异常告警方法、装置、计算机设备和存储介质
CN112132652B (zh) 订单信息获取方法、装置、计算机设备和存储介质
CN110995506B (zh) 告警量异常的定位方法、装置、存储介质和计算机设备
CN115442215A (zh) 一种存储集群监控数据的处理方法、装置、设备及介质
CN113342608A (zh) 流式计算引擎任务的监控方法及装置
CN110134680B (zh) 空间监控方法、装置、计算机设备及存储介质
CN105607983A (zh) 数据异常监控方法和装置
CN113808725A (zh) 设备预警系统和方法
CN114531338A (zh) 一种基于调用链数据的监控告警和溯源方法及系统
CN114186855A (zh) 监控预警方法、装置、计算机设备、存储介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination