CN110856040A - 客户端中监控数据的处理方法和装置 - Google Patents

客户端中监控数据的处理方法和装置 Download PDF

Info

Publication number
CN110856040A
CN110856040A CN201911082937.7A CN201911082937A CN110856040A CN 110856040 A CN110856040 A CN 110856040A CN 201911082937 A CN201911082937 A CN 201911082937A CN 110856040 A CN110856040 A CN 110856040A
Authority
CN
China
Prior art keywords
data
monitoring data
target
monitoring
timestamp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911082937.7A
Other languages
English (en)
Other versions
CN110856040B (zh
Inventor
马水平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Hangzhou Network Co Ltd
Original Assignee
Netease Hangzhou Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netease Hangzhou Network Co Ltd filed Critical Netease Hangzhou Network Co Ltd
Priority to CN201911082937.7A priority Critical patent/CN110856040B/zh
Publication of CN110856040A publication Critical patent/CN110856040A/zh
Application granted granted Critical
Publication of CN110856040B publication Critical patent/CN110856040B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4424—Monitoring of the internal components or processes of the client device, e.g. CPU or memory load, processing speed, timer, counter or percentage of the hard disk space used
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/4425—Monitoring of client processing errors or hardware failure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明实施例提供了一种客户端中监控数据的处理方法及装置，通过客户端将时间戳满足预设阈值的第二监控数据，作为第一目标数据，接着从第一集合中，确定与第一目标数据对应的第二目标数据，将第二目标数据从第一集合中移入所述第三集合，更新所述第一集合，并将更新后的第一集合中的第一监控数据，发送至所述服务端，通过客户端对监控数据的时间戳进行监控，并将满足预设阈值的监控数据从第一集合中移入第三集合，减少对无用的数据进行存储，同时将更新后的监控数据发送至服务端，提高了网络带宽的传输效率。

Description

客户端中监控数据的处理方法和装置
技术领域
本发明涉及数据处理技术领域，特别是涉及一种客户端中监控数据的处理方法和一种客户端中监控数据的处理装置。
背景技术
随着监控技术的快速发展和普及，可以通过监控系统对客户端进行实时监控，以确定客户端当前的状态。如在网络直播场景中，可以通过获取监控数据，确定主播直播间的直播状态，用户的登录状态等等。
然而，监控系统在获取监控数据的过程中，需要对监控数据进行全量获取，即使当前没有新的监控数据，依旧会全量获取监控数据，从而每次都进行全量数据的拉取，容易拉取无用的数据，获取效率低下，浪费了大量的网络带宽，不利于网络监控。
发明内容
本发明实施例是提供一种客户端中监控数据的处理方法，以解决现有技术中获取监控数据过程中拉取效率低下、网络带宽浪费以及无用数据较多的问题。
相应的，本发明实施例还提供了一种客户端中监控数据的处理装置，用以保证上述方法的实现及应用。
为了解决上述问题，本发明实施例公开了一种客户端中监控数据的处理方法，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，所述方法包括：
将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
将更新后的第一集合中的第一监控数据，发送至预设服务端。
可选地，所述第一监控数据包括第一数据键以及与所述第一数据键对应的第一数据值，所述将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合，包括：
将与所述第二目标数据对应的第一目标数据键与第一目标数据值，从所述第一集合中删除；
并将所述第一目标数据键与所述第一目标数据值，存储于所述第三集合中。
可选地，还包括：
将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合。
可选地，所述标识为由多个所述第一监控数据组成的第二数据键，所述时间戳为与所述第二数据键对应的数据时间戳，所述将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合，包括：
将与所述第一目标数据对应的第二目标数据键与目标数据时间戳，从所述第二集合中删除；
并将所述第二目标数据键存储于所述第三集合中。
可选地，还包括：
当监测到数据更新时，确定与所述数据更新对应的目标监控数据；
当所述目标监控数据存在于所述第三集合时，则将所述目标监控数据从所述第三集合，分别移入所述第一集合与所述第二集合；
当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合；
其中，所述目标监控数据包括计数数据、状态变化数据、指标统计数据以及摘要数据中的至少一种。
可选地，将所述目标监控数据从所述第三集合移入所述第二集合，包括：
确定所述目标监控数据对应的时间戳；
当所述第二集合中存在所述目标监控数据时，更新所述目标监控数据在所述第二集合中对应的时间戳；
当所述第二集合中不存在所述目标监控数据时，则将所述目标监控数据的标识与所述目标监控数据对应的时间戳存入所述第二集合。
可选地，所述当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合，包括：
确定所述目标监控数据对应的时间戳；
将所述目标监控数据存储于所述第一集合中，以及将所述目标监控数据与所述目标监控数据对应的时间戳存储于所述第二集合中。
可选地，所述将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据，包括：
获取当前的时间点；
分别确定各个所述时间戳与所述时间点之间的时间差值；
将所述时间差值大于所述预设阈值的第二监控数据，作为所述第一目标数据。
可选地，所述将更新后的第一集合中的第一监控数据，发送至所述服务端，包括：
获取所述服务端发送的数据获取请求；
响应所述数据获取请求，将更新后的第一集合中的第一监控数据发送至所述服务端。
可选地，还包括：
按照所述时间戳的先后顺序，对所述第二监控数据进行排序。
本发明实施例还公开了一种客户端中监控数据的处理装置，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，所述装置包括：
第一数据确定模块，用于将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
第二数据确定模块，用于从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
第一集合更新模块，用于将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
数据发送模块，用于将更新后的第一集合中的第一监控数据，发送至预设服务端。
可选地，所述第一监控数据包括第一数据键以及与所述第一数据键对应的第一数据值，所述集合更新模块包括：
第一数据删除子模块，用于将与所述第二目标数据对应的第一目标数据键与第一目标数据值，从所述第一集合中删除；
第一数据存储子模块，用于并将所述第一目标数据键与所述第一目标数据值，存储于所述第三集合中。
可选地，还包括：
第二集合更新模块，用于将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合。
可选地，所述标识为由多个所述第一监控数据组成的第二数据键，所述时间戳为与所述第二数据键对应的数据时间戳，所述第二集合更新模块包括：
第二数据删除子模块，用于将与所述第一目标数据对应的第二目标数据键与目标数据时间戳，从所述第二集合中删除；
第二数据存储子模块，用于并将所述第二目标数据键存储于所述第三集合中。
可选地，还包括：
监控数据确定模块，用于当监测到数据更新时，确定与所述数据更新对应的目标监控数据；
第一数据存储模块，用于当所述目标监控数据存在于所述第三集合时，则将所述目标监控数据从所述第三集合，分别移入所述第一集合与所述第二集合；
第二数据存储模块，用于当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合；
其中，所述目标监控数据包括计数数据、状态变化数据、指标统计数据以及摘要数据中的至少一种。
可选地，所述第一数据存储模块包括：
时间戳确定子模块，用于确定所述目标监控数据对应的时间戳；
时间戳更新子模块，用于当所述第二集合中存在所述目标监控数据时，更新所述目标监控数据在所述第二集合中对应的时间戳；
第一数据存储子模块，用于当所述第二集合中不存在所述目标监控数据时，则将所述目标监控数据的标识与所述目标监控数据对应的时间戳存入所述第二集合。
可选地，所述第二数据存储模块包括：
时间戳确定子模块，用于确定所述目标监控数据对应的时间戳；
第二数据存储子模块，用于将所述目标监控数据存储于所述第一集合中，以及将所述目标监控数据与所述目标监控数据对应的时间戳存储于所述第二集合中。
可选地，所述第一数据确定模块包括：
时间点获取子模块，用于获取当前的时间点；
时间差值确定子模块，用于分别确定各个所述时间戳与所述时间点之间的时间差值；
数据确定子模块，用于将所述时间差值大于所述预设阈值的第二监控数据，作为所述第一目标数据。
可选地，所述数据发送模块具体用于：
获取所述服务端发送的数据获取请求；
响应所述数据获取请求，将更新后的第一集合中的第一监控数据发送至所述服务端。
可选地，还包括：
数据排序模块，用于按照所述时间戳的先后顺序，对所述第二监控数据进行排序。
本发明实施例还公开了一种电子设备，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述装置执行如上所述的一个或多个的方法。
本发明实施例还公开了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如上所述的一个或多个的方法。
本发明实施例包括以下优点：
在本发明实施例中，客户端包括第一集合、第二集合以及第三集合，其中，第一集合中包括第一监控数据，第二集合中包括第二监控数据，第二监控数据包含第一监控数据的标识和第一监控数据对应的时间戳，通过客户端将时间戳满足预设阈值的第二监控数据，作为第一目标数据，接着从第一集合中，确定与第一目标数据对应的第二目标数据，将第二目标数据从第一集合中移入所述第三集合，更新所述第一集合，并将更新后的第一集合中的第一监控数据，发送至所述服务端，通过客户端对监控数据的时间戳进行监控，并将满足预设阈值的监控数据从第一集合中移入第三集合，减少对无用的数据进行存储，同时将更新后的监控数据发送至服务端，提高了网络带宽的传输效率。
附图说明
图1是本发明的一种客户端中监控数据的处理方法实施例一的步骤流程图；
图2是本发明的一种客户端中监控数据的处理方法实施例二的步骤流程图；
图3是本发明实施例中监控数据处理的示意图；
图4是本发明的一种客户端中监控数据的处理装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1，示出了本发明的一种客户端中监控数据的处理方法实施例一的步骤流程图，应用于可与服务端连接的客户端，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，具体可以包括如下步骤：
步骤101，将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
在网络数据监控过程中，可以通过监控报警系统进行数据监控。其中，可以通过客户端采集监控数据，然后将监控数据发送至服务端。具体的，客户端可以为监控报警系统中的数据采集接口，负责采集监控对象的数据，并对数据进行存储。服务端可以在数据处理接口，可以定时从客户端获取监控对象当前的数据，并确定监控对象当前的状态，实现对监控对象的监控。
作为一种示例，Prometheus作为主流的监控报警系统之一，其数据模型支持多维定义，每个时间序列数据由指标名称和多组key/value标签组成，例如metric_name{label_name＝“123”}。在本发明实施例中，以Prometheus为例进行示例性说明，Prometheus服务端可以定时从Prometheus客户端拉取监控指标数据，可以理解的是，本发明不局限于此。
在本发明实施例中，客户端中可以包括第一集合、第二集合以及第三集合。其中，第一集合中包括监控对象的第一监控数据，当服务端可以从客户端的第一集合中获取第一监控数据，第二集合中包括第二监控数据，第二监控数据可以包括第一监控数据的标识以及与第一监控数据对应的时间戳，客户端可以通过时间戳对第一监控数据的有效性进行监控，第三集合可以为删除集合，用于存储过期的监控数据。
在本发明实施例的一种示例中，客户端可以定义指标名称，如metric_name，metric的标签label_name。则监控数据可以为metric_name{label_name1,label_name2,label_name3…}。其中，第一集合可以为数据拉取集合A，服务端可以从第一集合中拉取对应的监控数据，第一集合可以为[{label_name1＝“a”，label_name2＝“b”}＝1]，其中，“label_name1”可以为数据键Key，“a”为与Key对应的数据值Value，从而第一集合中存储了由指标名称和多组Key/Value标签组成的监控数据。第二集合可以为超时监控集合B，可以包括第一集合中每个监控数据，以及各个监控数据上一次更新的时间戳，则客户端可以通过时间戳对监控数据的有效性进行监控，第二集合可以为[{label_name1＝“a”,label_name2＝“b”}＝N]，N可以为时间戳，其中，“{label_name1＝“a”,label_name2＝“b”}”可以为Key，“N”可以为Value。第三集合可以为删除集合C，可以用于存储超过预设阈值没有更新的监控数据，可以为[{label_name1＝“c”,label_name2＝“d”}＝1]，从而通过客户端维护多个不同的集合，对监控数据进行处理，减少无效数据的存储，保证数据的有效性。
在具体实现中，客户端可以定时遍历第二集合中的监控数据，并将时间戳满足预设阈值的监控数据，作为第一目标数据，从而确定第二集合中监控数据的有效性。其中，预设阈值可以用于判断监控数据的有效性，如将预设阈值设置为5分钟，则当监控数据的时间戳与当前时刻之间的时间差超过5分钟，即监控数据无效，可以将监控数据作为第一目标数据，此外，预设阈值还可以设置为1小时等，本发明对此不作限制。
步骤102，从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
在具体实现中，客户端可以根据第二监控数据中第一监控数据的标识，从第一集合中确定与第一目标数据对应的第二目标数据，其中，第二目标数据与第一目标数据为相同的监控数据。
步骤103，将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
在本发明实施例中，当客户端确定了第二目标数据后，可以将第二目标数据从第一集合中移入第三集合，从而对第二目标数据进行删除，更新第一集合。并且，客户端还可以将第一目标数据从第二集合中移入第三集合，从而对第一目标数据进行删除，更新第二集合。
在具体实现中，客户端定时遍历第二集合，并将时间戳满足预设阈值的监控数据作为目标数据，然后从第一集合中确定与该目标数据相同的监控数据，然后将该监控数据从第一集合与第二集合中移入第三集合中，实现无效监控数据的删除，减少无用数据的存储，提高了内存空间的利用率，保证了数据的有效性。
步骤104，将更新后的第一集合中的第一监控数据，发送至所述服务端。
在具体实现中，客户端通过对第二集合中的监控数据的有效性进行监测，并将无效的监控数据移入第三集合中，减少无用数据的存储，从而当服务端定时从客户端中拉取监控数据时，客户端中存储了当前最新的监控数据，使得服务端可以获取到监控对象当前最新的监控数据，然后和当前时间戳组成时间序列数据，确定监控对象当前的状态，完成监控，从而服务端从客户端中只获取有效的监控数据，大大提高了网络带宽的使用率，减少监控报警系统数据拉取的时长。
在本发明实施例中，客户端包括第一集合、第二集合以及第三集合，其中，第一集合中包括第一监控数据，第二集合中包括第二监控数据，第二监控数据包含第一监控数据的标识和第一监控数据对应的时间戳，通过客户端将时间戳满足预设阈值的第二监控数据，作为第一目标数据，接着从第一集合中，确定与第一目标数据对应的第二目标数据，将第二目标数据从第一集合中移入所述第三集合，更新所述第一集合，并将更新后的第一集合中的第一监控数据，发送至所述服务端，通过客户端对监控数据的时间戳进行监控，并将满足预设阈值的监控数据从第一集合中移入第三集合，减少对无用的数据进行存储，同时将更新后的监控数据发送至服务端，提高了网络带宽的传输效率。
参照图2，示出了本发明的一种客户端中监控数据的处理方法实施例二的步骤流程图，应用于可与服务端连接的客户端，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，具体可以包括如下步骤：
步骤201，将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
在本发明实施例中，客户端需要对第二集合中的第二监控数据进行定时监测，则可以按照时间戳的时间顺序，对所述第二监控数据进行排序，从而对第二集合的数据结构进行优化，提高客户端数据查询速度。
在具体实现中，可以使用有序词典，将插入时间作为排序依据，距离当前时刻越久的监控数据排在前面，则距离当前时刻较近的监控数据有效性越长，从而客户端可以依据排序顺序，从前至后遍历第二集合中的监控数据的时间戳，当时间戳满足预设阈值时，则将对应的监控数据作为第一目标数据；当未监测到满足预设阈值的监控数据时，则停止遍历，通过对数据结构进行优化，大大提高了客户端遍历的时间，进一步提高了数据的查询速度。
在具体实现中，客户端可以定时遍历第二集合中的监控数据，可以先获取当前的时间点，接着分别确定各个时间戳与时间点之间的时间差值，然后将时间差值大于预设阈值的第二监控数据，作为所述第一目标数据，从而确定第二集合中监控数据的有效性。其中，当前时间点可以为客户端根据本地时间获取的时间点，也可以为客户端通过网络获取的时间点，如从授时中心获取的时间点等。
步骤202，从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
在具体实现中，第一监控数据可以包括第一数据键以及与第一数据键对应的第一数据值，如第一集合中可以包括[{label_name1＝“a”，label_name2＝“b”}＝1]，则“label_name1”可以为第一数据键Key，“a”为与第一数据值Value，从而第一集合中存储了由指标名称和多组Key/Value标签组成的监控数据。而第二监控数据可以包括由多个第一监控数据组成的第二数据键，以及与第二数据键对应的数据时间戳，如第二集合可以为[{label_name1＝“a”,label_name2＝“b”}＝N]等第二监控数据，N可以为数据时间戳，其中，“{label_name1＝“a”,label_name2＝“b”}”可以为第二数据键Key，“N”可以为数据时间戳，即与第二数据键对应的第二数据值Value。
具体的，客户端可以根据第二监控数据中第一监控数据的第二数据键，可以从第一集合中，确定与第一目标数据对应的第二目标数据。
步骤203，将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合，将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合；
在本发明实施例中，当客户端确定了第二目标数据后，可以将第二目标数据从第一集合中移入第三集合，从而对第二目标数据进行删除，更新第一集合。并且，客户端还可以将第一目标数据从第二集合中移入第三集合，从而对第一目标数据进行删除，更新第二集合。
在具体实现中，客户端定时遍历第二集合，并将时间戳满足预设阈值的监控数据作为第一目标数据，然后将与第一目标数据对应的第二目标数据键与目标数据时间戳，从第二集合中删除，以及将第二目标数据键存储于第三集合中，同时将与第二目标数据对应的第一目标数据键与第一目标数据值，从第一集合中删除，以及将第一目标数据键与第一目标数据值，存储于第三集合中，从而实现无效监控数据的删除，减少无用数据的存储，提高了内存空间的利用率，保证了数据的有效性。
在本发明实施例的一种可选实施例中，当客户端监测到数据更新时，可以确定与所述数据更新对应的目标监控数据；当所述目标监控数据存在于所述第三集合时，则将所述目标监控数据从所述第三集合，分别移入所述第一集合与所述第二集合；当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合。
其中，Prometheus监控的数据类型可以包括计数数据、状态变化数据、指标统计数据以及摘要数据中的至少一种。具体的，计数数据可以为Counter类型数据，Counter类型类似计数器，可以用于统计类似于：CPU时间，应用程序访问接口的访问总次数，异常发生次数等等场景，Counter类型的特点为监控数据的数值只增加不减少。
状态变化数据可以为Gauge类型数据，即“计量器”，其特点为监控数据的数值是可以增加或者减少的。Gauge类型数据可以包括：当前内存使用率，当前CPU使用率，当前温度，当前速度等等一系列的监控数据。
指标统计数据可以为Histogram类型数据，其可以用于统计数据的分布情况，也可以用于计算在一定范围内的分布情况，同时还提供了度量指标值的总和等。
摘要数据可以为Summary类型数据，其可以用于计算在一定时间窗口范围内度量指标对象的总数以及所有对量指标值的综合等等。
在具体实现中，在监控数据更新过程中，客户端可以先确定与数据更新对应的目标监控数据，并从第三集合中，查找是否存在该目标监控数据，当第三集合中存在该目标监控数据时，则将该目标监控数据从第三集合，分别移入第一集合与第二集合，恢复目标监控数据；当第三集合中不存在该目标监控数据时，则直接在第一集合中添加该目标监控数据，以及在第二集合中添加该目标监控数据和对应的时间戳。
具体的，当第三集合中存在该目标监控数据时，可以先确定目标监控数据对应的时间戳，当第二集合中存在目标监控数据时，则更新目标监控数据在第二集合中对应的时间戳；当第二集合中不存在目标监控数据时，则将目标监控数据的标识与目标监控数据对应的时间戳存入第二集合。
在本发明实施例的一种示例中，当客户端监测到数据更新时，可以先从删除集合C中查询是否存在对应的目标监控数据，若存在，则将目标监控数据恢复至数据拉取集合A和超时监控集合B。具体的，客户端可以将超时监控集合B中相同的监控数据删除(若超时监控集合B存在目标监控数据)，然后可以结合此时的时间戳，将目标监控数据插入超时监控集合B，完成数据更新。
步骤204，获取预设服务端发送的数据获取请求；
在具体实现中，客户端可以接收服务端发送的数据获取请求，并发送与该数据获取请求对应的监控数据至服务端。
步骤205，响应所述数据获取请求，将更新后的第一集合中的第一监控数据发送至所述服务端。
在本发明实施例中，客户端可以响应服务端发送的数据获取请求，并将更新后的第一集合中的第一监控数据发送至服务端。
在具体实现中，客户端通过对第二集合中的监控数据的有效性进行监测，并将无效的监控数据移入第三集合中，减少无用数据的存储，从而当服务端定时从客户端中拉取监控数据时，客户端中存储了当前最新的监控数据，使得服务端可以获取到监控对象当前最新的监控数据，然后和当前时间戳组成时间序列数据，确定监控对象当前的状态，完成监控，从而服务端从客户端中只获取有效的监控数据，大大提高了网络带宽的使用率，减少监控报警系统数据拉取的时长。
在本发明实施例的一种示例中，可以将监控报警系统中的数据采集接口作为客户端，将数据处理接口作为服务端，则客户端可以维护数据拉取集合A、超时监控集合B以及删除集合C，客户端可以对超时监控集合B中的监控指标数据进行遍历，当监测到监控指标数据的时间戳超过预设有效时长时，则将该监控指标数据移入删除集合C，并将数据拉取集合A中对应的监控指标数据也同步移入删除集合C中，减少对无用的数据进行存储，保证了数据的有效性。当服务端从客户端拉取监控数据时，第一集合中不存在超过指定时长不更新的监控指标数据，进而提高了数据传输的效率，提高了网络带宽的利用率，同时服务端无需查询无效的数据，提高了查询速度。
在本发明实施例中，客户端包括第一集合、第二集合以及第三集合，其中，第一集合中包括第一监控数据，第二集合中包括第二监控数据，第二监控数据包含第一监控数据的标识和第一监控数据对应的时间戳，通过客户端将时间戳满足预设阈值的第二监控数据，作为第一目标数据，接着从第一集合中，确定与第一目标数据对应的第二目标数据，将第二目标数据从第一集合中移入所述第三集合，更新所述第一集合，并将更新后的第一集合中的第一监控数据，发送至所述服务端，通过客户端对监控数据的时间戳进行监控，并将满足预设阈值的监控数据从第一集合中移入第三集合，减少对无用的数据进行存储，同时将更新后的监控数据发送至服务端，提高了网络带宽的传输效率。
为了使本领域技术人员能够更好地理解本发明实施例，下面通过一个例子对本申请实施例加以说明：
参照图3所示为本发明实施例中监控数据处理的示意图。
以Prometheus监控系统在网络直播中的应用为例进行说明，则监控系统中可以包括服务端以及多个客户端，负责对不同的监控对象进行监控，如可以包括客户端①、客户端②以及客户端③，其中，客户端①可以用于监控CPU、内存等信息，客户端②可以用于监控直播间刷礼人数、弹幕数等信息，客户端③可以用于监控接口访问频率、错误次数等等。
其中，客户端可以从本地或消息中间件采集监控数据，并进行聚合处理，如监控直播间刷礼物人数：客户端②可以先从消息中间件中采集到每一条用户刷礼物的信息，并保存的数据拉取集合A中，数据拉取集合A中可以包括a(metric_name)，每监测到一条用户刷礼物的信息，则用户刷礼物的信息a数值加1。同时，服务端可以定时从客户端②中的数据拉取集合A中拉取对应的监控指标数据。如当前时刻T1，数据拉取集合A中包括a为100,1分钟后，服务端从数据拉取集合A中拉取数据时，a为1000，则服务端可以计算出1分钟内礼物增量为900，或每秒礼物平均数量为15等等。
并且，为了保证客户端中数据的有效性，减少无效数据的存储，在客户端中维护了超时监控集合B以及删除集合C。其中，客户端②可以开启定时器定时遍历超时监控集合B中的监控指标数据，从而确定监控指标数据的有效性。如用户刷礼物的信息的更新时间为1000，而当前时刻的时间为1100，同时预设阈值为60秒，则此时用户刷礼物的信息距离上次更新已超过了100秒，大于预设阈值，则可以将该用户刷礼物的信息从超时监控集合B和数据拉取集合A中删除，并移入删除集合C中，从而通过遍历监控指标数据的有效性，减少无用数据的存储，提高内存的使用率，同时减少服务端拉取无用的数据，提高网络带宽的使用效率，以及数据传输速度。
当数据更新时，客户端②可以先从删除集合C中查询是否存在相同的用户刷礼物的信息，若存在，则将用户刷礼物的信息恢复至数据拉取集合A和超时监控集合B中，并对超时监控集合B中的时间戳进行更新。
需要说明的是，在本示例中，以一个客户端为例进行示例性说明，可以理解的是，在监控的过程中，监控系统可以通过多个客户端进行多线程监控，对不同的对象进行监控，本发明对此不作限制。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图4，示出了本发明的一种客户端中监控数据的处理装置实施例的结构框图，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，具体可以包括如下模块：
第一数据确定模块401，用于将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
第二数据确定模块402，用于从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
第一集合更新模块403，用于将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
数据发送模块404，用于将更新后的第一集合中的第一监控数据，发送至预设服务端。
在本发明实施例的一种可选实施例中，所述第一监控数据包括第一数据键以及与所述第一数据键对应的第一数据值，所述集合更新模块包括：
第一数据删除子模块，用于将与所述第二目标数据对应的第一目标数据键与第一目标数据值，从所述第一集合中删除；
第一数据存储子模块，用于并将所述第一目标数据键与所述第一目标数据值，存储于所述第三集合中。
在本发明实施例的一种可选实施例中，还包括：
第二集合更新模块，用于将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合。
在本发明实施例的一种可选实施例中，所述标识为由多个所述第一监控数据组成的第二数据键，所述时间戳为与所述第二数据键对应的数据时间戳，所述第二集合更新模块包括：
第二数据删除子模块，用于将与所述第一目标数据对应的第二目标数据键与目标数据时间戳，从所述第二集合中删除；
第二数据存储子模块，用于并将所述第二目标数据键存储于所述第三集合中。
在本发明实施例的一种可选实施例中，还包括：
监控数据确定模块，用于当监测到数据更新时，确定与所述数据更新对应的目标监控数据；
第一数据存储模块，用于当所述目标监控数据存在于所述第三集合时，则将所述目标监控数据从所述第三集合，分别移入所述第一集合与所述第二集合；
第二数据存储模块，用于当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合；
其中，所述目标监控数据包括计数数据、状态变化数据、指标统计数据以及摘要数据中的至少一种。
在本发明实施例的一种可选实施例中，所述第一数据存储模块包括：
时间戳确定子模块，用于确定所述目标监控数据对应的时间戳；
时间戳更新子模块，用于当所述第二集合中存在所述目标监控数据时，更新所述目标监控数据在所述第二集合中对应的时间戳；
第一数据存储子模块，用于当所述第二集合中不存在所述目标监控数据时，则将所述目标监控数据的标识与所述目标监控数据对应的时间戳存入所述第二集合。
在本发明实施例的一种可选实施例中，所述第二数据存储模块包括：
时间戳确定子模块，用于确定所述目标监控数据对应的时间戳；
第二数据存储子模块，用于将所述目标监控数据存储于所述第一集合中，以及将所述目标监控数据与所述目标监控数据对应的时间戳存储于所述第二集合中。
在本发明实施例的一种可选实施例中，所述第一数据确定模块401包括：
时间点获取子模块，用于获取当前的时间点；
时间差值确定子模块，用于分别确定各个所述时间戳与所述时间点之间的时间差值；
数据确定子模块，用于将所述时间差值大于所述预设阈值的第二监控数据，作为所述第一目标数据。
在本发明实施例的一种可选实施例中，所述数据发送模块404具体用于：
获取所述服务端发送的数据获取请求；
响应所述数据获取请求，将更新后的第一集合中的第一监控数据发送至所述服务端。
在本发明实施例的一种可选实施例中，还包括：
数据排序模块，用于按照所述时间戳的先后顺序，对所述第二监控数据进行排序。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种装置，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述装置执行本发明实施例所述的方法。
本发明实施例还提供了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行本发明实施例所述的方法。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种客户端中监控数据的处理方法和一种客户端中监控数据的处理装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (13)

1.一种客户端中监控数据的处理方法，其特征在于，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，所述方法包括：
将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
将更新后的第一集合中的第一监控数据，发送至预设服务端。
2.根据权利要求1所述的方法，其特征在于，所述第一监控数据包括第一数据键以及与所述第一数据键对应的第一数据值，所述将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合，包括：
将与所述第二目标数据对应的第一目标数据键与第一目标数据值，从所述第一集合中删除；
并将所述第一目标数据键与所述第一目标数据值，存储于所述第三集合中。
3.根据权利要求1所述的方法，其特征在于，还包括：
将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合。
4.根据权利要求3所述的方法，其特征在于，所述标识为由多个所述第一监控数据组成的第二数据键，所述时间戳为与所述第二数据键对应的数据时间戳，所述将所述第一目标数据从所述第二集合中移入所述第三集合，更新所述第二集合，包括：
将与所述第一目标数据对应的第二目标数据键与目标数据时间戳，从所述第二集合中删除；
并将所述第二目标数据键存储于所述第三集合中。
5.根据权利要求1所述的方法，其特征在于，还包括：
当监测到数据更新时，确定与所述数据更新对应的目标监控数据；
当所述目标监控数据存在于所述第三集合时，则将所述目标监控数据从所述第三集合，分别移入所述第一集合与所述第二集合；
当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合；
其中，所述目标监控数据包括计数数据、状态变化数据、指标统计数据以及摘要数据中的至少一种。
6.根据权利要求5所述的方法，其特征在于，将所述目标监控数据从所述第三集合移入所述第二集合，包括：
确定所述目标监控数据对应的时间戳；
当所述第二集合中存在所述目标监控数据时，更新所述目标监控数据在所述第二集合中对应的时间戳；
当所述第二集合中不存在所述目标监控数据时，则将所述目标监控数据的标识与所述目标监控数据对应的时间戳存入所述第二集合。
7.根据权利要求5所述的方法，其特征在于，所述当所述目标监控数据不存在于所述第三集合时，则将所述目标监控数据分别存储于所述第一集合与所述第二集合，包括：
确定所述目标监控数据对应的时间戳；
将所述目标监控数据存储于所述第一集合中，以及将所述目标监控数据与所述目标监控数据对应的时间戳存储于所述第二集合中。
8.根据权利要求1所述的方法，其特征在于，所述将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据，包括：
获取当前的时间点；
分别确定各个所述时间戳与所述时间点之间的时间差值；
将所述时间差值大于所述预设阈值的第二监控数据，作为所述第一目标数据。
9.根据权利要求1所述的方法，其特征在于，所述将更新后的第一集合中的第一监控数据，发送至所述服务端，包括：
获取所述服务端发送的数据获取请求；
响应所述数据获取请求，将更新后的第一集合中的第一监控数据发送至所述服务端。
10.根据权利要求1所述的方法，其特征在于，还包括：
按照所述时间戳的先后顺序，对所述第二监控数据进行排序。
11.一种客户端中监控数据的处理装置，其特征在于，所述客户端包括第一集合、第二集合以及第三集合；所述第一集合中包括第一监控数据，所述第二集合中包括第二监控数据，所述第二监控数据包含所述第一监控数据的标识和所述第一监控数据对应的时间戳，所述装置包括：
第一数据确定模块，用于将所述时间戳满足预设阈值的第二监控数据，作为第一目标数据；
第二数据确定模块，用于从所述第一集合中，确定与所述第一目标数据对应的第二目标数据；
集合更新模块，用于将所述第二目标数据从所述第一集合中移入所述第三集合，更新所述第一集合；
数据发送模块，用于将更新后的第一集合中的第一监控数据，发送至预设服务端。
12.一种电子设备，其特征在于，包括：
一个或多个处理器；和
其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述装置执行如权利要求1-10所述的一个或多个的方法。
13.一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如权利要求1-10所述的一个或多个的方法。
CN201911082937.7A 2019-11-07 2019-11-07 客户端中监控数据的处理方法和装置 Active CN110856040B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911082937.7A CN110856040B (zh) 2019-11-07 2019-11-07 客户端中监控数据的处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911082937.7A CN110856040B (zh) 2019-11-07 2019-11-07 客户端中监控数据的处理方法和装置

Publications (2)

Publication Number Publication Date
CN110856040A true CN110856040A (zh) 2020-02-28
CN110856040B CN110856040B (zh) 2021-10-26

Family

ID=69599625

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911082937.7A Active CN110856040B (zh) 2019-11-07 2019-11-07 客户端中监控数据的处理方法和装置

Country Status (1)

Country Link
CN (1) CN110856040B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639010A (zh) * 2020-06-04 2020-09-08 山东汇贸电子口岸有限公司 一种基于Kong的Prometheus插件的改造方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160212014A1 (en) * 2005-12-29 2016-07-21 Nextlabs, Inc. Preventing Conflicts of Interests Between Two or More Groups Using Applications
CN107609062A (zh) * 2017-08-29 2018-01-19 口碑(上海)信息技术有限公司 应用于终端的信息处理方法及装置
WO2018022267A1 (en) * 2016-07-27 2018-02-01 Microsoft Technology Licensing, Llc Storing and expiring non-tcp traffic
CN109582547A (zh) * 2018-12-11 2019-04-05 平安科技（深圳）有限公司 电子装置、监控数据告警方法及存储介质
CN109743199A (zh) * 2018-12-25 2019-05-10 中国联合网络通信集团有限公司 基于微服务的容器化管理系统
CN110232097A (zh) * 2019-06-21 2019-09-13 北京奇艺世纪科技有限公司 一种数据同步方法及装置
CN110417901A (zh) * 2019-07-31 2019-11-05 北京金山云网络技术有限公司 数据处理方法、装置及网关服务器

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160212014A1 (en) * 2005-12-29 2016-07-21 Nextlabs, Inc. Preventing Conflicts of Interests Between Two or More Groups Using Applications
WO2018022267A1 (en) * 2016-07-27 2018-02-01 Microsoft Technology Licensing, Llc Storing and expiring non-tcp traffic
CN107609062A (zh) * 2017-08-29 2018-01-19 口碑(上海)信息技术有限公司 应用于终端的信息处理方法及装置
CN109582547A (zh) * 2018-12-11 2019-04-05 平安科技（深圳）有限公司 电子装置、监控数据告警方法及存储介质
CN109743199A (zh) * 2018-12-25 2019-05-10 中国联合网络通信集团有限公司 基于微服务的容器化管理系统
CN110232097A (zh) * 2019-06-21 2019-09-13 北京奇艺世纪科技有限公司 一种数据同步方法及装置
CN110417901A (zh) * 2019-07-31 2019-11-05 北京金山云网络技术有限公司 数据处理方法、装置及网关服务器

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
C. B. HAUSER ET AL.: "Reviewing Cloud Monitoring", 《2018 IEEE 11TH INTERNATIONAL CONFERENCE ON CLOUD COMPUTING (CLOUD)》 *
三无架构师: "Prometheus", 《HTTPS://WWW.JIANSHU.COM/P/93C840025F01》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111639010A (zh) * 2020-06-04 2020-09-08 山东汇贸电子口岸有限公司 一种基于Kong的Prometheus插件的改造方法

Also Published As

Publication number Publication date
CN110856040B (zh) 2021-10-26

Similar Documents

Publication Publication Date Title
CN110222091B (zh) 一种海量数据实时统计分析方法
US10587707B2 (en) Method and apparatus for monitoring website access data
CN112751726B (zh) 一种数据处理方法、装置、电子设备和存储介质
CN111339200B (zh) 一种基于数据库同步的数据校验方法及数据校验系统
KR20220108186A (ko) 시계열 데이터 저장 및 쿼리 방법 및 장치, 및 그 서버 및 저장 매체
CN113297183B (zh) 一种时间窗口的告警分析方法及装置
CN109558065B (zh) 数据删除方法及分布式存储系统
CN111142942B (zh) 窗口数据的处理方法、装置、服务器及存储介质
CN106940677A (zh) 一种应用日志数据告警方法及装置
CN110620699B (zh) 消息到达率确定方法、装置、设备和计算机可读存储介质
CN109495543B (zh) 一种ceph集群中监视器的管理方法及装置
CN113472858B (zh) 埋点数据处理方法、装置及电子设备
CN101252462A (zh) 告警页面刷新方法以及服务器和客户端
CN107277624B (zh) 时长计算方法及其装置
CN110856040B (zh) 客户端中监控数据的处理方法和装置
EP3494525A1 (en) Realtime busyness for places
CN115827788A (zh) 一种数据迁移方法、装置、电子设备及可读存储介质
CN113377817A (zh) 数据处理方法、系统、设备及存储介质
CN110543509B (zh) 用户访问数据的监控系统、方法、装置及电子设备
CN108628901A (zh) 一种数据更新方法及装置
CN106570068A (zh) 信息推荐方法及装置
CN105446707B (zh) 一种数据转换方法
CN116578592A (zh) 服务端缓存管理方法、装置及设备和介质
CN116049285A (zh) 一种基于流数据的实时指标计算方法、系统、设备及介质
CN112422669B (zh) 一种多关联设备数据实时提取方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant