CN116737498A - 遥测数据采集方法、系统、装置、设备及介质 - Google Patents
遥测数据采集方法、系统、装置、设备及介质 Download PDFInfo
- Publication number
- CN116737498A CN116737498A CN202310715771.8A CN202310715771A CN116737498A CN 116737498 A CN116737498 A CN 116737498A CN 202310715771 A CN202310715771 A CN 202310715771A CN 116737498 A CN116737498 A CN 116737498A
- Authority
- CN
- China
- Prior art keywords
- telemetry
- data
- telemetry data
- index
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000012545 processing Methods 0.000 claims abstract description 46
- 238000007405 data analysis Methods 0.000 claims description 8
- 238000012544 monitoring process Methods 0.000 claims description 8
- 238000010276 construction Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 3
- 238000013480 data collection Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3058—Monitoring arrangements for monitoring environmental properties or parameters of the computing system or of the computing system component, e.g. monitoring of power, currents, temperature, humidity, position, vibrations
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Selective Calling Equipment (AREA)
Abstract
本公开涉及一种遥测数据采集方法、系统、装置、设备及介质。其中,遥测数据采集方法包括:通过遥测指标接入库,构建遥测数据指标;基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据;对多个遥测数据进行数据处理,得到目标数据。根据本公开实施例,能够实现对遥测目标通用准确的数据采集和数据处理。
Description
技术领域
本公开涉及数据采集技术领域,尤其涉及一种遥测数据采集方法、系统、装置、设备及介质。
背景技术
数据处理器(Data Processing Unit,DPU)作为继中央处理器(CentralProcessing Unit,CPU)、图形处理器(graphics processing unit,GPU)的第三颗芯片,运行着独立的操作系统、复杂的硬件卸载模块和与之匹配的网络、安全、存储软件功能,DPU在执行卸载加速任务过程有大量的遥测指标需要被观测和监控。
在DPU遥测监控系统指标采集开发过程,特别是DPU专有硬件、软件功能模块遥测数据采集过程中,发现基于普罗米修斯(Prometheus)或开放式遥测(OpenTelemetry)对于DPU定制硬件的遥测指标和一些其它自定义的遥测指标和数据,没有对应的采集插件支持,导致非标准的操作系统(Operating System,OS)模块的遥测数据接入、采集和后期展示监控告警困难。
发明内容
为了解决上述技术问题,本公开提供了一种遥测数据采集方法、系统、装置、设备及介质。
第一方面,本公开提供了一种遥测数据采集方法,包括:
通过遥测指标接入库,构建遥测数据指标;
基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据;
对多个遥测数据进行数据处理,得到目标数据。
第二方面,本公开提供了一种遥测数据采集系统,包括:
遥测指标接入库,用于构建遥测数据指标;
通用采集器,用于对遥测目标进行数据采集,得到对应的遥测数据;
外部采集服务器,用于存储目标数据并进行数据分析,持续监控目标数据,生成告警信息。
第三方面,本公开提供了一种遥测数据采集装置,包括:
指标构建模块,用于通过遥测指标接入库,构建遥测数据指标;
数据采集模块,用于基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据;
数据处理模块,用于对多个遥测数据进行数据处理,得到目标数据。
第四方面,本公开提供了一种遥测数据采集设备,包括:
处理器;
存储器,用于存储可执行指令;
其中,处理器用于从存储器中读取可执行指令,并执行可执行指令以实现第一方面的遥测数据采集方法。
第五方面,本公开提供了一种计算机可读存储介质,该存储介质存储有计算机程序,当计算机程序被处理器执行时,使得处理器实现第一方面的遥测数据采集方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
本公开实施例的遥测数据采集方法、系统、装置、设备及介质,能够通过遥测指标接入库,构建遥测数据指标,接着基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据,最后对多个遥测数据进行数据处理,得到目标数据,由此,能够通过遥测指标接入库对遥测目标进行数据采集,得到对应的遥测数据,并对多个遥测数据进行数据处理,得到目标数据,从而能够实现对遥测目标通用准确的数据采集和数据处理。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1为本公开实施例提供的一种遥测数据采集方法的流程示意图;
图2为本公开实施例提供的一种遥测数据采集系统的结构示意图;
图3为本公开实施例提供的一种遥测数据采集装置的结构示意图;
图4为本公开实施例提供的一种遥测数据采集设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
Prometheus(普罗米修斯)是当前最广泛使用的开源监控系统,提供多种exporter采集端,node_exporter是最常用的OS采集器之一。它提供丰富的数据类型配合数据可视化平台(Grafana),极大减轻了系统运维人员的工作负担。
数据处理器(Data Processing Unit,DPU)作为继中央处理器(CentralProcessing Unit,CPU)、图形处理器(graphics processing unit,GPU)的第三颗芯片,运行着独立的操作系统、复杂的硬件卸载模块和与之匹配的网络、安全、存储软件功能,DPU在执行卸载加速任务过程有大量的遥测指标需要被观测和监控。
在DPU卡上可用通用exporter采集操作系统层遥测指标,而DPU特有的网络卸载、安全卸载、存储卸载、虚拟交换(OVS)、NP等DPU专有硬件、软件功能的监控、工作状态数据、运行指标数据等,无法通过通用采集器完成。
在DPU遥测监控系统指标采集开发过程,特别是DPU专有硬件、软件功能模块遥测数据采集过程中,发现基于普罗米修斯(Prometheus)或开放式遥测(OpenTelemetry)对于DPU定制硬件的遥测指标和一些其它自定义的遥测指标和数据,没有对应的采集插件支持,导致非标准的操作系统(Operating System,OS)模块的遥测数据接入、采集和后期展示监控告警困难。
为了解决上述问题,本公开实施例提供了一种遥测数据采集方法、系统、装置、设备及介质。下面结合图1对本公开实施例提供的遥测数据采集方法进行详细说明。
图1示出了本公开实施例提供的一种遥测数据采集方法的流程示意图。
在本公开实施例中,该遥测数据采集方法可以由电子设备执行。例如电子设备可以为包括DPU设备卡的设备。
如图1所示,该遥测数据采集方法可以包括如下步骤。
S110、通过遥测指标接入库,构建遥测数据指标。
在本公开实施例中,电子设备可以通过遥测指标接入库,构建遥测数据指标。
可选地,遥测指标接入库可以为生成并保存遥测数据指标的库。
可选地,遥测数据指标可以为用于采集对应数据的指标。其中,遥测数据指标可以包括采集指标、指标值和指标标签。
可选地,采集指标可以为用于表示需要进行数据采集的目标。例如,采集指标可以为DPU专有硬件、软件等,如内存、处理器等,此处不作限定。
可选地,指标值可以为需要采集指标对应的数值。例如,指标值可以为数值、如内存大小为5G、运行时间10S等。
可选地,指标标签可以为采集指标对应的标签。例如,针对处理器,指标标签可以为英特尔(intel)、超微(Advanced Micro Devices,AMD)等,此处不做限定。
具体地,电子设备可以通过遥测指标接入库(telemetry_lib),构建遥测数据指标,该遥测数据指标可以包括采集指标、指标值和指标标签。
S120、基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据。
在本公开实施例中,电子设备在构建遥测数据指标之后,可以基于该遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据。
可选地,遥测目标可以为需要进行数据采集的目标。例如,采集指标可以为DPU专有硬件、软件等,如内存、处理器等,此处不作限定。
可选地,数据采集可以为对遥测目标采集对应数据。例如,针对内存,数据采集可以为采集内存的内存大小、运行时间等,此处不作限定。
可选地,遥测数据可以为得到的数据。例如,遥测数据可以为内存大小、运行时间等,此处不作限定。
具体地,电子设备在构建遥测数据指标之后,可以基于该遥测数据指标,对遥测目标进行数据采集,如对内存根据遥测数据指标进行数据采集,得到对应的遥测数据,例如,内存的大小、运行时间、内存的品牌等,此处不作限定。
S130、对多个遥测数据进行数据处理,得到目标数据。
在本公开实施例中,电子设备可以对得到的多个遥测数据进行数据处理,得到目标数据。
可选地,数据处理可以为对遥测数据进行处理。例如,数据处理可以包括去重处理、整合处理等,此处不作限定。
可选地,目标数据可以为进行数据处理后得到的数据。
具体地,电子设备可以对得到的多个遥测数据进行数据处理,如进行数据去重处理、整合处理等,从而可以得到目标数据。
可选地,在本公开实施例中,能够通过遥测指标接入库,构建遥测数据指标,接着基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据,最后对多个遥测数据进行数据处理,得到目标数据,由此,能够通过遥测指标接入库对遥测目标进行数据采集,得到对应的遥测数据,并对多个遥测数据进行数据处理,得到目标数据,从而能够实现对遥测目标通用准确的数据采集和数据处理。
可选地,S110可以具体包括:针对不同的遥测目标,通过遥测指标接入库构建对应的不同的遥测数据指标。
在本公开实施例中,电子设备可以针对不同的遥测目标,通过遥测指标接入库构建对应的不同的遥测数据指标。
具体地,电子设备可以针对不同的遥测目标,例如遥测目标可以为内存、处理器等,通过遥测指标接入库构建对应的不同的遥测数据指标,如针对内存,采集指标可以为针对内存的指标、指标值可以为5G、10G等、指标标签可以为内存品牌;针对处理器,采集指标可以为针对处理器的指标、指标值可以为时间5s、10s等、指标标签可以为处理器品牌,如intel、amd等,此处不做限定。
可选地,可以根据不同遥测目标构建对应的遥测数据指标,从而能够准确的对遥测目标进行数据采集。
可选地,S120可以具体包括:基于不同的遥测数据指标,对不同的遥测目标进行数据采集,得到对应的多个遥测数据。
在本公开实施例中,电子设备可以基于不同的遥测数据指标,对不同的遥测目标进行数据采集,得到对应的多个遥测数据。
具体地,电子设备可以根据不同的遥测数据指标,例如,针对内存,电子设备可以根据对应的遥测数据指标,将该遥测数据指标写入内存中,对该内存进行数据采集,从而可以获取内存对应的内存大小、内存品牌等、针对处理器,电子设备可以根据对应的遥测数据指标,将该遥测数据指标写入处理器中,对该处理器进行数据采集,从而可以获取处理器对应的运行时间,处理器品牌等,此处不做限定。
可选地,S120还可以具体包括:将遥测数据指标写入到遥测目标内;通过通用采集器对遥测目标进行数据采集,得到对应的遥测数据。
在本公开实施例中,电子可以将遥测数据指标写入到遥测目标内。
具体地,电子设备可以将遥测数据指标写入对应的遥测目标内,以实现对遥测目标的数据采集。
进一步地,电子设备可以通过通用采集器对遥测目标进行数据采集,得到对应的遥测数据。
可选地,通用采集器可以为通用的一种采集器。通用采集器可以为任一种已知的采集器,此处不做限定。
具体地,电子设备在将遥测数据指标写入对应的遥测目标内之后,可以实现对遥测目标的数据采集,遥测指标接入库可以将遥测目标对应遥测数据通过超文本传输协议(Hyper Text Transfer Protocol,HTTP)或远程过程调用(Google Remote ProcedureCall,gRPC)等方式上传至通用采集器,从而电子设备可以通过通用采集器得到对应的遥测数据。
由此,在本公开实施例中,电子设备可以通过通用采集器统一获取不同遥测目标对应的遥测数据。
可选地,在S130之后,该遥测数据采集方法还可以包括:响应外部采集服务器定时拉取操作,将目标数据发送至外部采集服务器,以使外部采集服务器存储目标数据并进行数据分析,得到告警信息。
在本公开实施例中,外部采集服务器可以对目标数据进行定时拉取操作,电子设备可以响应该定时拉取操作,将目标数据发送至外部采集服务器,以使外部采集服务器存储目标数据并进行数据分析,得到告警信息。
可选地,定时拉取操作可以为按照一定时间进行数据拉取的操作。例如,定时拉取操作可以为每10分钟拉取、每20分钟拉取等,此处不做限定。
可选地,外部采集服务器可以为需要目标数据的服务器。
可选地,告警信息可以为用于告警的信息。
具体地,电子设备在得到目标数据之后,外部采集服务器可以定时拉取电子设备中的目标数据,即进行定时拉取操作,电子设备可以响应该定时拉取操作该目标数据发送至外部采集服务器,外部采集服务器可以获取并存储该目标数据,并可以根据该目标数据进行数据分析,从而可以得到告警信息,该告警信息可以为用于提示某个硬件、软件出现故障或处于超负荷工作状态。
图2示出了本公开实施例提供的一种遥测数据采集系统的结构示意图。
如图2所示,该遥测数据采集系统可以包括遥测指标接入库201、通用采集器202和外部采集服务器203。
该遥测指标接入库201可以用于构建遥测数据指标。
具体地,电子设备可以通过遥测指标接入库201构建遥测数据指标,接着将遥测数据指标写入对应的遥测目标中,对遥测目标进行数据采集,得到对应的遥测数据。
该通用采集器202可以用于对遥测目标进行数据采集,得到对应的遥测数据。
具体地,电子设备可以通过通用采集器202对遥测目标进行数据采集,得到对应的遥测数据。
该外部采集服务器203可以用于存储目标数据并进行数据分析,得到告警信息。
具体地,外部采集服务器203可以向电子设备进行定时拉取操作,电子设备可以响应该定时拉取操作,将目标数据发送至外部采集服务器203,外部采集服务器203可以用于存储目标数据并进行数据分析,得到告警信息。
图3示出了本公开实施例提供的一种遥测数据采集装置的结构示意图。
如图3所示,该遥测数据采集装置300可以包括指标构建模块310、数据采集模块320和数据处理模块330。
该指标构建模块310可以用于通过遥测指标接入库,构建遥测数据指标。
该数据采集模块320可以用于基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据。
该数据处理模块330可以用于对多个遥测数据进行数据处理,得到目标数据。
由此,在本公开实施例中,能够通过遥测指标接入库,构建遥测数据指标,接着基于遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据,最后对多个遥测数据进行数据处理,得到目标数据,由此,能够通过遥测指标接入库对遥测目标进行数据采集,得到对应的遥测数据,并对多个遥测数据进行数据处理,得到目标数据,从而能够实现对遥测目标通用准确的数据采集和数据处理。
在本公开一些实施例中,遥测数据指标可以包括采集指标、指标值和指标标签。
在本公开一些实施例中,该指标构建模块310可以具体包括指标构建单元。
该指标构建单元可以用于针对不同的遥测目标,通过遥测指标接入库构建对应的不同的遥测数据指标。
在本公开一些实施例中,该数据采集模块320可以具体包括第一处理单元。
该第一处理单元可以用于基于不同的遥测数据指标,对不同的遥测目标进行数据采集,得到对应的多个遥测数据。
在本公开一些实施例中,该数据采集模块320还可以具体包括第二处理单元和第三处理单元。
该第二处理单元将遥测数据指标写入到遥测目标内。
该第三处理单元通过通用采集器对遥测目标进行数据采集,得到对应的遥测数据。
在本公开一些实施例中,该遥测数据采集装置300还可以包括数据发送模块。
该数据发送模块可以用于在对多个遥测数据进行数据处理,得到目标数据之后,响应外部采集服务器定时拉取操作,将目标数据发送至外部采集服务器,以使外部采集服务器存储目标数据并进行数据分析,得到告警信息。
需要说明的是,图3所示的遥测数据采集装置300可以执行图1所示的方法实施例中的各个步骤,并且实现图1所示的方法实施例中的各个过程和效果,在此不做赘述。
图4示出了本公开实施例提供的一种遥测数据采集设备的结构示意图。
在本公开一些实施例中,图4所示的遥测数据采集设备可以为电子设备。例如,该电子设备可以为包括DPU设备卡的设备。
如图4所示,该遥测数据采集设备可以包括处理器401以及存储有计算机程序指令的存储器402。
具体地,上述处理器401可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本申请实施例的一个或多个集成电路。
存储器402可以包括用于信息或指令的大容量存储器。举例来说而非限制,存储器402可以包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个及其以上这些的组合。在合适的情况下,存储器402可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器402可在综合网关设备的内部或外部。在特定实施例中,存储器402是非易失性固态存储器。在特定实施例中,存储器402包括只读存储器(Read-Only Memory,ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(Programmable ROM,PROM)、可擦除PROM(Electrical Programmable ROM,EPROM)、电可擦除PROM(Electrically ErasableProgrammable ROM,EEPROM)、电可改写ROM(Electrically Alterable ROM,EAROM)或闪存,或者两个或及其以上这些的组合。
处理器401通过读取并执行存储器402中存储的计算机程序指令,以执行本公开实施例所提供的遥测数据采集方法的步骤。
在一个示例中,该遥测数据采集设备还可包括收发器403和总线404。其中,如图4所示,处理器401、存储器402和收发器403通过总线404连接并完成相互间的通信。
总线404包括硬件、软件或两者。举例来说而非限制,总线可包括加速图形端口(Accelerated Graphics Port,AGP)或其他图形总线、增强工业标准架构(ExtendedIndustry Standard Architecture,EISA)总线、前端总线(Front Side BUS,FSB)、超传输(Hyper Transport,HT)互连、工业标准架构(Industrial Standard Architecture,ISA)总线、无限带宽互连、低引脚数(Low Pin Count,LPC)总线、存储器总线、微信道架构(MicroChannel Architecture,MCA)总线、外围控件互连(Peripheral Component Interconnect,PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(Serial Advanced TechnologyAttachment,SATA)总线、视频电子标准协会局部(Video Electronics StandardsAssociation Local Bus,VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线404可包括一个或多个总线。尽管本申请实施例描述和示出了特定的总线,但本申请考虑任何合适的总线或互连。
本公开实施例还提供了一种非易失性计算机可读存储介质,该存储介质可以存储有计算机程序,当计算机程序被处理器执行时,使得处理器实现本公开实施例所提供的遥测数据采集方法。
上述的存储介质可以例如包括计算机程序指令的存储器402,上述指令可由遥测数据采集设备的处理器401执行以完成本公开实施例所提供的遥测数据采集方法。可选地,存储介质可以是非临时性计算机可读存储介质,例如,非临时性计算机可读存储介质可以是ROM、随机存取存储器(Random Access Memory,RAM)、光盘只读存储器(Compact DiscROM,CD-ROM)、磁带、软盘和光数据存储设备等。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
以上所述仅是本公开的具体实施方式,使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下,在其它实施例中实现。因此,本公开将不会被限制于本文所述的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种遥测数据采集方法,其特征在于,包括:
通过遥测指标接入库,构建遥测数据指标;
基于所述遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据;
对多个所述遥测数据进行数据处理,得到目标数据。
2.根据权利要求1所述的方法,其特征在于,所述遥测数据指标包括采集指标、指标值和指标标签。
3.根据权利要求1所述的方法,其特征在于,所述通过遥测指标接入库,构建遥测数据指标,包括:
针对不同的所述遥测目标,通过所述遥测指标接入库构建对应的不同的所述遥测数据指标。
4.根据权利要求3所述的方法,其特征在于,所述基于所述遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据,包括:
基于不同的所述遥测数据指标,对不同的所述遥测目标进行数据采集,得到对应的多个所述遥测数据。
5.根据权利要求1所述的方法,其特征在于,所述基于所述遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据,包括:
将所述遥测数据指标写入到所述遥测目标内;
通过通用采集器对所述遥测目标进行数据采集,得到对应的所述遥测数据。
6.根据权利要求1所述的方法,其特征在于,在所述对多个所述遥测数据进行数据处理,得到目标数据之后,所述方法还包括:
响应外部采集服务器定时拉取操作,将所述目标数据发送至所述外部采集服务器,以使所述外部采集服务器存储所述目标数据并进行数据分析,得到告警信息。
7.一种遥测数据采集系统,其特征在于,包括:
遥测指标接入库,用于构建遥测数据指标;
通用采集器,用于对所述遥测目标进行数据采集,得到对应的所述遥测数据;
外部采集服务器,用于存储所述目标数据并进行数据分析,持续监控目标数据,生成告警信息。
8.一种遥测数据采集装置,其特征在于,包括:
指标构建模块,用于通过遥测指标接入库,构建遥测数据指标;
数据采集模块,用于基于所述遥测数据指标,对遥测目标进行数据采集,得到对应的遥测数据;
数据处理模块,用于对多个所述遥测数据进行数据处理,得到目标数据。
9.一种遥测数据采集设备,其特征在于,包括:
处理器;
存储器,用于存储可执行指令;
其中,所述处理器用于从所述存储器中读取所述可执行指令,并执行所述可执行指令以实现上述权利要求1-6中任一项所述的遥测数据采集方法。
10.一种非易失性计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,当所述计算机程序被处理器执行时,使得处理器实现上述权利要求1-6中任一项所述的遥测数据采集方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310715771.8A CN116737498A (zh) | 2023-06-15 | 2023-06-15 | 遥测数据采集方法、系统、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310715771.8A CN116737498A (zh) | 2023-06-15 | 2023-06-15 | 遥测数据采集方法、系统、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116737498A true CN116737498A (zh) | 2023-09-12 |
Family
ID=87905792
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310715771.8A Pending CN116737498A (zh) | 2023-06-15 | 2023-06-15 | 遥测数据采集方法、系统、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116737498A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117170816A (zh) * | 2023-09-19 | 2023-12-05 | 中科驭数(北京)科技有限公司 | 基于dpu的容器化数据采集方法、系统及部署方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180359184A1 (en) * | 2017-06-09 | 2018-12-13 | American Megatrends, Inc. | Out-of-band telemetry data collection |
CN111459750A (zh) * | 2020-03-18 | 2020-07-28 | 平安科技(深圳)有限公司 | 基于非扁平网络的私有云监控方法、装置、计算机设备及存储介质 |
CN112084098A (zh) * | 2020-10-21 | 2020-12-15 | 中国银行股份有限公司 | 资源监控系统及工作方法 |
CN112291114A (zh) * | 2020-11-17 | 2021-01-29 | 恩亿科(北京)数据科技有限公司 | 一种数据源监控方法、系统、电子设备及存储介质 |
CN112965874A (zh) * | 2021-03-04 | 2021-06-15 | 浪潮云信息技术股份公司 | 一种可配置的监控告警方法及系统 |
CN114490246A (zh) * | 2021-12-29 | 2022-05-13 | 中国电信股份有限公司 | 一种监控方法、装置、电子设备以及存储介质 |
CN114625597A (zh) * | 2020-12-21 | 2022-06-14 | 亚信科技(中国)有限公司 | 监控运维系统、方法、装置、电子设备及存储介质 |
-
2023
- 2023-06-15 CN CN202310715771.8A patent/CN116737498A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180359184A1 (en) * | 2017-06-09 | 2018-12-13 | American Megatrends, Inc. | Out-of-band telemetry data collection |
CN111459750A (zh) * | 2020-03-18 | 2020-07-28 | 平安科技(深圳)有限公司 | 基于非扁平网络的私有云监控方法、装置、计算机设备及存储介质 |
CN112084098A (zh) * | 2020-10-21 | 2020-12-15 | 中国银行股份有限公司 | 资源监控系统及工作方法 |
CN112291114A (zh) * | 2020-11-17 | 2021-01-29 | 恩亿科(北京)数据科技有限公司 | 一种数据源监控方法、系统、电子设备及存储介质 |
CN114625597A (zh) * | 2020-12-21 | 2022-06-14 | 亚信科技(中国)有限公司 | 监控运维系统、方法、装置、电子设备及存储介质 |
CN112965874A (zh) * | 2021-03-04 | 2021-06-15 | 浪潮云信息技术股份公司 | 一种可配置的监控告警方法及系统 |
CN114490246A (zh) * | 2021-12-29 | 2022-05-13 | 中国电信股份有限公司 | 一种监控方法、装置、电子设备以及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117170816A (zh) * | 2023-09-19 | 2023-12-05 | 中科驭数(北京)科技有限公司 | 基于dpu的容器化数据采集方法、系统及部署方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111159600B (zh) | 页面上元素的信息上报方法、装置、电子设备及存储介质 | |
CN109587008B (zh) | 检测异常流量数据的方法、装置及存储介质 | |
CN106815125A (zh) | 一种日志审计方法及平台 | |
CN112149329B (zh) | 核电厂关键设备的状态预演方法、系统、设备及存储介质 | |
CN116737498A (zh) | 遥测数据采集方法、系统、装置、设备及介质 | |
CN105022694A (zh) | 用于移动终端测试的测试用例生成方法及系统 | |
CN110806960B (zh) | 信息处理方法、装置及终端设备 | |
CN112800061B (zh) | 一种数据存储方法、装置、服务器及存储介质 | |
CN115277261B (zh) | 基于工控网络病毒的异常机器智能识别方法、装置、设备 | |
CN111308984A (zh) | 信息显示方法、装置、电机驱动器、系统及可读存储介质 | |
CN114511026A (zh) | 一种故障诊断方法、装置、终端设备及存储介质 | |
CN112506910A (zh) | 多源数据采集方法、装置、电子设备及存储介质 | |
CN115237724A (zh) | 基于人工智能的数据监控方法、装置、设备及存储介质 | |
CN112817814A (zh) | 异常监控方法、系统、存储介质及电子装置 | |
CN112235262A (zh) | 报文的解析方法、装置、电子设备及计算机可读存储介质 | |
CN115357470A (zh) | 信息生成方法、装置、电子设备和计算机可读介质 | |
CN113094248B (zh) | 用户行为数据分析方法、装置、电子设备及介质 | |
CN104407966B (zh) | 一种jvm的内存对象数量统计系统及方法 | |
CN113656247A (zh) | 一种服务监控方法、装置、电子设备及可读存储介质 | |
CN112232720A (zh) | 工序监管方法、装置、计算机设备和可读存储介质 | |
CN116032725A (zh) | 故障根因定位模型的生成方法及装置 | |
CN114563035B (zh) | 用于毁伤效能评估的分布式高速数据采集方法及系统 | |
CN114095523B (zh) | 综合调度系统中的通信数据处理方法、设备及系统 | |
CN111427874B (zh) | 医疗数据生产的质控方法、装置以及电子设备 | |
CN110782114B (zh) | 驾驶行为挖掘方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |