CN109525448A - 日志数据采集系统及方法 - Google Patents

日志数据采集系统及方法 Download PDF

Info

Publication number
CN109525448A
CN109525448A CN201910022404.3A CN201910022404A CN109525448A CN 109525448 A CN109525448 A CN 109525448A CN 201910022404 A CN201910022404 A CN 201910022404A CN 109525448 A CN109525448 A CN 109525448A
Authority
CN
China
Prior art keywords
data
flume
log
acquisition
daily record
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910022404.3A
Other languages
English (en)
Inventor
任彧雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhixin Future Information Technology Co Ltd
Original Assignee
Beijing Zhixin Future Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhixin Future Information Technology Co Ltd filed Critical Beijing Zhixin Future Information Technology Co Ltd
Priority to CN201910022404.3A priority Critical patent/CN109525448A/zh
Publication of CN109525448A publication Critical patent/CN109525448A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种日志数据采集系统，包括flume采集层模块，用于采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输；flume汇聚层模块，接收所述flume采集层模块传输的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径；Kafka消息队列层模块，用于根据所述传输方式缓存所述flume汇聚层模块传输的日志数据；数据消费者层模块，用于针对每一个配置文件对应的日志数据启动一个数据消费者，并根据所述传输路径存储至目标介质。同时，本发明还公开一种日志数据采集方法。本方案实现日志数据采集与流式传输的标准化，极大地降低操作和管理成本。

Description

日志数据采集系统及方法
技术领域
本发明涉及日志数据采集领域，具体涉及一种日志数据采集系统及一种日志数据采集方法。
背景技术
传统的日志数据采集，目前主流的方案通过使用flume采集层，flume汇聚层，Kafka消息队列层和数据消费者层的流式传输完成日志数据的采集。其中，flume数据采集层利用flume作为机器节点代理(agent)负责实时采集指定服务的日志数据，并将采集到的日志数据发送至flume汇聚层；flume汇聚层利用flume作为机器节点代理负责接收其他机器节点flume agent采集的日志数据，flume汇聚层的每一个flume agent与采集层的某个服务日志的所有flume agent对应，flume汇聚层接收服务日志数据后，将日志数据发送至Kafka消息队列层与服务绑定的某个Topic中；Kafka消息队列层，利用Kafka作为消息队列，短时间缓存日志数据，同时保证日志数据的一致性；数据消费者层，通过各种类型的Kafka客户端消费Kafka消息队列中的日志数据，并进行一定处理，最后存储到目标介质。
上述方案中，各功能层节点之间的上下游关系完全由人工通过节点配置文件指定，而不同类型节点的配置又是不相同的，上一功能层节点配置属性无法传递至下一功能层节点，从而无法在整个日志数据采集与流式传输的过程中实现关系串联。因此，需要通过手动方式维护各功能层节点的上下游对应关系。而在实际应用中，经常需要对日志采集及流式传输的健康状态进行监控、对数据条目进行校验、对数据关系进行梳理、新增或删除日志采集等。使用上述技术方案，这些需求实现起来非常困难，操作与管理成本巨大。
因此，亟需一种各功能层节点之间能够自动实现上下游关系串联的日志数据采集系统和方法，以降低操作与管理成本，并进一步能够实现操作与管理的自动化。
发明内容
本发明提供一种流式传输的标准化的数据采集装置和方法，解决因无法实现功能层节点之间无法串联导致的成本高和使用实现困难等问题。
根据本发明的一个方面，提供一种日志数据采集系统，包括：
flume采集层模块，用于采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输；
flume汇聚层模块，接收所述flume采集层模块传输的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径；
Kafka消息队列层模块，用于根据所述传输方式缓存所述flume汇聚层模块传输的日志数据；
数据消费者层模块，用于针对每一个配置文件对应的日志数据启动一个数据消费者，并根据所述传输路径存储至目标介质。
在其中一个实施例中，flume采集层模块针对每一条采集数据流生成对应的配置文件，为针对每一条采集数据流生成对应的标识ID，根据所述标识ID生成对应的配置文件。
在其中一个实施例中，所述配置文件包括所述对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic，服务日志存储介质路径。
在其中一个实施例中，所述服务日志路径基于所述关联服务ID生成；并且/或者所述服务日志关联Kafka Topic基于所述标识ID生成；并且/或者所述服务日志存储介质路径基于所述标识ID生成。
在其中一个实施例中，所述flume汇聚层模块通过启动一组公用flume汇聚节点接收所述flume采集层模块传输的日志数据。
根据本发明的另一个方面，还提供一种日志数据采集方法，包括：
采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输；
接收所述采集的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径；
根据所述传输方式缓存所述flume汇聚层模块传输的日志数据；
针对每一个配置文件对应的日志数据启动一个数据消费者，根据所述传输路径存储至目标介质。
在其中一个实施例中，针对每一条采集数据流生成对应的配置文件的步骤，为针对每一条采集数据流生成对应的标识ID，根据所述标识ID生成对应的配置文件。
在其中一个实施例中，所述配置文件包括所述对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic，服务日志存储介质路径。
在其中一个实施例中，该方法还包括如下步骤：
基于所述关联服务ID生成所述服务日志路径；
基于所述标识ID生成所述服务日志关联Kafka Topic；
基于所述标识ID生成所述服务日志存储介质路径。
在其中一个实施例中，所述接收所述采集的日志数据的步骤，还包括启动一组公用flume汇聚节点接收所述flume采集层模块传输的日志数据。
根据本发明实施例的日志数据采集系统及方法，可实现日志数据采集与流式传输的标准化，各功能层不同类型节点的配置差别将不再对数据采集和流式传输产生影响。同时，日志数据的属性数据也可跨功能层传递，实现流式传输各功能层节点间上下游关系的自动串联，基于这些标准化的属性数据和上下游串联关系，可轻松实现对日志采集及流式传输的健康状态监控、数据条目校验、数据关系梳理、新增或删除日志采集等，极大地降低操作和管理成本。
附图说明
通过阅读以下参照附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显，其中，相同或相似的附图标记表示相同或相似的特征。
图1示出本发明一实施例的日志数据采集系统结构示意图；
图2示出本发明一实施例的日志数据采集方法的流程图。
具体实施方式
下面将详细描述本发明的各个方面的特征和示例性实施例，为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及具体实施例，对本发明进行进一步详细描述。应理解，此处所描述的具体实施例仅被配置为解释本发明，并不被配置为限定本发明。对于本领域技术人员来说，本发明可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本发明的示例来提供对本发明更好的理解。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
如图1所示，为本发明一实施例的日志数据采集系统结构示意图。参考图1，一种日志数据采集系统100，包括flume采集层模块120，flume汇聚层模块140，Kafka消息队列层模块160和数据消费者层模块180。flume汇聚层模块140接收flume采集层模块120传输的日志数据，根据flume通信头信息确定对应的日志数据的传输方式和传输路径。Kafka消息队列层模块160根据上述确定的传输方式缓存flume汇聚层模块140传输的日志数据，Kafka消息队列层模块160用于短时间缓存日志数据，同时保证日志数据的一致性。数据消费者层模块180针对每一个配置文件对应的日志数据启动一个数据消费者，并根据上述确定的传输路径存储至对应的目标介质。
在上述日志数据采集过程中，flume采集层模块120采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输。实际待采集服务可能包括多种，而且每一种服务待采集的日志数据可能包括多种种类。针对每一种待采集的日志数据，即每一条采集数据流，生成对应的配置文件。生成配置文件过程，可以是针对待采集日志数据生成一个标识ID，然后根据此标识ID生成对应的配置文件。
其中，上述配置文件包含一系列关联的数据，比如，对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic和服务日志存储介质路径等。这些数据之间可以互相关联，比如，服务日志路径可以基于关联服务ID生成，服务日志关联Kafka Topic可以基于标识ID生成，服务日志存储介质路径基于标识ID生成。在其他的方案中，配置文件可以包括其他数据，数据之间的关联关系可以根据实际需要进行设定。
然后将这些配置信息写入flume通信头信息中，传递到flume汇聚层。
flume汇聚层模块140通过启动一组公用flume汇聚节点接收flume采集层模块120传输的日志数据。其接收所有来自flume采集层的日志数据，从flume通信头信息中提取日志数据关联的标识ID(dfid)、关联服务ID(appid)、服务日志路径(log_path)、服务日志关联KafkaTopic(对应Kafka消息队列层模块中的Kafka Topic)以及服务日志存储介质路径(tgt_path)等属性数据，根据这些属性数据决定将日志数据如何传输以及需要发送至Kafka集群(Kafka消息队列层模块160)的哪个Topic中。
由上所述，服务日志关联Kafka Topic基于标识ID生成，或者说，Kafka Topic的命名是依赖于该标识ID，所以每一个数据消费者都能够自动消费关联的上游Kafka Topic数据。因此，每一个标识ID会启动一个数据消费者。数据消费者层模块180进行一定处理后根据确定的存储路径存储到目标介质。
通过上述在传输过程中关联属性的数据采集系统，可实现日志数据采集与流式传输的标准化，各功能层不同类型节点的配置差别将不再对数据采集和流式传输产生影响。同时，日志数据的属性数据也可跨功能层传递，实现流式传输各功能层节点间上下游关系的自动串联，基于这些标准化的属性数据和上下游串联关系，可轻松实现对日志采集及流式传输的健康状态监控、数据条目校验、数据关系梳理、新增或删除日志采集等，极大地降低操作和管理成本。
图2所示，为本发明一实施例的日志数据采集方法的流程图。参考图2，一种日志数据采集方法200，包括如下步骤：
步骤S210：采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输。
在日志数据采集过程中，flume采集层采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输。实际待采集服务可能包括多种，而且每一种服务待采集的日至数据可能包括多种种类。针对每一种待采集的日志数据，即每一条采集数据流，生成对应的配置文件。生成配置文件过程，可以是先针对待采集日志数据生成一个标识ID，然后根据此标识ID生成对应的配置文件。
其中，上述配置文件包含一系列关联的数据，比如，对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic和服务日志存储介质路径等。这些数据之间可以互相关联，比如，服务日志路径可以基于关联服务ID生成，服务日志关联Kafka Topic可以基于标识ID生成，服务日志存储介质路径基于标识ID生成。在其他的方案中，配置文件可以包括其他数据，数据之间的关联关系可以根据实际需要进行设定。
步骤S230：接收所述采集的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径。
flume汇聚层通过启动一组公用flume汇聚节点接收flume采集层传输的日志数据。其接收所有来自flume采集层的日志数据，从flume通信头信息中提取日志数据关联的标识ID(dfid)、关联服务ID(appid)、服务日志路径(log_path)、服务日志关联Kafka Topic(对应Kafka消息队列层模块中的Kafka Topic)以及服务日志存储介质路径(tgt_path)等属性数据，根据这些属性数据决定将日志数据如何传输以及需要发送至Kafka集群的哪个Topic。
步骤S250：根据所述传输方式缓存所述flume汇聚层模块传输的日志数据。
Kafka消息队列层，利用Kafka作为消息队列，短时间缓存日志数据，同时保证日志数据的一致性。
步骤S270：针对每一个配置文件对应的日志数据启动一个数据消费者，根据所述传输路径存储至目标介质。
由上所述，服务日志关联Kafka Topic基于标识ID生成，或者说，Kafka Topic的命名是依赖于该标识ID，所以每一个数据消费者都能够自动消费关联的上游Kafka Topic数据。因此，每一个标识ID会启动一个数据消费者。数据消费者层模块180进行一定处理后根据确定的存储路径存储到目标介质。
通过上述流式传输数据采集方法，可实现日志数据采集与流式传输的标准化，各功能层不同类型节点的配置差别将不再对数据采集和流式传输产生影响。同时，日志数据的属性数据也可跨功能层传递，实现流式传输各功能层节点间上下游关系的自动串联，基于这些标准化的属性数据和上下游串联关系，可轻松实现对日志采集及流式传输的健康状态监控、数据条目校验、数据关系梳理、新增或删除日志采集等，极大地降低操作和管理成本。
依照本发明如上文所述的实施例，这些实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施例。显然，根据以上描述，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地利用本发明以及在本发明基础上的修改使用。本发明仅受权利要求书及其全部范围和等效物的限制。

Claims (10)

1.一种日志数据采集系统，其特征在于，包括：
flume采集层模块，用于采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输；
flume汇聚层模块，接收所述flume采集层模块传输的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径；
Kafka消息队列层模块，用于根据所述传输方式缓存所述flume汇聚层模块传输的日志数据；
数据消费者层模块，用于针对每一个配置文件对应的日志数据启动一个数据消费者，并根据所述传输路径存储至目标介质。
2.根据权利要求1所述的日志数据采集系统，其特征在于，flume采集层模块针对每一条采集数据流生成对应的配置文件，为针对每一条采集数据流生成对应的标识ID，根据所述标识ID生成对应的配置文件。
3.根据权利要求2所述的日志数据采集系统，其特征在于，所述配置文件包括所述对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic，服务日志存储介质路径。
4.根据权利要求3所述的日志数据采集系统，其特征在于，
所述服务日志路径基于所述关联服务ID生成；并且/或者
所述服务日志关联Kafka Topic基于所述标识ID生成；并且/或者
所述服务日志存储介质路径基于所述标识ID生成。
5.根据权利要求4所述的日志数据采集系统，其特征在于，所述flume汇聚层模块通过启动一组公用flume汇聚节点接收所述flume采集层模块传输的日志数据。
6.一种日志数据采集方法，其特征在于，包括：
采集指定服务的日志数据，针对每一条采集数据流生成对应的配置文件，将所述配置文件写入flume通信头信息进行传输；
接收所述采集的日志数据，根据所述flume通信头信息确定对应的日志数据的传输方式和传输路径；
根据所述传输方式缓存所述flume汇聚层模块传输的日志数据；
针对每一个配置文件对应的日志数据启动一个数据消费者，根据所述传输路径存储至目标介质。
7.根据权利要求6所述的日志数据采集方法，其特征在于，针对每一条采集数据流生成对应的配置文件的步骤，为针对每一条采集数据流生成对应的标识ID，根据所述标识ID生成对应的配置文件。
8.根据权利要求7所述的日志数据采集方法，其特征在于，所述配置文件包括所述对应采集数据流的关联服务ID，服务日志路径，服务日志关联Kafka Topic，服务日志存储介质路径。
9.根据权利要求8所述的日志数据采集方法，其特征在于，还包括如下步骤：
基于所述关联服务ID生成所述服务日志路径；
基于所述标识ID生成所述服务日志关联Kafka Topic；
基于所述标识ID生成所述服务日志存储介质路径。
10.根据权利要求6所述的日志数据采集方法，其特征在于，所述接收所述采集的日志数据的步骤，还包括启动一组公用flume汇聚节点接收所述flume采集层模块传输的日志数据。
CN201910022404.3A 2019-01-10 2019-01-10 日志数据采集系统及方法 Pending CN109525448A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910022404.3A CN109525448A (zh) 2019-01-10 2019-01-10 日志数据采集系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910022404.3A CN109525448A (zh) 2019-01-10 2019-01-10 日志数据采集系统及方法

Publications (1)

Publication Number Publication Date
CN109525448A true CN109525448A (zh) 2019-03-26

Family

ID=65798884

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910022404.3A Pending CN109525448A (zh) 2019-01-10 2019-01-10 日志数据采集系统及方法

Country Status (1)

Country Link
CN (1) CN109525448A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110297746A (zh) * 2019-07-05 2019-10-01 北京慧眼智行科技有限公司 一种数据处理方法及系统
CN111866137A (zh) * 2020-07-20 2020-10-30 北京百度网讯科技有限公司 数据采集动态控制方法和装置、电子设备和介质
CN112527618A (zh) * 2020-12-17 2021-03-19 中国农业银行股份有限公司 一种日志收集方法及日志收集系统
CN112527844A (zh) * 2020-12-22 2021-03-19 北京明朝万达科技股份有限公司 数据处理方法及装置、数据库架构
CN113067883A (zh) * 2021-03-31 2021-07-02 建信金融科技有限责任公司 数据传输方法、装置、计算机设备及存储介质
CN114978885A (zh) * 2022-08-02 2022-08-30 深圳市华曦达科技股份有限公司 一种日志管理方法、装置、计算机设备及系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102902764A (zh) * 2012-09-25 2013-01-30 北京奇虎科技有限公司 一种日志记录的方法和装置
CN104486107A (zh) * 2014-12-05 2015-04-01 曙光信息产业(北京)有限公司 一种日志采集装置及方法
CN105608203A (zh) * 2015-12-24 2016-05-25 Tcl集团股份有限公司 一种基于Hadoop平台的物联网日志处理方法和装置
US20160321308A1 (en) * 2015-05-01 2016-11-03 Ebay Inc. Constructing a data adaptor in an enterprise server data ingestion environment
CN106354765A (zh) * 2016-08-19 2017-01-25 广东亿迅科技有限公司 一种基于分布式采集的日志分析系统及方法
CN106648722A (zh) * 2016-05-10 2017-05-10 深圳前海信息技术有限公司 基于大数据的Flume接收端数据处理方法和装置
CN108197233A (zh) * 2017-12-29 2018-06-22 飞狐信息技术（天津）有限公司 一种数据管理方法、中间件及数据管理系统
CN108365971A (zh) * 2018-01-10 2018-08-03 深圳市金立通信设备有限公司 日志解析方法、设备及计算机可读介质
CN109032910A (zh) * 2018-07-24 2018-12-18 北京百度网讯科技有限公司 日志采集方法、装置及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102902764A (zh) * 2012-09-25 2013-01-30 北京奇虎科技有限公司 一种日志记录的方法和装置
CN104486107A (zh) * 2014-12-05 2015-04-01 曙光信息产业(北京)有限公司 一种日志采集装置及方法
US20160321308A1 (en) * 2015-05-01 2016-11-03 Ebay Inc. Constructing a data adaptor in an enterprise server data ingestion environment
CN105608203A (zh) * 2015-12-24 2016-05-25 Tcl集团股份有限公司 一种基于Hadoop平台的物联网日志处理方法和装置
CN106648722A (zh) * 2016-05-10 2017-05-10 深圳前海信息技术有限公司 基于大数据的Flume接收端数据处理方法和装置
CN106354765A (zh) * 2016-08-19 2017-01-25 广东亿迅科技有限公司 一种基于分布式采集的日志分析系统及方法
CN108197233A (zh) * 2017-12-29 2018-06-22 飞狐信息技术（天津）有限公司 一种数据管理方法、中间件及数据管理系统
CN108365971A (zh) * 2018-01-10 2018-08-03 深圳市金立通信设备有限公司 日志解析方法、设备及计算机可读介质
CN109032910A (zh) * 2018-07-24 2018-12-18 北京百度网讯科技有限公司 日志采集方法、装置及存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110297746A (zh) * 2019-07-05 2019-10-01 北京慧眼智行科技有限公司 一种数据处理方法及系统
CN111866137A (zh) * 2020-07-20 2020-10-30 北京百度网讯科技有限公司 数据采集动态控制方法和装置、电子设备和介质
CN112527618A (zh) * 2020-12-17 2021-03-19 中国农业银行股份有限公司 一种日志收集方法及日志收集系统
CN112527844A (zh) * 2020-12-22 2021-03-19 北京明朝万达科技股份有限公司 数据处理方法及装置、数据库架构
CN113067883A (zh) * 2021-03-31 2021-07-02 建信金融科技有限责任公司 数据传输方法、装置、计算机设备及存储介质
CN114978885A (zh) * 2022-08-02 2022-08-30 深圳市华曦达科技股份有限公司 一种日志管理方法、装置、计算机设备及系统

Similar Documents

Publication Publication Date Title
CN109525448A (zh) 日志数据采集系统及方法
CN109067597A (zh) 一种分布式系统动态智能服务治理方法
EP1929705B1 (en) Device management method using nodes having additional attribute and device management client thereof
WO2021190087A1 (zh) 任务执行方法、装置、系统和服务器
CN106354797B (zh) 数据推荐方法和装置
CN107820692B (zh) 一种告警同步方法和系统
CN112118174A (zh) 软件定义数据网关
CN108965003A (zh) 一种分布式集群的部署方法、装置、系统及存储介质
CN107622064A (zh) 一种数据读取方法及系统
CN107479514A (zh) 一种工业大数据过程控制数据采集和传输系统与实现方法
CN110096545A (zh) 一种基于大数据平台数据处理域构架方法
CN107481503A (zh) 一种抄表系统和抄表方法
CN108268549A (zh) 数据稽核系统和方法
CN109271561A (zh) 一种图谱信息检索方法及装置
CN107870982A (zh) 数据处理方法、系统和计算机可读存储介质
CN103490978A (zh) 终端、服务器和消息监视方法
CN110213156A (zh) 一种跨中心群组即时通信方法和系统
CN106326280B (zh) 数据处理方法、装置及系统
CN109150977A (zh) 基于交易链路自动生成全局流水号的方法
CN102404760A (zh) 系统性能实时测量的方法及装置
CN114793250A (zh) 一种可配置化的can数据解析方法
CN105517135B (zh) 一种基于排队论的中继路由休眠时间预估方法
WO2012088761A1 (zh) 基于数据分析的安全性信息交互监测系统及方法
CN107968798A (zh) 一种网管资源标签获取方法、缓存同步方法、装置及系统
CN116846729A (zh) 一种基于云容器下多租户模式管理监控告警通知的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20231013

AD01 Patent right deemed abandoned