CN106598815B - 一种实时异步日志收集方法及系统 - Google Patents
一种实时异步日志收集方法及系统 Download PDFInfo
- Publication number
- CN106598815B CN106598815B CN201611244940.0A CN201611244940A CN106598815B CN 106598815 B CN106598815 B CN 106598815B CN 201611244940 A CN201611244940 A CN 201611244940A CN 106598815 B CN106598815 B CN 106598815B
- Authority
- CN
- China
- Prior art keywords
- log
- time
- text information
- text
- write
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000012544 monitoring process Methods 0.000 claims abstract description 25
- 230000005540 biological transmission Effects 0.000 claims description 41
- 238000012163 sequencing technique Methods 0.000 claims description 8
- 230000001629 suppression Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 description 8
- 239000000306 component Substances 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000008358 core component Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006116 polymerization reaction Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种实时异步日志收集方法及系统。该方法包括：在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；当所述写入接口被调用时，获取写入日志的文本信息；将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息。采用本发明，可以提高日志收集的实时性。
Description
技术领域
本发明涉及系统安全的技术领域，更具体地，涉及一种实时异步日志收集方法及系统。
背景技术
网络设备、系统及服务程序等，在运作时都会产生一个叫log(日志)的事件记录；每一行日志都记载着日期、时间、使用者及动作等相关操作的描述。我们在系统上进行一些操作时，这些日志文件通常会记录下我们操作的一些相关内容，这些内容对系统安全工作人员相当有用。比如说有人对系统进行了IPC探测，系统就会在安全日志里迅速地记下探测者探测时所用的IP、时间、用户名等，用FTP探测后，就会在FTP日志中记下IP、时间、探测所用的用户名等。
作为互联网公司，网站监测日志是数据的最大来源之一，每天的日志量至少有1TB以上，而后续90％以上的业务都是需要基于日志来完成的。对于日志的收集，现有技术通常的做法是通过shell脚本把日志文件同步到目标机器，读取和解析目标服务器上的日志文件，由于存在时间差，一般延迟半小时以上，所以目标机器上获得的日志文件不一定包含目标服务器当前时刻的全部日志，其次还要依赖业务方的服务器，需要登陆到目标服务器上才可以获得日志文件，部署起来也比较麻烦，对于较大的日志文件的实时同步对网卡和宽带要求比较高，所以随着业务对日志实时性的要求不断提高，现有的做法已经不合适。
发明内容
鉴于上述问题，本发明提出了一种实时异步日志收集方法及系统，能够提高日志收集的实时性。
本发明实施例中提供了一种实时异步日志收集方法，包括：
在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
当所述写入接口被调用时，获取写入日志的文本信息；
将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息。
优选地，所述获取写入日志的文本信息的步骤之后，包括：
预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
根据所述时间周期确定发送时间。
优选地，所述根据所述时间周期确定发送时间的步骤，具体包括：
从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
到所述时间周期结束，确定末次发送时间。
优选地，将包含所述目标服务器的标识、所述文本信息的日志增量数据发送到目标机器上的步骤之后，包括：
在本次发送后，删除本次发送的文本信息。
优选地，将包含所述目标服务器的标识、所述文本信息的日志增量数据发送到目标机器上的步骤之前，包括：
在本次发送前，删除内容重复的文本信息。
相应地，本发明实施例提供了一种实时异步日志收集系统，包括目标机器和与该目标机器相连的至少一个目标服务器，所述目标服务器包括日志监控单元，文本获取单元，文本发送单元；所述目标机器包括文本接收单元；其中，
所述日志监控单元，用于在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
所述文本获取单元，用于当所述写入接口被调用时，获取写入日志的文本信息；
所述文本发送单元，用于将所述文本信息和所述目标服务器的标识发送到目标机器上；
所述文本接收单元，用于收集各个目标服务器的写入日志的文本信息。
优选地，所述目标服务器，包括：
文本汇聚单元，用于预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
发送触发单元，用于根据所述时间周期确定发送时间。
优选地，所述发送触发单元，具体包括：
首次触发单元，用于从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
末次触发单元，用于到所述时间周期结束，确定末次发送时间。
优选地，所述文本发送单元，包括：
文本删除单元，用于在本次发送后，删除本次发送的文本信息。
优选地，所述文本发送单元，包括：
文本聚合单元，用于在本次发送前，删除内容重复的文本信息。
相对于现有技术，本发明提供的方案，在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口。相对于现有技术需要从目标服务器上获取目标服务器日志，再对日志进行分析的方案不同。本方案是在目标服务器的业务线程内设置一监控线程，由目标服务器主动向目标机器发送日志的文本信息。具体地，可以因应不同的日志框架制定不同的组件，安装在目标服务器上，对目标服务器内的日志的写入接口进行监控。当所述写入接口被调用时，获取写入日志的文本信息。这里是通过异步提取写入日志的文本信息，不影响目标服务器的日志写入逻辑，即便该日志的写入出现异常或者写入过程耗时也不会影响本方案对写入日志的文本信息的异步收集。最后，将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息。需要补充说明的是，这里收集的是各个目标服务器的即将写入日志的文本信息，一方面，这部分待写入的文本信息是各个日志的增量数据，数据量较少，与各个日志本身的大小无关，传输过程中只是传输该增量数据部分，而不是传输整个日志文件，所以传输速度较快。另一方面，直接在目标机器一端收集写入日志的文本信息，而不是收集日志本身，所以，无需对各个日志进行分析和清洗，日志的处理效率更高。
本发明附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一种实时异步日志收集方法的流程图。
图2为本发明一种实时异步日志收集方法的实施例流程图。
图3为本发明一种实时异步日志收集系统的示意图。
图4为本发明一种实时异步日志收集系统的实施例示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
在本发明的说明书和权利要求书及上述附图中的描述的一些流程中，包含了按照特定顺序出现的多个操作，但是应该清楚了解，这些操作可以不按照其在本文中出现的顺序来执行或并行执行，操作的序号如101、102等，仅仅是用于区分开各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的消息、设备、模块等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为了便于理解本方案的实现过程，以下以Java的日志为例，先对Java日志的基本原理做一简要说明。Java使用了一种自定义的、可扩展的方法来输出日志。Java通过java.util.logging包提供了一套基本的日志处理API，Java日志API由Loggers、Appenders和Layouts三个核心组件组成。Logger负责捕捉事件并将其发送给合适的Appender。Appenders负责将日志事件记录到目标位置。在将日志事件输出之前，Appenders使用Layouts来对事件进行格式化处理。Layouts就是负责对日志事件中的数据进行转换和格式化。Layouts决定了数据在一条日志记录中的最终形式。当Logger记录一个事件时，它将事件转发给适当的Appender。然后Appender使用Layout来对日志记录进行格式化，并将日志从你的应用程序输出到目标地址。
在Java日志输出的过程中，需要使用一个或者多个日志框架，这些框架提供了必要的对象、方法和配置来传输消息。Java在java.util.logging包中提供了一个默认的框架。除此之外，还有很多其它第三方框架，包括Log4j、Logback以及tinylog。还有其它一些开发包，例如SLF4J和Apache Commons Logging，它们提供了一些抽象层，对你的代码和日志框架进行解耦，从而允许你在不同的日志框架中进行切换。
现有的方案，都是在输出日志后，收集日志文件，然后再对日志文件进行清洗和分析。如果日志文件体量较大，则在传输、分析、提取的各个环节上都会比较困难。本方案提供了如图1所示的方案。
图1为本发明一种实时异步日志收集方法的流程图，包括：
S101：在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
S102：当所述写入接口被调用时，获取写入日志的文本信息；
S103：将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息。
相对于现有技术，本发明提供的方案，在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口。相对于现有技术需要从目标服务器上获取目标服务器日志，再对日志进行分析的方案不同。本方案是在目标服务器的业务线程内设置一监控线程，由目标服务器主动向目标机器发送日志的文本信息。具体地，可以因应不同的日志框架制定不同的组件，安装在目标服务器上，对目标服务器内的日志的写入接口进行监控。当所述写入接口被调用时，获取写入日志的文本信息。这里是通过异步提取写入日志的文本信息，不影响目标服务器的日志写入逻辑，即便该日志的写入出现异常或者写入过程耗时也不会影响本方案对写入日志的文本信息的异步收集。最后，将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息。需要补充说明的是，这里收集的是各个目标服务器的即将写入日志的文本信息，一方面，这部分待写入的文本信息是各个日志的增量数据，数据量较少，与各个日志本身的大小无关，传输过程中只是传输该增量数据部分，而不是传输整个日志文件，所以传输速度较快。另一方面，直接在目标机器一端收集写入日志的文本信息，而不是收集日志本身，所以，无需对各个日志进行分析和清洗，日志的处理效率更高。
优选地，以一个组件的形式提供给使用者，使用者在目标服务器上安装该组建，收集业务进程内的所有日志，尽可能不影响使用方其他的业务线程，同时保证日志的实时性，而且组件需要做到简单易用。例如，针对log4j,logback两种日志框架，通过重写log4j,logback的appender，制作clients-appmonitor-log4j和clients-appmonitor-logback两个组件，并部署在目标服务器上运行，通过异步的线程中去收集写入日志的文本信息，当目标服务器的日志调用写入接口时，将待写入日志的文本信息实时上报。上报过程中可以通过如图2所述的时间周期来控制各个时间点上日志的实时性。
图2为本发明一种实时异步日志收集方法的实施例流程图。
S201：在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
S202：当所述写入接口被调用时，获取写入日志的文本信息；
S203：预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
S204：根据所述时间周期确定发送时间。
S205：在本次发送前，删除内容重复的文本信息。
S206：将所述文本信息和所述目标服务器的标识发送到目标机器上；
S207：在本次发送后，删除本次发送的文本信息。
S208：通过所述目标机器收集各个目标服务器的写入日志的文本信息。
在本实施例中，通过重写log4j,logback的appender制作相应日志库的组件，组件启动的线程是在一个异步的线程中收集日志，不影响业务的其他工作线程，但与使用方的各个线程同在一个JVM实例中，不需要额外的部署，随使用方进程的启动而运行，随使用方进程停止而结束。在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口。当所述写入接口被调用时，获取写入日志的文本信息。对于收集日志的实时性可以通过时间周期来控制。预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息。根据所述时间周期确定发送时间。例如可以在一个周期结束时才触发一次发送。
优选地，一个时间周期内可以触发两次发送。
从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
到所述时间周期结束，确定末次发送时间。
触发两次发送，一方面保证一个周期内首条日志的实时性，另一方面，对于一个周期内非首条日志的其他文本信息可以先聚合，再发送。
在首次发送前，删除内容重复的文本信息。将所述文本信息和所述目标服务器的标识发送到目标机器上；在首次发送后，删除本次发送的文本信息。避免下次发送时，重复发送本次的文本信息。例如，对于同一条错误信息可能会产生数条相同的日志文本信息记录，在发送前，先删除这些内容重复的日志文本信息记录，可以较少发送的数据量，进一步提高传输效率。
在末次发送前，删除内容重复的文本信息；将所述文本信息和所述目标服务器的标识发送到目标机器上；在末次发送后，删除本次发送的文本信息。通过所述目标机器收集各个目标服务器的写入日志的文本信息。
例如，在预设的一分钟的周期内，首条文本信息先发送到目标机器上；一个周期内，剩余的N-1条聚合后再发。由于传输的是各个日志的增量数据，数据传输量少，满足实时性传输的要求。而前后也仅是相隔一个周期(一分钟)的时间间隔，故此，采用本方案，可以提高日志收集的实时性。
图3为本发明一种实时异步日志收集系统的示意图，包括目标机器和与该目标机器相连的至少一个目标服务器，所述目标服务器包括日志监控单元，文本获取单元，文本发送单元；所述目标机器包括文本接收单元；其中，
所述日志监控单元，用于在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
所述文本获取单元，用于当所述写入接口被调用时，获取写入日志的文本信息；
所述文本发送单元，用于将所述文本信息和所述目标服务器的标识发送到目标机器上；
所述文本接收单元，用于收集各个目标服务器的写入日志的文本信息。
图3与图1相对应，图中各个单元的运行方式与方法中的相同。需要补充说明的是，图3的目标服务器可以设置多个，在目标机器一端根据目标服务器的标识来区分各个目标服务器的写入日志的文本信息。
图4为本发明一种实时异步日志收集系统的实施例示意图。
如图4所示，所述目标服务器，包括：
文本汇聚单元，用于预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
发送触发单元，用于根据所述时间周期确定发送时间。
如图4所示，所述文本发送单元，包括：
文本删除单元，用于在本次发送后，删除本次发送的文本信息。
如图4所示，所述文本发送单元，包括：
文本聚合单元，用于在本次发送前，删除内容重复的文本信息。
图4与图2相对应，图中各个单元的运行方式与方法中的相同。
优选地，所述发送触发单元，具体包括：
首次触发单元，用于从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
末次触发单元，用于到所述时间周期结束，确定末次发送时间。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种实时异步日志收集方法，其特征在于，包括：
在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
当所述写入接口被调用时，获取写入日志的文本信息，所述文本信息为日志的增量数据；
将所述文本信息和所述目标服务器的标识发送到目标机器上，通过所述目标机器收集各个目标服务器的写入日志的文本信息；其中，所述文本信息为待写入的文本信息。
2.根据权利要求1所述的实时异步日志收集方法，其特征在于，所述获取写入日志的文本信息的步骤之后，包括：
预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
根据所述时间周期确定发送时间。
3.根据权利要求2所述的实时异步日志收集方法，其特征在于，所述根据所述时间周期确定发送时间的步骤，具体包括：
从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
到所述时间周期结束，确定末次发送时间。
4.根据权利要求1-3任一项所述的实时异步日志收集方法，其特征在于，将包含所述目标服务器的标识、所述文本信息的日志增量数据发送到目标机器上的步骤之后，包括：
在本次发送后，删除本次发送的文本信息。
5.根据权利要求1-3任一项所述的实时异步日志收集方法，其特征在于，将包含所述目标服务器的标识、所述文本信息的日志增量数据发送到目标机器上的步骤之前，包括：
在本次发送前，删除内容重复的文本信息。
6.一种实时异步日志收集系统，包括目标机器和与该目标机器相连的至少一个目标服务器，其特征在于：所述目标服务器包括日志监控单元，文本获取单元，文本发送单元；所述目标机器包括文本接收单元；其中，
所述日志监控单元，用于在目标服务器的业务线程内设置一监控线程，以监控该目标服务器的日志的写入接口；
所述文本获取单元，用于当所述写入接口被调用时，获取写入日志的文本信息，所述文本信息为日志的增量数据；
所述文本发送单元，用于将所述文本信息和所述目标服务器的标识发送到目标机器上；
所述文本接收单元，用于收集各个目标服务器的写入日志的文本信息；其中，所述文本信息为待写入的文本信息。
7.根据权利要求6所述的实时异步日志收集系统，其特征在于，所述目标服务器，包括：
文本汇聚单元，用于预设时间周期，按照所述写入接口被调用的先后顺序汇聚一个时间周期内写入日志的文本信息；
发送触发单元，用于根据所述时间周期确定发送时间。
8.根据权利要求7所述的实时异步日志收集系统，其特征在于，所述发送触发单元，具体包括：
首次触发单元，用于从所述时间周期开始，根据首条写入日志的文本信息的获取时间，确定首次发送时间；
末次触发单元，用于到所述时间周期结束，确定末次发送时间。
9.根据权利要求6-8任一项所述的实时异步日志收集系统，其特征在于，所述文本发送单元，包括：
文本删除单元，用于在本次发送后，删除本次发送的文本信息。
10.根据权利要求6-8任一项所述的实时异步日志收集系统，其特征在于，所述文本发送单元，包括：
文本聚合单元，用于在本次发送前，删除内容重复的文本信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611244940.0A CN106598815B (zh) | 2016-12-29 | 2016-12-29 | 一种实时异步日志收集方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611244940.0A CN106598815B (zh) | 2016-12-29 | 2016-12-29 | 一种实时异步日志收集方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106598815A CN106598815A (zh) | 2017-04-26 |
| CN106598815B true CN106598815B (zh) | 2019-11-26 |
Family
ID=58605037
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611244940.0A Active CN106598815B (zh) | 2016-12-29 | 2016-12-29 | 一种实时异步日志收集方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106598815B (zh) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107918565A (zh) * | 2017-11-17 | 2018-04-17 | 广东小天才科技有限公司 | 一种应用程序的异常信息的上报方法及移动终端 |
| CN108153654B (zh) * | 2017-12-01 | 2021-01-22 | 北京奇艺世纪科技有限公司 | 一种日志收集方法及装置 |
| CN110019045B (zh) * | 2017-12-29 | 2024-04-16 | 北京奇虎科技有限公司 | 日志落地方法及装置 |
| CN109309585A (zh) * | 2018-09-21 | 2019-02-05 | 郑州云海信息技术有限公司 | 一种日志收集方法、装置以及设备 |
| CN111143157B (zh) * | 2019-11-28 | 2021-08-27 | 华为技术有限公司 | 故障日志处理方法和装置 |
| CN111177097B (zh) * | 2019-12-13 | 2022-06-17 | 北京浪潮数据技术有限公司 | 一种日志收集方法、装置、设备及计算机可读存储介质 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105119752A (zh) * | 2015-09-08 | 2015-12-02 | 北京京东尚科信息技术有限公司 | 一种分布式日志采集方法、装置及系统 |
| CN105868093A (zh) * | 2016-04-25 | 2016-08-17 | 上海斐讯数据通信技术有限公司 | 一种日志写入方法及服务端 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9311311B2 (en) * | 2013-09-27 | 2016-04-12 | International Business Machines Corporation | Archival management of database logs |
-
2016
- 2016-12-29 CN CN201611244940.0A patent/CN106598815B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105119752A (zh) * | 2015-09-08 | 2015-12-02 | 北京京东尚科信息技术有限公司 | 一种分布式日志采集方法、装置及系统 |
| CN105868093A (zh) * | 2016-04-25 | 2016-08-17 | 上海斐讯数据通信技术有限公司 | 一种日志写入方法及服务端 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106598815A (zh) | 2017-04-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106598815B (zh) | 一种实时异步日志收集方法及系统 | |
| US20180365085A1 (en) | Method and apparatus for monitoring client applications | |
| CN106649063B (zh) | 用于监测程序运行时耗时数据的方法及系统 | |
| CN105159964B (zh) | 一种日志监控方法及系统 | |
| CN108039957B (zh) | 复杂网络流量包智能分析系统 | |
| CN111274095B (zh) | 日志数据处理方法、装置、设备及计算机可读存储介质 | |
| CN104202201B (zh) | 一种日志处理方法、装置及终端 | |
| CN105589782B (zh) | 基于浏览器的用户行为采集方法 | |
| CN104834582B (zh) | 一种监控事件展示方法 | |
| CN107977473B (zh) | 基于Logback的分布式系统日志的检索方法和系统 | |
| CN105490854A (zh) | 实时日志收集方法、系统和应用服务器集群 | |
| CN101997925A (zh) | 具有预警功能的服务器监控方法及其系统 | |
| CN107066370A (zh) | 一种自动监控并收集故障硬盘日志的工具及方法 | |
| CN110191000A (zh) | 一种数据处理方法、消息追踪监控方法和分布式系统 | |
| CN111078455A (zh) | 基于时间轴的异常行为序列关联处理方法以及装置、设备、存储介质 | |
| CN111046011A (zh) | 日志收集方法、系统、节点、电子设备及可读存储介质 | |
| WO2020232871A1 (zh) | 一种微服务依赖分析方法及装置 | |
| CN105808417A (zh) | 自动化测试方法及代理服务器 | |
| CN104104734A (zh) | 日志分析方法和装置 | |
| CN103760394A (zh) | 示波器测量数据的自动处理方法及装置 | |
| CN105227405A (zh) | 监控方法及系统 | |
| WO2017074471A1 (en) | Tracking contention in a distributed business transaction | |
| CN107181626A (zh) | 分布式存储集群系统网络带宽监测方法及系统 | |
| CN105468502A (zh) | 一种日志收集的方法、装置和系统 | |
| CN106161339B (zh) | 获取ip访问关系的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| EE01 | Entry into force of recordation of patent licensing contract | ||
| EE01 | Entry into force of recordation of patent licensing contract |
Application publication date: 20170426 Assignee: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd. Assignor: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd. Contract record no.: X2021980000151 Denomination of invention: A real time asynchronous log collection method and system Granted publication date: 20191126 License type: Common License Record date: 20210107 |