CN103944973A - 一种日志采集方法及装置 - Google Patents

一种日志采集方法及装置 Download PDF

Info

Publication number
CN103944973A
CN103944973A CN201410132023.8A CN201410132023A CN103944973A CN 103944973 A CN103944973 A CN 103944973A CN 201410132023 A CN201410132023 A CN 201410132023A CN 103944973 A CN103944973 A CN 103944973A
Authority
CN
China
Prior art keywords
log
database
server
log information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410132023.8A
Other languages
English (en)
Inventor
马龙清
蔡抒扬
王鹏
胡道生
夏曙光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BEIJING SINOIOV VEHICLE NETWORK TECHNOLOGY Co Ltd
Original Assignee
BEIJING SINOIOV VEHICLE NETWORK TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BEIJING SINOIOV VEHICLE NETWORK TECHNOLOGY Co Ltd filed Critical BEIJING SINOIOV VEHICLE NETWORK TECHNOLOGY Co Ltd
Priority to CN201410132023.8A priority Critical patent/CN103944973A/zh
Publication of CN103944973A publication Critical patent/CN103944973A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种日志采集方法及装置。所述方法包括:根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。本发明实施例提出的技术方案能够很方便的查看日志信息,并且能够对采集的日志信息进行统计分析或以过滤条件查询,进而能够快速定位或分析在独立服务器或服务器集群环境下程序出错的问题,同时在一定程度上提高服务器应用程序的执行效率,避免对服务器系统程序的性能造成影响。

Description

一种日志采集方法及装置
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种日志采集方法及装置。
背景技术
目前,在客户端/服务器或者浏览器/服务器架构下的服务交互系统中,服务器通常安装有用于实现各种服务的应用程序,这些应用程序的安全性、稳定性对用户而言是至关重要的。为此,服务器会定期采集和分析各应用程序对应的日志信息来监控各个应用程序的运行情况。
现有的日志采集技术大多都是将日志信息以文件的形式存储在应用程序所在服务器的物理磁盘上,并以时间、大小等限制保持一定容量的日志信息。但是,这种方式存在以下不足:(1)查看日志信息不方便;(2)统计分析或以过滤条件查询日志信息很困难;(3)一定程度上降低了服务器应用程序的执行效率,尤其延长了服务请求的响应时间,对服务器应用程序的性能有一定影响。
综上所述,当应用程序出现问题时,如果以现有的方式判断、定位、或者查找问题的原因时,会花费很多的时间,效率较低。
发明内容
本发明实施例提供了一种日志采集方法及装置,以使得能够很方便的查看日志信息,并且能够对采集的日志信息进行统计分析或以过滤条件查询,在一定程度上提高服务器应用程序的执行效率,避免对服务器系统程序的性能造成影响。
第一方面,本发明实施例提供了一种日志采集方法,该方法包括:
根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。
第二方面,本发明实施例还提供了一种日志采集装置,该装置包括:
日志信息组装单元,用于根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
日志信息存储单元,用于启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。
本发明实施例提出的技术方案的有益技术效果为:
一方面,通过将对日志信息进行组装后生成的信息对象集合存储到独立于服务器而存在的数据库中,而并非存储在服务器的物理磁盘上,使得不必再登录服务器进行查看日志信息,且对于部署在服务器集群上的应用程序而言,可直接从数据库中查找相应日志信息;
另一方面,信息对象集合是以数据库所支持的格式进行存储,由于数据库中通常是以键值对的形式进行数据存储的,根据其中的键能够很容易完成对数据库中所存储的日志信息数据的增、删、改、查等操作,进而实现对日志信息的统计分析或者以过滤条件查询等后续操作;
再一方面,通过启动日志存储线程对日志信息进行存储,不中断当前服务器上正在运行的应用程序,提高了应用程序的执行效率,尤其缩短了服务请求的响应时间,避免了对服务器应用程序的性能所造成的影响。
附图说明
图1是本发明实施例一提供的一种日志采集方法的流程示意图;
图2是本发明实施例二提供的一种日志采集方法的流程示意图;
图3是本发明实施例三提供的一种日志采集装置的结构示意图;
图4是本发明实施例四提供的一种日志信息采集系统的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种日志采集方法的流程示意图,本实施例可适用于对服务器中各应用程序对应的日志信息进行采集的情况,该方法可以由日志采集装置来执行。其中,服务器可以是在客户端/服务器或者浏览器/服务器架构中的服务器;日志采集装置可以设置在服务器内部,也可独立于服务器。具体的,所述方法包括如下步骤:
步骤110、根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
步骤120、启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于服务器而存在的数据库中。
在本实施例中,服务器上的应用程序会根据当前自身运行的情况生成与其对应的日志信息。通常情况下日志信息是被暂时存储在服务器的堆栈中的。日志采集装置可首先从服务器的堆栈中获取各应用程序生成的日志信息,并根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合。其中,配置文件是用于描述日志信息的组装格式,例如配置文件描述了日志信息以与其对应的应用程序名称、日志大小、日志采集时间、日志内容等格式进行组装。
在将服务器中生成的日志信息组装成信息对象集合后,日志采集装置启动不同于当前服务器系统线程的日志存储线程,建立与独立于服务器而存在的数据库的连接,对经组装后的日志信息以预设的数据格式存储到该数据库中。其中所述预设的数据格式应为该数据库所支持的数据格式。
本发明实施例提出的技术方案,具有如下优点:
(1)将对日志信息进行组装后生成的信息对象集合存储到独立于服务器而存在的数据库中,而非服务器的物理磁盘上,使得后续在用户查看日志信息时可不必再登录服务器,且对于部署在服务器集群上的应用程序而言,可直接从数据库中查找相应日志信息,克服了当一个请求发生异常时,由于集群做了负载均衡,而无法得知与此异常行为相对应的日志被存储在集群中的哪一个服务器上的问题;
(2)以数据库所支持的格式存储信息对象集合进行存储,由于数据库中通常是以键值对的形式进行数据存储的,根据其中的键能够很容易完成对数据库中所存储的日志信息数据的增、删、改、查等操作,进而实现对日志信息的统计分析或者以过滤条件查询等后续操作,能够快速定位或分析在独立服务器或服务器集群环境下程序出错的问题;
(3)通过启动日志存储线程对日志信息进行存储,不中断当前服务器上正在运行的应用程序,能够提高应用程序的执行效率,避免对服务器应用程序的性能所造成的影响。
实施例二
图2是本发明实施例二提供的一种日志采集方法的流程示意图。本实施例在实施例一的基础上,增加了生成配置文件的步骤,并根据该步骤对根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合、将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中这两个步骤作进一步优化。参见图2,所述方法具体包括如下步骤:
步骤210、对日志参数存储文件进行采集参数设置,生成配置文件。
在本实施例中,采集参数包括配置格式、日志类型和数据库所在设备的IP地址与端口。具体的,配置格式可以包括与其对应的应用程序名称、日志大小、日志采集时间、日志内容等组成的一种格式;日志类型可包括调试信息类、警告信息类、错误信息类、应用程序内容信息类等。
步骤220、查询服务器中生成的日志信息,从中获取与配置文件中的日志类型相对应的日志信息。
日志采集装置在生成配置文件后,可通过读取配置文件中的日志类型,从服务器的堆栈中提取只与所述日志类型相对应的日志信息,例如从堆栈存储的所有日志信息中提取错误信息这一类型的日志信息。
步骤230、根据配置文件中记录的配置格式,将获取到的日志信息组装成信息对象集合。
步骤240、通过独立于服务器而存在的数据库的驱动程序读取配置文件中记录的数据库所在设备的IP地址与端口。
步骤250、根据IP地址与端口驱动与数据库的连接,将所述信息对象集合以预设的数据格式发送至数据库中。
在本实施例中,在将获取到的日志信息组装成信息对象集合之后,进一步将该信息对象集合存储到独立于服务器而存在的数据库中去。为了实现此存储过程,日志采集装置可首先通过预先导入的数据库的驱动程序来完成与数据库的连接。其中,所述连接过程可以是:数据库的驱动程序首先进行连接初始化,读取配置文件中记录的数据库所在设备的IP地址与端口,然后根据该IP地址与端口向数据库发送连接请求,在接收到数据库的应答消息后,完成日志采集装置与数据库的连接。
在以上技术方案的基础上,在将所述信息对象集合以预设的数据格式存储到独立于服务器而存在的数据库中之后,还包括:在接收到日志信息查询请求时,将所述数据库中存储的、符合该日志信息查询请求的信息对象数据进行解析,生成页面格式下的信息对象数据进行显示。这样,能够实现快捷的用户查询,为对应用程序异常情况的判断、定位查找提供了方便,提高了处理问题的效率。
在上述各个实施例的基础上,数据库优选为MongoDB,预设的数据格式为BSON(二进制序列化文档格式,Binary Serialized Document Format)。MongoDB是一个基于分布式文件存储的数据库,基于关系型数据库和非关系型数据库之间的产品,支持数据结构非常松散、存储比较复杂的数据类型,支持动态查询、完全索引、复制和故障恢复,可通过网络访问。这样,可以能够较好的保证信息对象集合存储的可靠性和稳定性。
实施例三
图3是本发明实施例三提供的一种日志采集装置的结构示意图。参见图3,所述装置具体包括:
日志信息组装单元310,用于根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
日志信息存储单元320,用于启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。
进一步的,所述装置还包括:采集参数配置单元300,用于在所述日志信息组装单元310根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合之前,对日志参数存储文件进行采集参数设置,生成所述配置文件;
其中,所述采集参数包括配置格式、日志类型和所述数据库所在设备的IP地址与端口。
所述日志信息组装单元310具体用于:查询所述服务器中生成的日志信息,从中获取与所述配置文件中的日志类型相对应的日志信息;根据所述配置文件中记录的配置格式,将获取到的日志信息组装成信息对象集合;
所述日志信息存储单元320将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,具体用于:通过所述数据库的驱动程序读取所述配置文件中记录的所述数据库所在设备的IP地址与端口,根据所述IP地址与端口驱动与所述数据库的连接;将所述信息对象集合以预设的数据格式发送至独立于所述服务器而存在的所述数据库中。
进一步的,所述装置还包括:日志信息显示单元330,用于在所述日志信息存储单元320将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中之后,在接收到日志信息查询请求时,将所述数据库中存储的、符合所述日志信息查询请求的信息对象数据进行解析,生成页面格式下的信息对象数据进行显示。
进一步的,所述数据库为MongoDB,所述预设的数据格式为BSON。
上述产品可执行本发明任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4是本发明实施例四提供给的一种日志信息采集系统的结构示意图。本实施例可以以上述实施例为基础,提供一优选实施例。参见图4,该日志信息的采集过程包括:
日志采集装置对日志参数存储文件log4j.properties进行采集参数设置,生成配置文件;
日志采集装置导入开源的jar包:log4j-1.2.17.jar、log4mongo-java-0.7.4.jar和mongo-java-driver-2.10.1.jar,其中log4j-1.2.17.jar包是获取日志信息的前置条件,log4mongo-java-0.7.4.jar和mongo-java-driver-2.10.1.jar为MongoDB数据库的驱动程序;
日志采集装置根据配置文件将服务器集群410和独立服务器420中各应用程序和/或服务生成的日志信息组装成信息对象集合;
日志采集装置通过独立于服务器集群410和独立服务器420而存在的MongoDB数据库的驱动程序,读取配置文件中记录的MongoDB数据库所在设备的IP地址与端口;
根据IP地址与端口驱动与MongoDB数据库的连接,将信息对象集合以预设的数据格式发送至MongoDB数据库中;
在接收到日志信息查询请求时,日志采集装置中的显示应用程序将MongoDB数据库中存储的、符合该日志信息查询请求的信息对象数据进行解析,生成页面格式下的信息对象数据,并将所生成的页面显示在终端430的显示器屏幕上。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种日志采集方法,其特征在于,包括:
根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。
2.根据权利要求1所述的日志采集方法,其特征在于,在所述根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合之前,还包括:对日志参数存储文件进行采集参数设置,生成所述配置文件;
其中,所述采集参数包括配置格式、日志类型和所述数据库所在设备的IP地址与端口。
3.根据权利要求2所述的日志采集方法,其特征在于,所述根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合,包括:查询所述服务器中生成的日志信息,从中获取与所述配置文件中的日志类型相对应的日志信息;根据所述配置文件中记录的配置格式,将获取到的日志信息组装成信息对象集合;
所述将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,包括:通过所述数据库的驱动程序读取所述配置文件中记录的所述数据库所在设备的IP地址与端口,根据所述IP地址与端口驱动与所述数据库的连接;将所述信息对象集合以预设的数据格式发送至独立于所述服务器而存在的所述数据库中。
4.根据权利要求1所述的日志采集方法,其特征在于,在所述将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中之后,还包括:在接收到日志信息查询请求时,将所述数据库中存储的、符合所述日志信息查询请求的信息对象数据进行解析,生成页面格式下的信息对象数据进行显示。
5.根据权利要求1-4中任一项所述的日志采集方法,其特征在于,所述数据库为MongoDB,所述预设的数据格式为BSON。
6.一种日志采集装置,其特征在于,包括:
日志信息组装单元,用于根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合;
日志信息存储单元,用于启动日志存储线程,将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中,其中所述数据库支持所述预设的数据格式。
7.根据权利要求1所述的日志采集装置,其特征在于,还包括:采集参数配置单元,用于在所述日志信息组装单元根据预设的配置文件将服务器中生成的日志信息组装成信息对象集合之前,对日志参数存储文件进行采集参数设置,生成所述配置文件;
其中,所述采集参数包括配置格式、日志类型和所述数据库所在设备的IP地址与端口。
8.根据权利要求7所述的日志采集装置,其特征在于,所述日志信息组装单元具体用于:查询所述服务器中生成的日志信息,从中获取与所述配置文件中的日志类型相对应的日志信息;根据所述配置文件中记录的配置格式,将获取到的日志信息组装成信息对象集合;
所述日志信息存储单元具体用于:启动日志存储线程,通过所述数据库的驱动程序读取所述配置文件中记录的所述数据库所在设备的IP地址与端口,根据所述IP地址与端口驱动与所述数据库的连接;将所述信息对象集合以预设的数据格式发送至独立于所述服务器而存在的所述数据库中。
9.根据权利要求1所述的日志采集装置,其特征在于,还包括:日志信息显示单元,用于在所述日志信息存储单元将所述信息对象集合以预设的数据格式存储到独立于所述服务器而存在的数据库中之后,在接收到日志信息查询请求时,将所述数据库中存储的、符合所述日志信息查询请求的信息对象数据进行解析,生成页面格式下的信息对象数据进行显示。
10.根据权利要求6-9中任一项所述的日志采集装置,其特征在于,所述数据库为MongoDB,所述预设的数据格式为BSON。
CN201410132023.8A 2014-04-02 2014-04-02 一种日志采集方法及装置 Pending CN103944973A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410132023.8A CN103944973A (zh) 2014-04-02 2014-04-02 一种日志采集方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410132023.8A CN103944973A (zh) 2014-04-02 2014-04-02 一种日志采集方法及装置

Publications (1)

Publication Number Publication Date
CN103944973A true CN103944973A (zh) 2014-07-23

Family

ID=51192454

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410132023.8A Pending CN103944973A (zh) 2014-04-02 2014-04-02 一种日志采集方法及装置

Country Status (1)

Country Link
CN (1) CN103944973A (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104346248A (zh) * 2014-10-17 2015-02-11 浪潮电子信息产业股份有限公司 一种基于history命令的审计功能实现方法
CN104394023A (zh) * 2014-12-09 2015-03-04 上海斐讯数据通信技术有限公司 用于网络接入终端的故障收集方法及系统
CN104468725A (zh) * 2014-11-06 2015-03-25 浪潮(北京)电子信息产业有限公司 一种实现高可用集群软件维护的方法、装置及系统
CN104836686A (zh) * 2015-05-11 2015-08-12 北京明略软件系统有限公司 一种生成服务器的配置文件的方法及装置
CN105404472A (zh) * 2015-11-23 2016-03-16 天脉聚源(北京)传媒科技有限公司 一种压缩日志时间数据的存储空间的方法及装置
WO2016169145A1 (zh) * 2015-04-21 2016-10-27 中兴通讯股份有限公司 一种云终端日志处理方法、装置及系统
CN106777371A (zh) * 2017-01-23 2017-05-31 北京齐尔布莱特科技有限公司 日志收集系统和方法
CN107220304A (zh) * 2017-05-10 2017-09-29 杭州铭师堂教育科技发展有限公司 基于salt的海量mongodb慢日志管理系统
CN107330063A (zh) * 2017-06-29 2017-11-07 环球智达科技(北京)有限公司 用于日志输出的方法
CN107483649A (zh) * 2017-10-12 2017-12-15 福建富士通信息软件有限公司 一种基于Kaa服务的跨平台日志采集方法
CN107508718A (zh) * 2016-06-14 2017-12-22 阿里巴巴集团控股有限公司 日志采集系统、日志采集单元以及日志采集方法
CN107622068A (zh) * 2016-07-14 2018-01-23 深圳联友科技有限公司 一种基于json格式的日志管理方法及装置
CN107908802A (zh) * 2017-12-26 2018-04-13 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108038231A (zh) * 2017-12-26 2018-05-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108108284A (zh) * 2017-12-26 2018-06-01 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108153647A (zh) * 2017-12-26 2018-06-12 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108170576A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108170585A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108197013A (zh) * 2017-12-26 2018-06-22 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108897665A (zh) * 2018-06-29 2018-11-27 平安科技(深圳)有限公司 日志管理方法、装置、计算机设备及存储介质
CN109902070A (zh) * 2019-01-22 2019-06-18 华中师范大学 一种面向WiFi日志数据的解析存储搜索方法
CN110008104A (zh) * 2019-04-10 2019-07-12 苏州浪潮智能科技有限公司 一种日志信息的管理方法、系统、设备及存储介质
WO2020000760A1 (zh) * 2018-06-29 2020-01-02 平安科技(深圳)有限公司 服务器的管理方法、装置、计算机设备及存储介质
CN111752918A (zh) * 2020-05-15 2020-10-09 南京国电南自维美德自动化有限公司 一种历史数据交互系统及其配置方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1635520A (zh) * 2003-12-27 2005-07-06 鸿富锦精密工业(深圳)有限公司 数据处理系统及方法
CN101197694A (zh) * 2006-12-04 2008-06-11 中兴通讯股份有限公司 一种通讯系统日志集中统计、处理系统及其方法
CN101753984A (zh) * 2008-11-27 2010-06-23 北京中星微电子有限公司 视频监控系统日志的处理方法、系统和服务器
CN102394771A (zh) * 2011-10-26 2012-03-28 广州杰赛科技股份有限公司 插座式嵌入的日志收集系统及收集方法
CN102790686A (zh) * 2011-05-17 2012-11-21 浙江核新同花顺网络信息股份有限公司 日志数据采集方法、系统及服务器
CN102937931A (zh) * 2012-09-25 2013-02-20 北京奇虎科技有限公司 一种日志数据传输的方法和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1635520A (zh) * 2003-12-27 2005-07-06 鸿富锦精密工业(深圳)有限公司 数据处理系统及方法
CN101197694A (zh) * 2006-12-04 2008-06-11 中兴通讯股份有限公司 一种通讯系统日志集中统计、处理系统及其方法
CN101753984A (zh) * 2008-11-27 2010-06-23 北京中星微电子有限公司 视频监控系统日志的处理方法、系统和服务器
CN102790686A (zh) * 2011-05-17 2012-11-21 浙江核新同花顺网络信息股份有限公司 日志数据采集方法、系统及服务器
CN102394771A (zh) * 2011-10-26 2012-03-28 广州杰赛科技股份有限公司 插座式嵌入的日志收集系统及收集方法
CN102937931A (zh) * 2012-09-25 2013-02-20 北京奇虎科技有限公司 一种日志数据传输的方法和系统

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104346248A (zh) * 2014-10-17 2015-02-11 浪潮电子信息产业股份有限公司 一种基于history命令的审计功能实现方法
CN104468725A (zh) * 2014-11-06 2015-03-25 浪潮(北京)电子信息产业有限公司 一种实现高可用集群软件维护的方法、装置及系统
CN104468725B (zh) * 2014-11-06 2017-12-01 浪潮(北京)电子信息产业有限公司 一种实现高可用集群软件维护的方法、装置及系统
CN104394023A (zh) * 2014-12-09 2015-03-04 上海斐讯数据通信技术有限公司 用于网络接入终端的故障收集方法及系统
CN104394023B (zh) * 2014-12-09 2018-05-01 上海斐讯数据通信技术有限公司 用于网络接入终端的故障收集方法及系统
WO2016169145A1 (zh) * 2015-04-21 2016-10-27 中兴通讯股份有限公司 一种云终端日志处理方法、装置及系统
CN104836686A (zh) * 2015-05-11 2015-08-12 北京明略软件系统有限公司 一种生成服务器的配置文件的方法及装置
CN104836686B (zh) * 2015-05-11 2018-09-07 北京明略软件系统有限公司 一种生成服务器的配置文件的方法及装置
CN105404472A (zh) * 2015-11-23 2016-03-16 天脉聚源(北京)传媒科技有限公司 一种压缩日志时间数据的存储空间的方法及装置
CN107508718A (zh) * 2016-06-14 2017-12-22 阿里巴巴集团控股有限公司 日志采集系统、日志采集单元以及日志采集方法
CN107508718B (zh) * 2016-06-14 2021-03-02 阿里巴巴集团控股有限公司 日志采集系统、日志采集单元以及日志采集方法
CN107622068A (zh) * 2016-07-14 2018-01-23 深圳联友科技有限公司 一种基于json格式的日志管理方法及装置
CN106777371B (zh) * 2017-01-23 2019-12-06 北京齐尔布莱特科技有限公司 日志收集系统和方法
CN106777371A (zh) * 2017-01-23 2017-05-31 北京齐尔布莱特科技有限公司 日志收集系统和方法
CN107220304B (zh) * 2017-05-10 2018-05-01 杭州铭师堂教育科技发展有限公司 基于salt的海量mongodb慢日志管理系统
CN107220304A (zh) * 2017-05-10 2017-09-29 杭州铭师堂教育科技发展有限公司 基于salt的海量mongodb慢日志管理系统
CN107330063A (zh) * 2017-06-29 2017-11-07 环球智达科技(北京)有限公司 用于日志输出的方法
CN107483649A (zh) * 2017-10-12 2017-12-15 福建富士通信息软件有限公司 一种基于Kaa服务的跨平台日志采集方法
CN108153647A (zh) * 2017-12-26 2018-06-12 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN107908802A (zh) * 2017-12-26 2018-04-13 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108170585A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108197013A (zh) * 2017-12-26 2018-06-22 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108108284A (zh) * 2017-12-26 2018-06-01 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108197013B (zh) * 2017-12-26 2022-03-08 Oppo广东移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108038231B (zh) * 2017-12-26 2022-01-11 Oppo广东移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108170576B (zh) * 2017-12-26 2021-12-07 Oppo广东移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108038231A (zh) * 2017-12-26 2018-05-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108170576A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、终端设备及存储介质
CN108153647B (zh) * 2017-12-26 2021-08-06 Oppo广东移动通信有限公司 日志处理方法、装置、终端设备及存储介质
WO2020000745A1 (zh) * 2018-06-29 2020-01-02 平安科技(深圳)有限公司 日志管理方法、装置、计算机设备及存储介质
CN108897665B (zh) * 2018-06-29 2021-06-15 平安科技(深圳)有限公司 日志管理方法、装置、计算机设备及存储介质
WO2020000760A1 (zh) * 2018-06-29 2020-01-02 平安科技(深圳)有限公司 服务器的管理方法、装置、计算机设备及存储介质
CN108897665A (zh) * 2018-06-29 2018-11-27 平安科技(深圳)有限公司 日志管理方法、装置、计算机设备及存储介质
CN109902070A (zh) * 2019-01-22 2019-06-18 华中师范大学 一种面向WiFi日志数据的解析存储搜索方法
CN109902070B (zh) * 2019-01-22 2023-12-12 华中师范大学 一种面向WiFi日志数据的解析存储搜索方法
CN110008104A (zh) * 2019-04-10 2019-07-12 苏州浪潮智能科技有限公司 一种日志信息的管理方法、系统、设备及存储介质
CN111752918A (zh) * 2020-05-15 2020-10-09 南京国电南自维美德自动化有限公司 一种历史数据交互系统及其配置方法
CN111752918B (zh) * 2020-05-15 2023-12-22 南京国电南自维美德自动化有限公司 一种历史数据交互系统及其配置方法

Similar Documents

Publication Publication Date Title
CN103944973A (zh) 一种日志采集方法及装置
CN108509326B (zh) 一种基于nginx日志的服务状态统计方法及系统
US8676746B2 (en) Database management system risk assessment
CN103530199B (zh) 一种修复软件运行错误的方法、装置及系统
CN102123042B (zh) 系统配置智能管理系统及其管理方法
US8498995B1 (en) Optimizing data retrieval during event data query processing
CN106980699B (zh) 一种数据处理平台和系统
CN108268565B (zh) 基于数据仓库处理用户浏览行为数据的方法及系统
CN107273267A (zh) 基于elastic组件的日志分析方法
CN102750326A (zh) 一种基于精简策略的集群系统的日志管理优化方法
CN103793479A (zh) 日志管理方法及系统
US20140317137A1 (en) Log management computer and log management method
CN102567185B (zh) 一种应用服务器的监控方法
CN105490854A (zh) 实时日志收集方法、系统和应用服务器集群
CN106294222A (zh) 一种确定pcie设备与插槽对应关系的方法及装置
CN103778133A (zh) 一种数据库对象的变更方法及装置
CN109976959A (zh) 一种用于服务器故障检测的便携式设备及方法
CN105589782A (zh) 基于浏览器的用户行为采集方法
CN111046011A (zh) 日志收集方法、系统、节点、电子设备及可读存储介质
CN104348658A (zh) 故障报告生成方法及相关的系统
CN102915269A (zh) 一种b/s软件系统的通用日志分析方法
CN102597966A (zh) 运行管理装置以及运行管理方法
KR20200119176A (ko) 웹 트래픽 데이터를 처리 및 관리하는 시스템, 장치 및 방법
CN105260452A (zh) 离线日志收集查询和分析系统及方法
CN112579007A (zh) 一种存储全链路的获取方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB03 Change of inventor or designer information

Inventor after: Ma Longqing

Inventor after: Cai Shuyang

Inventor after: Wang Peng

Inventor after: Hu Daosheng

Inventor after: Xia Shudong

Inventor before: Ma Longqing

Inventor before: Cai Shuyang

Inventor before: Wang Peng

Inventor before: Hu Daosheng

Inventor before: Xia Shuguang

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: MA LONGQING CAI SHUYANG WANG PENG HU DAOSHENG XIA SHUGUANG TO: MA LONGQING CAI SHUYANG WANG PENG HU DAOSHENG XIA SHUDONG

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140723