CN106557281A - 一种服务器日志的自动处理方法和系统 - Google Patents

一种服务器日志的自动处理方法和系统 Download PDF

Info

Publication number
CN106557281A
CN106557281A CN201610969565.XA CN201610969565A CN106557281A CN 106557281 A CN106557281 A CN 106557281A CN 201610969565 A CN201610969565 A CN 201610969565A CN 106557281 A CN106557281 A CN 106557281A
Authority
CN
China
Prior art keywords
file
server
backup
journal file
duration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610969565.XA
Other languages
English (en)
Inventor
张磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Douyu Network Technology Co Ltd
Original Assignee
Wuhan Douyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Douyu Network Technology Co Ltd filed Critical Wuhan Douyu Network Technology Co Ltd
Priority to CN201610969565.XA priority Critical patent/CN106557281A/zh
Publication of CN106557281A publication Critical patent/CN106557281A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815—Journaling file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/162—Delete operations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065—Replication mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及网络领域，公开了一种服务器日志的自动处理方法，包括创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔，然后根据日志配置文件定期清理服务器中超日志文件保存时长的日志文件，同时定期备份服务器中的日志文件。本发明还提供了一种服务器日志的自动处理系统。本发明能够有效提高服务器的磁盘利用效率。

Description

一种服务器日志的自动处理方法和系统
技术领域
本发明涉及网络领域，具体涉及一种服务器日志的自动处理方法和一种服务器日志的自动处理系统。
背景技术
安装于用户智能移动设备中的软件在运行的过程中，会实时产生用于记录软件运行状态的日志文件，同时日志文件会通过网络上传到服务器中，服务器对日志文件进行存储，以供软件开发人员查阅，从而掌握软件的运行状态。当软件的装机量较大时，产生的日志文件也会随之增多，导致服务器的磁盘空间被日志文件大量占用，使的服务器无法存储新的日志文件，若全部清空服务器的磁盘空间，又会导致软件开发人员无法查找到所需的日志文件，对软件工作开发人员的工作造成不便。
发明内容
针对现有技术中存在的缺陷，本发明的目的在于提供一种服务器日志的自动处理方法和一种服务器日志的自动处理系统，能够有效提高服务器的磁盘利用效率。
为达到以上目的，本发明采取的技术方案是，包括：创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔，然后根据日志配置文件定期清理服务器中超日志文件保存时长的日志文件，同时定期备份服务器中的日志文件。
在上述技术方案的基础上，该服务器日志的自动处理方法具体包括：
步骤S1：创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔；
步骤S2：根据日志配置文件中的扫描间隔时间对服务器中的所有日志文件进行扫描，获取各个日志文件在服务器中的创建时间和当前系统时间；
步骤S3：当前系统时间与各个日志文件的创建时间相减，得到各个日志文件在服务器中的存在时长，并将各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除；
步骤S4：根据备份间隔时间，定期将服务器中的日志文件备份到备份服务器中。
在上述技术方案的基础上，步骤S1中创建的日志配置文件存储在XML格式的文件中。
在上述技术方案的基础上，步骤S2、步骤S3和步骤S4中，需对日志配置文件进行解析，以获取日志配置文件中扫描间隔时间、日志文件保存时长和备份时间间隔所对应的具体时间值。
在上述技术方案的基础上，步骤S4中，通过HTTP协议将日志文件上传至备份服务器中。
在上述技术方案的基础上，所述备份服务器还包括一备份配置文件，所述备份配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长。
在上述技术方案的基础上，对于备份服务器中的日志文件，处理步骤为：
步骤5.1：依据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，并获取各个日志文件在备份服务器中的创建时间和当前系统时间；
步骤5.2：将当前系统时间和各个日志文件在备份服务器中的创建时间相减，得到各个日志文件在备份服务器中的存在时长，并将各个日志文件的存在时长与备份日志文件保存时长相比较，若当前日志文件的存在时长大于备份日志文件保存时长，则将当前日志文件删除。
本发明还提供一种服务器日志的自动处理系统，包括控制模块、判断模块和传输模块；
所述控制模块用于创建日志配置文件，所述控制模块还用于根据日志配置文件中的扫描间隔时间，获取各个日志文件在服务器中的存在时长；
所述判断模块用于将服务器中各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除；
所述传输模块用于根据备份间隔时间，将服务器中的日志文件备份到备份服务器中。
在上述技术方案的基础上，所述备份服务器中还包括备份控制模块和备份判断模块；
所述备份控制模块用于创建备份日志配置文件，所述备份日志配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长，所述控制模块还用于根据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，获取各个日志文件在备份服务器中的存在时长；
所述备份判断模块用于将备份服务器中各个日志文件的存在时长与备份日志文件保存时长相比较，若日志文件在备份服务器中的存在时长大于备份日志文件保存时长，则将日志文件删除。
在上述技术方案的基础上，所述传输模块通过HTTP协议将日志文件备份至备份服务器中。
与现有技术相比，本发明的一种服务器日志的自动处理方法的优点在于：通过创建日志配置文件，通过对服务器中日志文件进行扫描，得到日志文件在服务器中存在的时间，然后与设定的日志文件保存时长相比较，并删除超时的日志文件，从而提高服务器磁盘的利用率，同时还会定期将服务器中的日志文件备份到备份服务器中，以供软件开发人员不时之需，使的软件开发人员能够查找到更早前的软件运行状况信息。同时还会删除备份服务器中超过保存时长的日志文件，提高备份服务器磁盘空间的利用率。
本发明的一种服务器日志的自动处理系统的优点在于：通过该服务器日志的自动处理系统，能够删除服务器和备份服务器中超过保存时长的日志文件，提高服务器和备用服务器的磁盘空间的利用率，同时定期将服务器中的日志文件备份到备份服务器中，以供软件开发人员的不时之需，使的软件开发人员能够查找到更早前的软件运行状况信息。
附图说明
图1为本发明的一种服务器日志的自动处理方法的流程图。
具体实施方式
以下结合附图对本发明作进一步详细说明。
参见图1所示，本发明提供一种服务器日志的自动处理方法，该方法用于处理服务器中的多个日志文件，对日志文件进行存储管理，该方法为创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔，然后根据日志配置文件定期清理服务器中超日志文件保存时长的日志文件，同时定期备份服务器中的日志文件，具体的包括以下步骤：
步骤S1：创建一日志配置文件，日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔，扫描间隔时间为定期对服务器中所有日志文件进行扫描的间隔时间，日志文件保存时长为允许日志文件在服务器中保存的时长，扫描间隔时间为定期对服务器中的所有日志文件进行备份的间隔时长，其中扫描间隔时间、日志文件保存时长和备份时间间隔可以人为自由设定。创建的日志配置文件存储在XML格式的文件中，因此后续步骤S2、步骤S3和步骤S4中，需要先对该XML格式的文件进行解析，获取日志配置文件中扫描间隔时间、日志文件保存时长和备份时间间隔所对应的具体时间值，方便使用。XML为可扩展标记语言，是标准通用标记语言的子集，是一种用于标记电子文件，使电子文件具有结构性的标记语言。日志配置文件通过dom4j工具进行解析，dom4j工具是一个开放源代码的软件，常用来读写XML格式的文件。对XML格式的日志配置文件的解析步骤为：
1)创建一reader对象，所述reader对象用于读取XML格式的文件，reader对象通过SAXReader创建，SAXReader是dom4j工具中的一个工具类；
2)调用reader对象中的read方法，所述read方法用于传递XML格式的文件的路径，并得到一Document对象，Document是dom4j工具中的一个文档描述类，用来表示读取到的XML格式文件的文档信息；
3)调用Document对象中的getRootElement方法获取日志配置文件中的第一个配制标签，在本实施例中，日志配置文件共有三个配制标签，分别代表扫描间隔时间、日志文件保存时长和备份时间间隔，然后获取该配制标签所对应的时间信息，具体的为通过getName函数和getValue函数获取该配制标签所对应的时间信息，例如：第一个配制标签表示扫描间隔时间，则通过getName函数和getValue函数获取了扫描间隔时间标签所表示的具体的时间信息。getRootElement方法为dom4j工具中的方法，用来获取标签信息，这里使用getRootElement方法获取日志配置文件中的第一个配制标签。getName函数和getValue函数均为dom4j工具中的函数，getName函数用来获取标签的键信息，getValue函数用来获取该键说对应的值的信息。
4)通过next方法获取日志配置文件中的下一个配制标签，然后通过getName函数和getValue函数获取该配制标签所对应的时间信息，依此类推，直至获取日志配置文件中的所有标签的时间信息。next方法为dom4j工具中的方法，用来获取下一标签信息，当next方法返回的值为空时，表示已经获取了日志配置文件中的所有配制标签。
步骤S2：根据日志配置文件中的扫描间隔时间，对服务器中的所有日志文件进行扫描，并获取各个日志文件在服务器中的日志文件创建时间和当前系统时间。
当前系统时间的获取方法是通过Java中的System.currentTimeMillis()函数进行获取，该System.currentTimeMillis()函数是Java的开发包JDK所包含的用以获取时间方法中的函数。Java为一常见的计算机编程语言。JDK是Java的软件开发工具包，主要用于移动设备和嵌入式设备上的Java应用程序。
在服务器中的日志文件的日志文件创建时间通过日志文件的文件名进行获取，本实施例中的服务器运行在linux环境下，linux为一常见的操作系统。因linux系统中的文件无法保存文件的创建时间，因此当日志文件进入服务器中，给日志文件进行命名时，会给日志文件的文件名称尾部加上文件的创建时间信息，例如：某一日志文件的文件名称为xxxx_20160906151215.log，则表示该日志文件是2016年09月06日15点12分15秒在服务器中创建的。
步骤S3：将当前系统时间与各个日志文件创建时间相减，得到各个日志文件在服务器中的存在时长，并将各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除，若日志文件的存在时长小于日志文件保存时长，则对日志文件不作处理。所有日志文件的存在时长均会和日志保存时长进行对比，若某一日志文件的存在时长大于日志文件保存时长，则将该日志文件删除。
步骤S4：根据日志配置文件中的备份间隔时间，定期将服务器中的日志文件压缩后备份到备份服务器中，即按照设定的时间间隔，定期对服务器中还存在的日志文件进行备份，服务器中的日志文件按照HTTP协议上传至备份服务器中，HTTP协议为超文本传输协议，是互联网上应用较为广泛的一种网络协议。对于日志文件的压缩，通过调用Java中的压缩脚本进行实现，Java中有一Runtime工具类，该Runtime工具提供了一系列的运行时的工具，通过Runtime工具便能执行压缩脚本。
通过对服务器中的日志文件进行删除和备份，能够降低服务器的磁盘占用，提高服务器磁盘的利用效率，同时将日志文件压缩后备份至备份服务器，能够降低日志文件在备份服务器中的磁盘占用，且日志文件备份在备份服务器中，以供软件开发人员查询，了解软件更早前的运行状况，提高日志文件的存储时间。
对于备份服务器，为防止备份服务器出现存储爆满的情况，因此备份服务器还包括一备份配置文件，备份配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长。对于备份服务器中的日志文件，依据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，并获取各个日志文件在备份服务器中的创建时间和当前系统时间，将当前系统时间和各个日志文件在备份服务器中的创建时间相减，得到各个日志文件在备份服务器中的存在时长，并将各个日志文件的存在时长与备份日志文件保存时长相比较，若当前日志文件的存在时长大于备份日志文件保存时长，则将当前日志文件删除，从而提高备份服务器磁盘的利用率。
本发明还提供一种基于上述方法的服务器日志的自动处理系统，该系统包括控制模块、判断模块和传输模块。
控制模块用于创建日志配置文件，日志配置文件包括扫描日志文件的扫描间隔时间、日志文件保存时长和备份时间间隔，控制模块还用于根据日志配置文件中的扫描间隔时间，对服务器中的所有日志文件进行扫描，同时获取各个日志文件在服务器中的日志文件创建时间和当前系统时间，并将当前系统时间与各个日志文件创建时间相减，得到各个日志文件在服务器中的存在时长。
判断模块用于将服务器中各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除。传输模块用于根据备份间隔时间，将服务器中的日志文件备份到备份服务器中。服务器中的日志文件通过HTTP协议上传至备份服务器中。
对于备份服务器，备份服务器中还包括备份控制模块和备份判断模块。备份控制模块用于创建备份日志配置文件，备份日志配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长，控制模块还用于根据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，同时获取备份服务器中各个日志文件在备份服务器中的创建时间和当前系统时间，并将当前系统时间与备份服务器中各个日志文件在备份服务器中的创建时间相减，得到各个日志文件在备份服务器中的存在时长。备份判断模块用于将备份服务器中各个日志文件的存在时长与备份日志文件保存时长相比较，若日志文件在备份服务器中的存在时长大于备份日志文件保存时长，则将日志文件删除。当前系统时间均通过Java中的System.currentTimeMillis()函数获取。传输模块通过HTTP协议将日志文件备份至备份服务器中。
通过该服务器日志的自动处理系统，能够删除服务器和备份服务器中超过保存时长的日志文件，提高服务器和备用服务器的磁盘空间的利用率，同时定期将服务器中的日志文件备份到备份服务器中，以供软件开发人员的不时之需，使的软件开发人员能够查找到更早前的软件运行状况信息。
本发明不局限于上述实施方式，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围之内。本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种服务器日志的自动处理方法，用于处理服务器中的多个日志文件，其特征在于，包括：创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔，然后根据日志配置文件定期清理服务器中超日志文件保存时长的日志文件，同时定期备份服务器中的日志文件。
2.如权利要求1所述的一种服务器日志的自动处理方法，其特征在于：该服务器日志的自动处理方法具体包括：
步骤S1：创建一日志配置文件，所述日志配置文件包括扫描间隔时间、日志文件保存时长和备份时间间隔；
步骤S2：根据日志配置文件中的扫描间隔时间对服务器中的所有日志文件进行扫描，获取各个日志文件在服务器中的创建时间和当前系统时间；
步骤S3：当前系统时间与各个日志文件的创建时间相减，得到各个日志文件在服务器中的存在时长，并将各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除；
步骤S4：根据备份间隔时间，定期将服务器中的日志文件备份到备份服务器中。
3.如权利要求2所述的一种服务器日志的自动处理方法，其特征在于：步骤S1中创建的日志配置文件存储在XML格式的文件中。
4.如权利要求3所述的一种服务器日志的自动处理方法，其特征在于：步骤S2、步骤S3和步骤S4中，需对日志配置文件进行解析，以获取日志配置文件中扫描间隔时间、日志文件保存时长和备份时间间隔所对应的具体时间值。
5.如权利要求2所述的一种服务器日志的自动处理方法，其特征在于：步骤S4中，通过HTTP协议将日志文件上传至备份服务器中。
6.如权利要求2所述的一种服务器日志的自动处理方法，其特征在于：所述备份服务器还包括一备份配置文件，所述备份配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长。
7.如权利要求6所述的一种服务器日志的自动处理方法，其特征在于：对于备份服务器中的日志文件，处理步骤为：
步骤5.1：依据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，并获取各个日志文件在备份服务器中的创建时间和当前系统时间；
步骤5.2：将当前系统时间和各个日志文件在备份服务器中的创建时间相减，得到各个日志文件在备份服务器中的存在时长，并将各个日志文件的存在时长与备份日志文件保存时长相比较，若当前日志文件的存在时长大于备份日志文件保存时长，则将当前日志文件删除。
8.一种基于权利要求1所述方法的服务器日志的自动处理系统，其特征在于：包括控制模块、判断模块和传输模块；
所述控制模块用于创建日志配置文件，所述控制模块还用于根据日志配置文件中的扫描间隔时间，获取各个日志文件在服务器中的存在时长；
所述判断模块用于将服务器中各个日志文件的存在时长与日志文件保存时长相比较，若日志文件的存在时长大于日志文件保存时长，则将日志文件删除；
所述传输模块用于根据备份间隔时间，将服务器中的日志文件备份到备份服务器中。
9.如权利要求8所述的一种服务器日志的自动处理系统，其特征在于：所述备份服务器中还包括备份控制模块和备份判断模块；
所述备份控制模块用于创建备份日志配置文件，所述备份日志配置文件包括备份日志文件扫描间隔时间和备份日志文件保存时长，所述控制模块还用于根据备份日志文件扫描间隔时间，对备份服务器中的所有日志文件进行扫描，获取各个日志文件在备份服务器中的存在时长；
所述备份判断模块用于将备份服务器中各个日志文件的存在时长与备份日志文件保存时长相比较，若日志文件在备份服务器中的存在时长大于备份日志文件保存时长，则将日志文件删除。
10.如权利要求8所述的一种服务器日志的自动处理系统，其特征在于：所述传输模块通过HTTP协议将日志文件备份至备份服务器中。
CN201610969565.XA 2016-10-28 2016-10-28 一种服务器日志的自动处理方法和系统 Pending CN106557281A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610969565.XA CN106557281A (zh) 2016-10-28 2016-10-28 一种服务器日志的自动处理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610969565.XA CN106557281A (zh) 2016-10-28 2016-10-28 一种服务器日志的自动处理方法和系统

Publications (1)

Publication Number Publication Date
CN106557281A true CN106557281A (zh) 2017-04-05

Family

ID=58443861

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610969565.XA Pending CN106557281A (zh) 2016-10-28 2016-10-28 一种服务器日志的自动处理方法和系统

Country Status (1)

Country Link
CN (1) CN106557281A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107817974A (zh) * 2017-11-27 2018-03-20 郑州云海信息技术有限公司 一种基于elk的数据自动清理方法
CN107832352A (zh) * 2017-10-23 2018-03-23 中国银行股份有限公司 日志自动处理方法、装置、存储介质及设备
CN108170584A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、存储介质及终端设备
CN109086098A (zh) * 2018-07-23 2018-12-25 郑州云海信息技术有限公司 一种日志文件清理方法及相关装置
CN109976945A (zh) * 2019-02-26 2019-07-05 深圳市买买提信息科技有限公司 一种日志备份的方法及装置
CN110096387A (zh) * 2019-04-04 2019-08-06 郑州汉江电子技术有限公司 基于xfs文件系统的计算机集群删除数据恢复方法及装置
CN110188075A (zh) * 2019-05-24 2019-08-30 无线生活(北京)信息技术有限公司 日志清理方法及装置
CN110502370A (zh) * 2019-08-21 2019-11-26 无锡华云数据技术服务有限公司 一种自动清理备份对象的方法
CN112148686A (zh) * 2020-09-25 2020-12-29 酒泉钢铁(集团)有限责任公司 一种基于软硬件一体机的数据监控处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102891778A (zh) * 2012-09-27 2013-01-23 迈普通信技术股份有限公司 自动化测试中避免环路的控制系统及方法
US20130110969A1 (en) * 2011-10-31 2013-05-02 Steven Wertheimer Cooperative storage management
CN103823852A (zh) * 2014-02-14 2014-05-28 北京国双科技有限公司 数据库服务器日志的处理方法和装置
US20140279920A1 (en) * 2013-03-15 2014-09-18 Amazon Technologies, Inc. Log record management
CN105824744A (zh) * 2016-03-21 2016-08-03 焦点科技股份有限公司 一种基于b2b平台的实时日志采集分析方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130110969A1 (en) * 2011-10-31 2013-05-02 Steven Wertheimer Cooperative storage management
CN102891778A (zh) * 2012-09-27 2013-01-23 迈普通信技术股份有限公司 自动化测试中避免环路的控制系统及方法
US20140279920A1 (en) * 2013-03-15 2014-09-18 Amazon Technologies, Inc. Log record management
CN103823852A (zh) * 2014-02-14 2014-05-28 北京国双科技有限公司 数据库服务器日志的处理方法和装置
CN105824744A (zh) * 2016-03-21 2016-08-03 焦点科技股份有限公司 一种基于b2b平台的实时日志采集分析方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
温立辉: "《JavaEE编程技术》", 31 January 2016 *
蔡延光: "《数据库原理与应用》", 30 June 2016 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107832352A (zh) * 2017-10-23 2018-03-23 中国银行股份有限公司 日志自动处理方法、装置、存储介质及设备
CN107832352B (zh) * 2017-10-23 2022-01-04 中国银行股份有限公司 日志自动处理方法、装置、存储介质及设备
CN107817974A (zh) * 2017-11-27 2018-03-20 郑州云海信息技术有限公司 一种基于elk的数据自动清理方法
CN108170584A (zh) * 2017-12-26 2018-06-15 广东欧珀移动通信有限公司 日志处理方法、装置、存储介质及终端设备
CN109086098A (zh) * 2018-07-23 2018-12-25 郑州云海信息技术有限公司 一种日志文件清理方法及相关装置
CN109976945A (zh) * 2019-02-26 2019-07-05 深圳市买买提信息科技有限公司 一种日志备份的方法及装置
CN110096387A (zh) * 2019-04-04 2019-08-06 郑州汉江电子技术有限公司 基于xfs文件系统的计算机集群删除数据恢复方法及装置
CN110096387B (zh) * 2019-04-04 2023-04-25 郑州汉江电子技术有限公司 基于xfs文件系统的计算机集群删除数据恢复方法及装置
CN110188075A (zh) * 2019-05-24 2019-08-30 无线生活(北京)信息技术有限公司 日志清理方法及装置
CN110502370A (zh) * 2019-08-21 2019-11-26 无锡华云数据技术服务有限公司 一种自动清理备份对象的方法
CN110502370B (zh) * 2019-08-21 2022-03-15 华云数据控股集团有限公司 一种自动清理备份对象的方法
CN112148686A (zh) * 2020-09-25 2020-12-29 酒泉钢铁(集团)有限责任公司 一种基于软硬件一体机的数据监控处理方法

Similar Documents

Publication Publication Date Title
CN106557281A (zh) 一种服务器日志的自动处理方法和系统
CN107832196B (zh) 一种用于实时日志异常内容的监测装置及监测方法
JP3778652B2 (ja) ログデータ収集管理方法及びその装置
US20100223446A1 (en) Contextual tracing
US8006235B2 (en) Profiler management
CN101969386A (zh) 一种日志采集装置和日志采集方法
CN101621400A (zh) 一种历史性能数据采集方法及性能数据采集系统
US7069184B1 (en) Centralized monitoring and early warning operations console
US11461218B1 (en) Analyzing user API usage from recorded API macros for software product improvement
CN108074104A (zh) 一种客服处理方法及服务端和客户端
CN105718307B (zh) 进程管理方法及进程管理装置
CN116028321A (zh) 一种埋点数据采集方法、系统及存储介质
CN113660359B (zh) 域名解析记录的管理方法及装置、存储介质及电子设备
CN114490869A (zh) 一种数据同步方法、装置、数据源端、目标端及存储介质
CN117453280B (zh) 一种代码拓扑和业务拓扑生成方法、装置、设备及介质
CN108243238B (zh) 一种性能数据的采集方法及装置
CN105160011A (zh) 一种日志管理系统及方法
US20200134040A1 (en) Efficient data storage management system
CN112230897B (zh) 银行分行接口改造的监控方法及装置
CN106210012A (zh) 一种税务发票数据文件的自助传输系统及方法
US9183388B2 (en) Injustice detecting system, injustice detecting device and injustice detecting method
CN116010388A (zh) 数据校验方法、数据采集服务端及数据校验系统
CN106993026B (zh) 一种ftp服务器新增文件检测下载方法及装置
Salau et al. Design and implementation of a fault management system
CN110738580A (zh) 一种欠费停复电自动跟踪工单的配置方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170405

RJ01 Rejection of invention patent application after publication