CN109344034A - 一种用于管理日志的方法和装置 - Google Patents

Abstract

本申请公开了一种用于管理日志的方法和装置。该方法包括：接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到日志服务器的；当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据。通过采用上述方式，由于组件的日志数据是采用日志采集进程采集的，并且是根据获取日志数据的请求来输出日志数据的，因此减少了人工复制日志数据所耗费的时间，并且避免了人工复制日志数据时容易出现的操作错误，提高了管理组件的日志数据的效率。

Description

一种用于管理日志的方法和装置

技术领域

本发明涉及软件系统运营维护领域，尤指一种用于管理日志的方法和装置。

背景技术

一些复杂的软件系统通常有很多组件构成，每个组件都会生成各种各样的日志信息，当软件系统出现问题时，查看记录的日志信息，可快速定位问题，让软件系统恢复正常。目前，通常是采用人工到存放有日志的服务器上拷贝出现问题的时间段相关的日志的方式来收集日志。对于含有多个组件的复杂系统而言，完全依赖人工复制的方式过于耗时，而且不可避免地会出现错误，导致收集信息不完全以及不正确，管理日志的效率低下，进而影响到采用日志对问题进行分析及定位。

发明内容

为了解决上述技术问题，本申请提供了一种用于管理日志的方法和装置，其能够采用日志采集进程根据用户的需求来采集日志数据，提高了管理日志的效率。

为了达到申请的目的，本发明实施例提供了一种用于管理日志的方法，该方法应用于日志服务器，并且该方法包括下列步骤：

接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到日志服务器的；

当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据。

进一步地，在一个可选的实施例中，在接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中的步骤之后，并且在当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据的步骤之前，该方法还包括：

对日志数据进行压缩并且备份到备份文件中；

当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据的步骤包括：

当从客户端接收到获取日志数据的请求的时候，如果获取日志数据的请求所指示的日志数据已备份到备份文件，则从备份文件解压缩日志数据并且恢复到数据库中。

进一步地，在一个可选的实施例中，日志采集进程是采用预设的日志模板与预设的采集频率来采集日志数据的。

进一步地，在一个可选的实施例中，在接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中的步骤之后，并且在当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据的步骤之前，该方法还包括：

根据接收到的日志数据，输出统一管理页面数据；其中，统一管理页面数据用于显示日志服务器接收到的日志数据。

进一步地，在一个可选的实施例中，统一管理页面数据还用于显示日志采集进程的日志模板以及采集频率；

该方法还包括：

根据从客户端接收到的更改日志采集进程的日志模板的请求来更改日志采集进程的日志模板；或者

根据从客户端接收到的更改日志采集进程的采集频率的请求来更改日志采集进程的采集频率。

另一方面，为了实现本申请的目的，本发明实施例提供了一种用于管理日志的装置，该装置包括接收并存储模块以及输出模块；其中，

接收并存储模块用于：接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到日志服务器的；

输出模块用于：当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据。

进一步地，在一个可选的实施例中，接收并存储模块还用于：在接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中之后，并且在当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据之前，

对日志数据进行压缩并且备份到备份文件中；

输出模块用于还用于：

当从客户端接收到获取日志数据的请求的时候，如果获取日志数据的请求所指示的日志数据已备份到备份文件，则从备份文件解压缩日志数据并且恢复到数据库中。

进一步地，在一个可选的实施例中，日志采集进程是采用预设的日志模板与预设的采集频率来采集日志数据的。

进一步地，在一个可选的实施例中，该装置还包括页面数据输出模块；

页面数据输出模块用于：在接收并存储模块接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中之后，并且在所输出模块从客户端接收到获取日志数据的请求时输出获取日志数据的请求所指示的日志数据之前，根据接收到的日志数据，输出统一管理页面数据；其中，统一管理页面数据用于显示日志服务器接收到的日志数据。

进一步地，在一个可选的实施例中，统一管理页面数据还用于显示日志采集进程的日志模板以及采集频率；

页面数据输出模块还用于：

根据从客户端接收到的更改日志采集进程的日志模板的请求来更改日志采集进程的日志模板；或者

根据从客户端接收到的更改日志采集进程的采集频率的请求来更改日志采集进程的采集频率。

本发明实施例的有益效果在于，通过采用上述方式，由于组件的日志数据是采用日志采集进程采集的，并且是根据获取日志数据的请求来输出日志数据的，因此减少了人工复制日志数据所耗费的时间，并且避免了人工复制日志数据时容易出现的操作错误，提高了管理组件的日志数据的效率。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明技术方案的进一步理解，并且构成说明书的一部分，与本申请的实施例一起用于解释本发明的技术方案，并不构成对本发明技术方案的限制。

图1为本发明实施例提供的用于管理日志的方法的流程图；

图2为本发明实施例提供的用于管理日志的装置的框图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚明白，下文中将结合附图对本发明的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。

在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

一方面，本发明实施例提供了一种用于管理日志的方法，该方法可以应用于日志服务器，如图1所示，该方法包括步骤S101-步骤S103。

步骤S101，接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中。

一些复杂的软件系统通常有很多组件构成，每个组件通常处于不同的目录中，例如可以处于服务器集群中的不同服务器中，或者处于同一台服务器中的不同的位置，因此，本发明提供的方法是首先监听处于不同目录的组件，以接收来自这些处于不同目录的组件的日志数据；与日志服务器监听处于不同目录的组件对应的是，日志数据是由每个组件相应的日志采集进程采集并且发送到日志服务器的。在日志采集进程中，可以设置采集日志数据的方式。例如，在一个可选的实施例中，日志采集进程是采用预设的日志模板与预设的采集频率来采集日志数据的。在采用日志服务器监听组件之前，会预先设置日志采集进程的采集频率以及日志模板，其中的采集频率可以决定采集日志数据的频率，日志模板可以决定所采集的日志数据所包括的数据内容。由于组件的日志数据是采用日志采集进程采集的，因此减少了人工复制日志数据所耗费的时间，并且避免了人工复制日志数据时容易出现的操作错误，提高了管理组件的日志数据的效率。

步骤S103，当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据。

在步骤S103中，本发明提供的方法是在接收到获取日志数据的请求的时候，根据获取日志数据的请求中所指示的、用户需要获取的日志数据，从日志服务器中提取在日志服务器中存储的日志数据。这种根据获取日志数据的请求来获取日志数据的方式避免了人工从日志服务器中复制日志数据时容易发生的操作错误，并且减少了人工复制日志数据所耗费的时间，因此提高了管理组件的日志数据的效率。

本发明实施例的有益效果在于，通过采用上述方式，由于组件的日志数据是采用日志采集进程采集的，并且是根据获取日志数据的请求来输出日志数据的，因此减少了人工复制日志数据所耗费的时间，并且避免了人工复制日志数据时容易出现的操作错误，提高了管理组件的日志数据的效率。

进一步地，在一个可选的实施例中，在步骤S101之后，并且在步骤S103之前，该方法还包括：

对日志数据进行压缩并且备份到备份文件中。

其中，可以根据日志服务器接收和存储日志数据之后所持续的时间，确定是否对日志数据进行压缩和备份；如果在接收和存储日志数据之后的计时达到预设时间，则可以认为使用日志数据的概率可能比较小，因此可以压缩日志数据并且将日志数据备份到日志数据，这样可以节省日志服务器的存储空间，并且使得日志数据不容易丢失。

在这种情况下，步骤S103包括：

当从客户端接收到获取日志数据的请求的时候，如果获取日志数据的请求所指示的日志数据已备份到备份文件，则从备份文件解压缩日志数据并且恢复到数据库中。

在需要获取日志数据的情况下，如果已经有日志数据已经压缩并且备份，则需要判断需要获取的日志数据是否是已进行压缩和备份的，如果不是的话(也就是说需要获取的日志数据并未压缩和备份，而是存储在日志服务器中的未经压缩的日志数据)，则从日志服务器中输出未经压缩的日志数据；如果需要获取的日志数据已进行压缩和备份，则从备份文件解压缩日志数据并且恢复到日志服务器的数据库中，然后从日志服务器的数据库中输出所需要的日志数据。

进一步地，在一个可选的实施例中，日志采集进程是采用预设的日志模板与预设的采集频率来采集日志数据的。

在这个可选的实施例中，

进一步地，在一个可选的实施例中，在步骤S101之后，并且在步骤S103之前，该方法还包括：

根据接收到的日志数据，输出统一管理页面数据；其中，统一管理页面数据用于显示日志服务器接收到的日志数据。

在本发明的这个可选的实施例中，提供了输出统一管理页面数据的方法，在统一管理页面中，采用统一的模板、类目来显示处于不同目录的多个组件的日志数据，统一管理页面中所显示的模板可以与日志采集进程的日志模板相同。

进一步地，在一个可选的实施例中，统一管理页面数据还用于显示日志采集进程的日志模板以及采集频率；

由于统一管理页面数据还用于显示日志采集进程的日志模板以及采集频率，因此当统一管理页面显示日志采集进程的日志模板以及采集频率时，该方法还包括：接收由客户端输入的更改日志采集进程的日志模板的请求或者更改日志采集进程的采集频率；基于上述步骤，该方法还包括下列两种情况：

一、当从用户使用的客户端接收到更改日志采集进程的日志模板的请求的时候，根据更改日志采集进程的日志模板的请求来更改日志采集进程的日志模板；

二、当从用户使用的客户端接收到更改日志采集进程的采集频率的请求是，根据从客户端接收到的更改日志采集进程的采集频率的请求来更改日志采集进程的采集频率。

本发明的这个可选的实施例提供了与客户端交互，以便更改日志模板或者采集频率的方式，使得用户可以根据需求来设置日志模板或者采集频率，在日志服务器处理日志数据与用户管理组件的日志数据的效率之间进行取舍和调整。

另一方面，本发明实施例提供了一种用于管理日志的装置，如图2所示，该装置包括接收并存储模块201以及输出模块203。

接收并存储模块201用于：接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到日志服务器的；

输出模块203用于：当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据。

本发明实施例的有益效果在于，通过采用上述方式，由于组件的日志数据是采用日志采集进程采集的，并且是根据获取日志数据的请求来输出日志数据的，因此减少了人工复制日志数据所耗费的时间，并且避免了人工复制日志数据时容易出现的操作错误，提高了管理组件的日志数据的效率。

进一步地，在一个可选的实施例中，接收并存储模块201还用于：在接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中之后，并且在当从客户端接收到获取日志数据的请求的时候，输出获取日志数据的请求所指示的日志数据之前，

对日志数据进行压缩并且备份到备份文件中；

输出模块203用于还用于：当从客户端接收到获取日志数据的请求的时候，如果获取日志数据的请求所指示的日志数据已备份到备份文件，则从备份文件解压缩日志数据并且恢复到数据库中。

进一步地，在一个可选的实施例中，日志采集进程是采用预设的日志模板与预设的采集频率来采集日志数据的。

进一步地，在一个可选的实施例中，该装置还包括页面数据输出模块；

页面数据输出模块用于：在接收并存储模块201接收来自不同目录的组件的日志数据，并且将日志数据存储到日志服务器的数据库中之后，并且在所输出模块203从客户端接收到获取日志数据的请求时输出获取日志数据的请求所指示的日志数据之前，根据接收到的日志数据，输出统一管理页面数据；其中，统一管理页面数据用于显示日志服务器接收到的日志数据。

进一步地，在一个可选的实施例中，统一管理页面数据还用于显示日志采集进程的日志模板以及采集频率；

页面数据输出模块还用于：根据从客户端接收到的更改日志采集进程的日志模板的请求来更改日志采集进程的日志模板；或者

根据从客户端接收到的更改日志采集进程的采集频率的请求来更改日志采集进程的采集频率。

虽然本发明所揭露的实施方式如上，但上述的内容仅为便于理解本发明而采用的实施方式，并非用以限定本发明。任何本发明所属领域内的技术人员，在不脱离本发明所揭露的精神和范围的前提下，可以在实施的形式及细节上进行任何的修改与变化，但本发明的专利保护范围，仍须以所附的权利要求书所界定的范围为准。

Claims (10)

1.一种用于管理日志的方法，应用于日志服务器，其特征在于，包括：

接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到所述日志服务器的；

当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据。

2.根据权利要求1所述的方法，其特征在于，在所述接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中的步骤之后，并且在所述当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据的步骤之前，所述方法还包括：

对所述日志数据进行压缩并且备份到备份文件中；

所述当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据的步骤包括：

当从客户端接收到获取日志数据的请求的时候，如果所述获取日志数据的请求所指示的日志数据已备份到备份文件，则从所述备份文件解压缩所述日志数据并且恢复到数据库中。

3.根据权利要求1所述的方法，其中，所述日志采集进程是采用预设的日志模板与预设的采集频率来采集所述日志数据的。

4.根据权利要求1所述的方法，其特征在于，在所述接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中的步骤之后，并且在所述当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据的步骤之前，所述方法还包括：

根据接收到的日志数据，输出统一管理页面数据；其中，所述统一管理页面数据用于显示所述日志服务器接收到的日志数据。

5.根据权利要求4所述的方法，其中，所述统一管理页面数据还用于显示所述日志采集进程的日志模板以及采集频率；

所述方法还包括：

根据从所述客户端接收到的更改所述日志采集进程的日志模板的请求来更改所述日志采集进程的日志模板；或者

根据从所述客户端接收到的更改所述日志采集进程的采集频率的请求来更改所述日志采集进程的采集频率。

6.一种用于管理日志的装置，其特征在于，包括接收并存储模块以及输出模块；其中，

所述接收并存储模块用于：接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中；其中，每个组件的日志数据是由相应的日志采集进程采集并且发送到所述日志服务器的；

所述输出模块用于：当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据。

7.根据权利要求6所述的装置，其特征在于，所述接收并存储模块还用于：在接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中之后，并且在当从客户端接收到获取日志数据的请求的时候，输出所述获取日志数据的请求所指示的日志数据之前，对所述日志数据进行压缩并且备份到备份文件中；

所述输出模块用于还用于：当从客户端接收到获取日志数据的请求的时候，如果所述获取日志数据的请求所指示的日志数据已备份到备份文件，则从所述备份文件解压缩所述日志数据并且恢复到数据库中。

8.根据权利要求6所述的装置，其中，所述日志采集进程是采用预设的日志模板与预设的采集频率来采集所述日志数据的。

9.根据权利要求6所述的装置，其特征在于，所述装置还包括页面数据输出模块；

所述页面数据输出模块用于：在所述接收并存储模块接收来自不同目录的组件的日志数据，并且将所述日志数据存储到所述日志服务器的数据库中之后，并且在所输出模块从客户端接收到获取日志数据的请求时输出所述获取日志数据的请求所指示的日志数据之前，根据接收到的日志数据，输出统一管理页面数据；其中，所述统一管理页面数据用于显示所述日志服务器接收到的日志数据。

10.根据权利要求9所述的装置，其中，所述统一管理页面数据还用于显示所述日志采集进程的日志模板以及采集频率；

所述页面数据输出模块还用于：

根据从所述客户端接收到的更改所述日志采集进程的日志模板的请求来更改所述日志采集进程的日志模板；或者

根据从所述客户端接收到的更改所述日志采集进程的采集频率的请求来更改所述日志采集进程的采集频率。