CN109977089A - 日志管理方法、装置、计算机设备及计算机可读存储介质 - Google Patents
日志管理方法、装置、计算机设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN109977089A CN109977089A CN201910188303.3A CN201910188303A CN109977089A CN 109977089 A CN109977089 A CN 109977089A CN 201910188303 A CN201910188303 A CN 201910188303A CN 109977089 A CN109977089 A CN 109977089A
- Authority
- CN
- China
- Prior art keywords
- journal file
- stored
- daily record
- record data
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 86
- 238000000034 method Methods 0.000 claims abstract description 27
- 238000005520 cutting process Methods 0.000 claims abstract description 19
- 230000005540 biological transmission Effects 0.000 claims abstract description 17
- 238000004590 computer program Methods 0.000 claims description 23
- 230000002159 abnormal effect Effects 0.000 claims description 17
- 230000002123 temporal effect Effects 0.000 claims description 14
- 230000005856 abnormality Effects 0.000 claims description 7
- 238000004458 analytical method Methods 0.000 claims description 3
- 238000004364 calculation method Methods 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 abstract description 3
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 19
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明实施例公开了一种日志管理方法、装置、计算机设备及存储介质。其中，所述方法属于基架运维技术，所述方法包括：接收区块链节点服务器发送的日志文件；对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；将所述待存储日志文件存储到预设的数据库中作为日志数据；若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端，从而能够实现对各区块链节点服务器的日志数据进行集中管理，极大地提高了对日志数据的管理效率。通过对日志文件进行分割，能够极大地提高日志文件的可读性，提高对日志文件的读取效率。
Description
技术领域
本发明涉及数据处理技术领域，尤其涉及一种日志管理方法、装置、计算机设备及存储介质。
背景技术
当前在区块链网络中节点(节点可具体为一区块链节点服务器)众多，运行场景比较复杂，每个节点会生成大量的日志信息来记录节点的运行情况，所以对这些日志信息的收集与分析就成为了重中之重。
现有技术中，各节点单独管理自身产生的日志信息，倘若需要查找某一节点的日志信息则需要登录到该节点的服务器中查找。随着区块链技术的发展，区块链正变得越来越复杂，现有技术中的日志管理方式过于分散，导致管理效率低下。
发明内容
本发明实施例提供了一种日志管理方法、装置、计算机设备及存储介质，旨在解决现有技术中对区块链网络节点中的日志数据管理效率低下的问题。
第一方面，本发明实施例提供了一种日志管理方法，其包括：
接收区块链节点服务器发送的日志文件；
对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
将所述待存储日志文件存储到预设的数据库中作为日志数据；
若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
第二方面，本发明实施例还提供了一种日志管理装置，其包括：
接收单元，用于接收区块链节点服务器发送的日志文件；
切割单元，用于对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
第一存储单元，用于将所述待存储日志文件存储到预设的数据库中作为日志数据；
检索单元，用于若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
第三方面，本发明实施例还提供了一种计算机设备，其包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序当被处理器执行时可实现上述方法。
本发明实施例提供了一种日志管理方法、装置、计算机设备及存储介质。其中，所述方法包括：接收区块链节点服务器发送的日志文件；对所述日志文件进行切割处理以得到待存储日志文件；将所述待存储日志文件存储到预设的数据库中作为日志数据；若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。本发明实施例的技术方案，通过接收各区块链节点服务器发送的日志文件，对所述日志文件进行切割处理，以得到待存储日志文件，以及将所述待存储日志文件存储到数据库中，从而能够实现对各区块链节点服务器的日志数据进行集中管理，极大地提高了对日志数据的管理效率。通过对日志文件进行分割，能够极大地提高日志文件的可读性，提高对日志文件的读取效率。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种日志管理方法的应用场景示意图；
图2为本发明实施例提供的一种日志管理方法的流程示意图；
图3为本发明实施例提供的一种日志管理方法的子流程示意图；
图4为本发明实施例提供的一种日志管理方法的子流程示意图；
图5为本发明实施例提供的一种日志管理方法的子流程示意图；
图6为本发明另一实施例提供的一种日志管理方法的流程示意图；
图7为本发明实施例提供的一种日志管理装置的示意性框图；
图8为本发明实施例提供的一种日志管理装置的第一切割单元的示意性框图；
图9为本发明实施例提供的一种日志管理装置的第一存储单元的示意性框图；
图10为本发明实施例提供的一种日志管理装置的检索单元的示意性框图；
图11为本发明另一实施例提供的一种日志管理装置的示意性框图；以及
图12为本发明实施例提供的一种计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
请参阅图1和图2，图1为本发明实施例提供的日志管理方法的应用场景示意图。图2为本发明实施例提供的日志管理方法的示意性流程图。本发明实施例提出的日志管理方法应用于日志管理服务器1中，日志管理服务器1接收区块链节点服务器2发送的日志文件；对所述日志文件进行切割处理以得到待存储日志文件；将所述待存储日志文件存储到预设的数据库中作为日志数据；若接收到管理端3发送的检索请求，日志管理服务器1根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端3。
图2是本发明实施例提供的日志管理方法的流程示意图。如图所示，该方法包括以下步骤S1-S4。
S1、接收区块链节点服务器发送的日志文件。
具体实施中，本方案集中管理各区块链节点服务器的日志文件。由日志管理服务器集中收集管理各区块链节点服务器的日志文件。
具体地，在各区块链节点服务器安装Filebeat，并由Filebeat收集区块链节点服务器产生的日志文件，并将收集到的日志文件发送给日志管理服务器。
需要说明的是，Filebeat是一个日志文件托运工具，当在区块链节点服务器上安装了Filebeat后，Filebeat会监控区块链节点服务器上产生的日志文件，并且根据用户的配置将区块链节点服务器上产生的日志文件发送给日志管理服务器。
S2、对所述日志文件进行切割处理以得到待存储日志文件。
其中，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段
具体实施中，日志文件为一较长的字符串，其包含了时间、级别以及内容。由于字符串过长，导致日志文件的可读性较差。
在本方案中，为了提高日志文件的可读性，对所述日志文件进行切割处理，以得到待存储日志文件，待存储日志文件包括多个由日志文件切割得到的日志字段。每一日志字段包含日志文件的一个信息，例如时间、级别以及内容。在对日志文件进行切割后，可极大地提高日志文件的可读性，提高了读取效率。
在一实施例中，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，如图3所示，所述步骤S2可包括步骤S21-S22。
S21、获取所述日志文件的各所述分隔符的位置。
在本方案中，日志文件的各信息之间通过分隔符进行分隔，在本方案中，采用的分隔符为“/”。由此，日志的格式如下：时间信息/级别信息/内容信息。
或者在其他实施例中，分隔符还可以采用其他符号。本发明对此不作具体的限定。
S22、以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段。
其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
具体实施中，在确定了分隔符的位置后，以分隔符的位置为边界将日志文件进行切割。本方案中，日志信息的时间信息排在第一位，级别信息排在第二位，内容信息排在最后，因此日志文件切割后的第一个字段为时间字段，第二个字段为级别字段，最后一个字段为内容字段。
S3、将所述待存储日志文件存储到预设的数据库中作为日志数据。
具体实施中，将所述待存储日志文件存储到数据库中，并提供用于供用户检索的接口。由此可实现对各区块链节点服务器的集中管理，用户只需要登录到日志管理服务器中，就能获检索到各区块链节点服务器的日志数据，极大地提高了管理效率。
在一实施例中，根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间，如图4所示，所述步骤S3可包括步骤S31-S32。
S31、根据所述待存储日志文件的级别确定所述待存储日志文件所属的类别作为目标类别。
本实施例中，根据待存储日志文件的级别字段确定存储日志文件的的级别；根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间。具体地，待存储日志文件的级别包括debug(调试级别)、info(输出级别)以及Error(错误级别)等。每一级别相应对应一个日志文件的类别。
例如，debug对应的类别为调试日志、info对应的类别为输出日志以及Error对应的类别为错误日志。
具体实施中，根据待存储日志文件的级别字段确定所述存储日志文件所属的类别作为目标类别。
S32、将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
具体实施中，在确定了所述待存储日志文件所属的类别后，将所述待存储日志文件所属的类别作为目标类别，并相应将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
S4、若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
具体实施中，若接收到管理端发送的检索请求，解析获取检索请求包含的检索条件，根据检索条件在数据库中获取目标日志数据，并将获取到的目标日志数据发送给管理端。
在一实施例中，所述检索请求包含检索条件，所述检索条件包括级别条件、时间条件、内容关键字，如图5所示，所述步骤S4可包括步骤S41-S43。
S41、获取满足所述级别条件的日志数据作为第一候选日志数据。
具体实施中，从数据库中获取满足所述级别条件的日志数据作为第一候选日志数据。例如，在一实施例中，级别条件为“Error”，则获取所有级别为Error的日志数据作为第一候选日志数据。
S42、从所述第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据。
具体实施中，从第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据。例如，在一实施例中，时间条件为“2018年1月1日-2018年1月2日”，则从第一候选日志数据中获取时间为2018年1月1日-2018年1月2日的日志数据作为第二候选日志数据。
S43、从所述第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。
具体实施中，从第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。例如，在一实施例中，内容关键字为“timeout”，则从第二候选日志数据中获取包含“timeout的日志数据作为所述目标日志数据。
本发明实施例的技术方案，通过接收各区块链节点服务器发送的日志文件，对所述日志文件进行切割处理，以得到待存储日志文件，以及将所述待存储日志文件存储到数据库中，从而能够实现对各区块链节点服务器的日志数据进行集中管理，极大地提高了对日志数据的管理效率。通过对日志文件进行分割，能够极大地提高日志文件的可读性，提高对日志文件的读取效率。
图6是本发明另一实施例提供的一种日志管理方法的流程示意图。如图6所示，本实施例的日志管理方法包括步骤S61-S67。其中步骤S61-S64与上述实施例中的步骤S1-S4类似，在此不再赘述。下面详细说明本实施例中所增加的步骤S65-S67。
S65、判断所述日志文件的级别是否为预设的异常级别。
具体实施中，具体实施中，在接收到日志文件时，通过查看所述日志文件的级别信息获取所述日志文件的级别，并判断所述日志文件的级别是否属于预设的异常级别。
需要说明的是，异常级别可由本领域技术人员根据实际情况进行设定，例如，在一实施例中，设定异常级别为Error(错误级别)。由此，在日志文件的级别为Error时，则判定该日志文件的级别为预设的异常级别。
S66、若所述日志文件的级别为异常级别，向管理端发送异常告警信息。
具体实施中，如果判定得到日志文件的级别为异常级别，向管理端发送异常告警信息，已由运维人员及时获悉异常情况，并解决问题。管理端即运维人员使用的终端。
需要说明的是，告警信息可通过短信、邮件以及即时通讯信息等方式发出，本方案对此不作具体限定。
如果判定得到日志文件的级别不是异常级别，则无需向运维人员发出异常告警信息。
S67，统计各所述区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表。
具体实施中，每间隔一段时间，统计各区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表，并将分析的结果以图像形式进行展示。由此，管理人员能够及时获悉各区块链节点服务器的日志数据情况。
例如，可统计所有区块链节点服务器在某一时间段内总的日志数量。对于同一个区块链节点服务器，可以统计该区块链节点服务器下每个级别的日志数量。
具体实施中，可将统计得到的数据输入到Monitorview(监控视图)中，以由Monitorview来生成分析报表。Monitorview是一个制图软件。
图7是本发明实施例提供的一种日志管理装置的示意性框图。如图7所示，对应于以上日志管理方法，本发明还提供一种日志管理装置70。该日志管理装置70包括用于执行上述日志管理方法的单元，该装置可以被配置于服务器中。具体地，请参阅图7，该日志管理装置70包括接收单元71、第一切割单元72、第一存储单元73以及检索单元74。
接收单元71，用于接收区块链节点服务器发送的日志文件。
第一切割单元72，用于对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段。
第一存储单元73，用于将所述待存储日志文件存储到预设的数据库中作为日志数据。
检索单元74，用于若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
在一实施例中，如图8所示，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，所述第一切割单元72包括第一获取单元721以及第二切割单元722。
第一获取单元721，用于获取所述日志文件的各所述分隔符的位置。
第二切割单元722，用于以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段，其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
在一实施例中，如图9所示，根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间，所述第一存储单元73包括确定单元731以及第二存储单元732。
确定单元731，用于根据所述待存储日志文件的级别确定所述待存储日志文件所属的类别作为目标类别。
第二存储单元732，用于将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
在一实施例中，如图10所示，所述检索请求包含检索条件，所述检索条件包括级别条件、时间条件、内容关键字，所述检索单元74包括第二获取单元741、第三获取单元742以及第四获取单元743。
第二获取单元741，用于获取满足所述级别条件的日志数据作为第一候选日志数据。
第三获取单元742，用于从所述第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据。
第四获取单元743，用于从所述第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。
图11是本发明另一实施例提供的一种日志管理装置70的示意性框图。如图11所示，本实施例的日志管理装置70是上述实施例的基础上增加了判断单元75、发送单元76以及统计单元77。
判断单元75，用于判断所述日志文件的级别是否为预设的异常级别。
发送单元76，用于若所述日志文件的级别为异常级别，向管理端发送异常告警信息。
统计单元77，用于统计各所述区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表。
需要说明的是，所属领域的技术人员可以清楚地了解到，上述日志管理装置70和各单元的具体实现过程，可以参考前述方法实施例中的相应描述，为了描述的方便和简洁，在此不再赘述。
上述日志管理装置可以实现为一种计算机程序的形式，该计算机程序可以在如图12所示的计算机设备上运行。
请参阅图12，图12是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备500是服务器，其中，服务器可以是独立的服务器，也可以是多个服务器组成的服务器集群。
参阅图12，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行一种日志管理方法。
该处理器502用于提供计算和控制能力，以支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行一种日志管理方法。
该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解，图12中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现如下步骤：
接收区块链节点服务器发送的日志文件；
对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
将所述待存储日志文件存储到预设的数据库中作为日志数据；
若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
在一实施例中，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，处理器502在实现所述对所述日志文件进行切割处理以得到待存储日志文件步骤时，具体实现如下步骤：
获取所述日志文件的各所述分隔符的位置；
以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段，其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
在一实施例中，根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间，处理器502在实现所述将所述待存储日志文件存储到预设的数据库中作为日志数据步骤时，具体实现如下步骤：
根据所述待存储日志文件的级别确定所述待存储日志文件所属的类别作为目标类别；
将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
在一实施例中，所述检索请求包含检索条件，所述检索条件包括级别条件、时间条件、内容关键字，处理器502在实现所述根据所述检索请求在数据库中获取日志数据步骤时，具体实现如下步骤：
获取满足所述级别条件的日志数据作为第一候选日志数据；
从所述第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据；
从所述第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。
在一实施例中，处理器502在实现所述接收区块链节点服务器发送的日志文件步骤之前，还实现如下步骤：
判断所述日志文件的级别是否为预设的异常级别；
若所述日志文件的级别为异常级别，向管理端发送异常告警信息。
在一实施例中，处理器502还实现如下步骤：
统计各所述区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表。
应当理解，在本申请实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成。该计算机程序可存储于一存储介质中，该存储介质为计算机可读存储介质。该计算机程序被该计算机系统中的至少一个处理器执行，以实现上述方法的实施例的流程步骤。
因此，本发明还提供一种存储介质。该存储介质可以为计算机可读存储介质。该存储介质存储有计算机程序。该计算机程序被处理器执行时使处理器执行如下步骤：
接收区块链节点服务器发送的日志文件；
对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
将所述待存储日志文件存储到预设的数据库中作为日志数据；
若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
在一实施例中，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，所述处理器在执行所述计算机程序而实现所述对所述日志文件进行切割处理以得到待存储日志文件步骤时，具体实现如下步骤：
获取所述日志文件的各所述分隔符的位置；
以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段，其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
在一实施例中，根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间，所述处理器在执行所述计算机程序而实现所述将所述待存储日志文件存储到预设的数据库中作为日志数据步骤时，具体实现如下步骤：
根据所述待存储日志文件的级别确定所述待存储日志文件所属的类别作为目标类别；
将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
在一实施例中，所述检索请求包含检索条件，所述检索条件包括级别条件、时间条件、内容关键字，所述处理器在执行所述计算机程序而实现所述根据所述检索请求在数据库中获取日志数据步骤时，具体实现如下步骤：
获取满足所述级别条件的日志数据作为第一候选日志数据；
从所述第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据；
从所述第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。
在一实施例中，所述处理器在执行所述计算机程序而实现所述接收区块链节点服务器发送的日志文件步骤之前，还实现如下步骤：
判断所述日志文件的级别是否为预设的异常级别；
若所述日志文件的级别为异常级别，向管理端发送异常告警信息。
在一实施例中，所述处理器在执行所述计算机程序还实现如下步骤：
统计各所述区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表。
所述存储介质可以是U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、磁碟或者光盘等各种可以存储程序代码的计算机可读存储介质。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的。例如，各个单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本发明实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，终端，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详细描述的部分，可以参见其他实施例的相关描述。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，尚且本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种日志管理方法，其特征在于，包括：
接收区块链节点服务器发送的日志文件；
对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
将所述待存储日志文件存储到预设的数据库中作为日志数据；
若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
2.根据权利要求1所述的方法，其特征在于，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，所述对所述日志文件进行切割处理以得到待存储日志文件，包括：
获取所述日志文件的各所述分隔符的位置；
以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段，其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
3.根据权利要求1所述的方法，其特征在于，根据待存储日志文件的级别，所述数据库中设置有对应不同类别的待存储日志文件的存储空间，所述将所述待存储日志文件存储到预设的数据库中作为日志数据，包括：
根据所述待存储日志文件的级别确定所述待存储日志文件所属的类别作为目标类别；
将所述待存储日志文件存入所述数据库中所述目标类别所对应的存储空间。
4.根据权利要求1所述的方法，其特征在于，所述检索请求包含检索条件，所述检索条件包括级别条件、时间条件、内容关键字，所述根据所述检索请求在所述数据库中获取目标日志数据，包括：
获取满足所述级别条件的日志数据作为第一候选日志数据；
从所述第一候选日志数据中获取满足所述时间条件的日志数据作为第二候选日志数据；
从所述第二候选日志数据中获取包含所述内容关键字的日志数据作为所述目标日志数据。
5.根据权利要求1所述的方法，其特征在于，所述接收区块链节点服务器发送的日志文件之后，所述方法还包括：
判断所述日志文件的级别是否为预设的异常级别；
若所述日志文件的级别为异常级别，向管理端发送异常告警信息。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
统计各所述区块链节点服务器的日志文件的数量情况，并根据统计结果生成分析报表。
7.一种日志管理装置，其特征在于，包括：
接收单元，用于接收区块链节点服务器发送的日志文件；
切割单元，用于对所述日志文件进行切割处理以得到待存储日志文件，所述待存储日志文件包括多个由所述日志文件切割得到的日志字段；
第一存储单元，用于将所述待存储日志文件存储到预设的数据库中作为日志数据；
检索单元，用于若接收到管理端发送的检索请求，根据所述检索请求在所述数据库中获取目标日志数据，并将所述目标日志数据发送给管理端。
8.根据权利要求7所述的日志管理装置，其特征在于，所述日志文件包括时间信息、级别信息以及内容信息，所述日志文件的各信息之间通过预设的分隔符进行分隔，所述第一切割单元包括：
第一获取单元，用于获取所述日志文件的各所述分隔符的位置；
第二切割单元，用于以各所述分隔符的位置为边界对所述日志文件进行切割以将所述日志文件切割为时间字段、级别字段以及内容字段，其中，所述时间字段包含所述日志文件的时间信息，所述级别字段包含所述日志文件的级别信息，所述内容字段包含所述日志文件的内容信息。
9.一种计算机设备，其特征在于，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-6中任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序当被处理器执行时可实现如权利要求1-6中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910188303.3A CN109977089A (zh) | 2019-03-13 | 2019-03-13 | 日志管理方法、装置、计算机设备及计算机可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910188303.3A CN109977089A (zh) | 2019-03-13 | 2019-03-13 | 日志管理方法、装置、计算机设备及计算机可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109977089A true CN109977089A (zh) | 2019-07-05 |
Family
ID=67078705
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910188303.3A Pending CN109977089A (zh) | 2019-03-13 | 2019-03-13 | 日志管理方法、装置、计算机设备及计算机可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109977089A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111045885A (zh) * | 2019-11-11 | 2020-04-21 | 网联清算有限公司 | 数据库日志文件的处理方法、装置及计算机设备 |
| CN111046010A (zh) * | 2019-11-13 | 2020-04-21 | 泰康保险集团股份有限公司 | 日志储存方法、装置、系统、电子设备和计算机可读介质 |
| CN111143164A (zh) * | 2019-12-18 | 2020-05-12 | 银清科技有限公司 | 基于区块链的作业数据处理方法及装置 |
| CN111367867A (zh) * | 2020-03-05 | 2020-07-03 | 腾讯云计算（北京）有限责任公司 | 日志信息处理方法、装置、电子设备及存储介质 |
| CN111639059A (zh) * | 2020-05-28 | 2020-09-08 | 深圳壹账通智能科技有限公司 | 日志信息的存储及定位方法、电子设备及存储介质 |
| CN112000617A (zh) * | 2020-08-07 | 2020-11-27 | 北京浪潮数据技术有限公司 | 一种日志预处理方法、装置、设备及可读存储介质 |
| CN112199596A (zh) * | 2020-10-19 | 2021-01-08 | 杭州迪普科技股份有限公司 | 一种日志过滤处理的方法、装置、设备及介质 |
| CN113177023A (zh) * | 2021-04-19 | 2021-07-27 | 杭州海康威视系统技术有限公司 | 一种日志检索方法、装置及电子设备 |
| CN114353422A (zh) * | 2021-12-13 | 2022-04-15 | 珠海格力电器股份有限公司 | 分类装置、冰箱、分类方法和存储介质 |
| CN115348160A (zh) * | 2022-07-15 | 2022-11-15 | 深圳手回科技集团有限公司 | 回溯数据存储方法、装置及计算机设备 |
| CN115378803A (zh) * | 2022-04-13 | 2022-11-22 | 网易（杭州）网络有限公司 | 日志管理方法、装置、区块链节点和存储介质 |
| WO2023216042A1 (zh) * | 2022-05-08 | 2023-11-16 | Oppo广东移动通信有限公司 | 事件管理方法、装置、设备、存储介质及程序产品 |
Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050046373A (ko) * | 2003-11-14 | 2005-05-18 | 엘지엔시스(주) | 로그 파일 관리 방법 및 시스템 |
| CN103617287A (zh) * | 2013-12-12 | 2014-03-05 | 用友软件股份有限公司 | 一种分布式环境下的日志管理方法和装置 |
| US20140108087A1 (en) * | 2012-10-17 | 2014-04-17 | Hitachi Solutions, Ltd. | Log management system and log management method |
| US20140280197A1 (en) * | 2013-03-13 | 2014-09-18 | Genesys Telecommunications Laboratories, Inc. | Log file management tool |
| US20160098342A1 (en) * | 2014-10-05 | 2016-04-07 | YScope Inc. | Systems and processes for computer log analysis |
| CN106033322A (zh) * | 2015-03-17 | 2016-10-19 | 北京元心科技有限公司 | 一种数据存储方法及装置 |
| CN108052675A (zh) * | 2017-12-28 | 2018-05-18 | 惠州Tcl家电集团有限公司 | 日志管理方法、系统及计算机可读存储介质 |
| CN108365985A (zh) * | 2018-02-07 | 2018-08-03 | 深圳壹账通智能科技有限公司 | 一种集群管理方法、装置、终端设备及存储介质 |
| CN108509523A (zh) * | 2018-03-13 | 2018-09-07 | 深圳前海微众银行股份有限公司 | 区块链数据的结构化处理方法、设备及可读存储介质 |
| CN108833514A (zh) * | 2018-06-01 | 2018-11-16 | 众安信息技术服务有限公司 | 基于区块链的审计日志处理方法、装置和日志审计系统 |
| CN108846070A (zh) * | 2018-06-07 | 2018-11-20 | 北京京东尚科信息技术有限公司 | 分布式系统的日志处理方法、系统、电子设备和存储介质 |
| CN108932189A (zh) * | 2018-06-30 | 2018-12-04 | 平安科技（深圳）有限公司 | 保存服务器日志的方法和装置 |
| CN109190410A (zh) * | 2018-09-26 | 2019-01-11 | 华中科技大学 | 一种云存储环境下的基于区块链的日志行为审计方法 |
| CN109242453A (zh) * | 2018-08-07 | 2019-01-18 | 阿里巴巴集团控股有限公司 | 一种基于中心化结算与区块链存证的交易方法及系统 |
| CN109284267A (zh) * | 2018-09-26 | 2019-01-29 | 深圳壹账通智能科技有限公司 | 基于异常监控的日志管理方法及终端设备 |
| CN109309579A (zh) * | 2018-01-30 | 2019-02-05 | 深圳壹账通智能科技有限公司 | 日志记录处理方法、装置、计算机设备和存储介质 |
| CN109446208A (zh) * | 2018-09-03 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 一种数据存储方法、计算机可读存储介质及服务器 |
-
2019
- 2019-03-13 CN CN201910188303.3A patent/CN109977089A/zh active Pending
Patent Citations (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050046373A (ko) * | 2003-11-14 | 2005-05-18 | 엘지엔시스(주) | 로그 파일 관리 방법 및 시스템 |
| US20140108087A1 (en) * | 2012-10-17 | 2014-04-17 | Hitachi Solutions, Ltd. | Log management system and log management method |
| US20140280197A1 (en) * | 2013-03-13 | 2014-09-18 | Genesys Telecommunications Laboratories, Inc. | Log file management tool |
| CN103617287A (zh) * | 2013-12-12 | 2014-03-05 | 用友软件股份有限公司 | 一种分布式环境下的日志管理方法和装置 |
| US20160098342A1 (en) * | 2014-10-05 | 2016-04-07 | YScope Inc. | Systems and processes for computer log analysis |
| CN106033322A (zh) * | 2015-03-17 | 2016-10-19 | 北京元心科技有限公司 | 一种数据存储方法及装置 |
| CN108052675A (zh) * | 2017-12-28 | 2018-05-18 | 惠州Tcl家电集团有限公司 | 日志管理方法、系统及计算机可读存储介质 |
| CN109309579A (zh) * | 2018-01-30 | 2019-02-05 | 深圳壹账通智能科技有限公司 | 日志记录处理方法、装置、计算机设备和存储介质 |
| CN108365985A (zh) * | 2018-02-07 | 2018-08-03 | 深圳壹账通智能科技有限公司 | 一种集群管理方法、装置、终端设备及存储介质 |
| CN108509523A (zh) * | 2018-03-13 | 2018-09-07 | 深圳前海微众银行股份有限公司 | 区块链数据的结构化处理方法、设备及可读存储介质 |
| CN108833514A (zh) * | 2018-06-01 | 2018-11-16 | 众安信息技术服务有限公司 | 基于区块链的审计日志处理方法、装置和日志审计系统 |
| CN108846070A (zh) * | 2018-06-07 | 2018-11-20 | 北京京东尚科信息技术有限公司 | 分布式系统的日志处理方法、系统、电子设备和存储介质 |
| CN108932189A (zh) * | 2018-06-30 | 2018-12-04 | 平安科技（深圳）有限公司 | 保存服务器日志的方法和装置 |
| CN109242453A (zh) * | 2018-08-07 | 2019-01-18 | 阿里巴巴集团控股有限公司 | 一种基于中心化结算与区块链存证的交易方法及系统 |
| CN109446208A (zh) * | 2018-09-03 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 一种数据存储方法、计算机可读存储介质及服务器 |
| CN109190410A (zh) * | 2018-09-26 | 2019-01-11 | 华中科技大学 | 一种云存储环境下的基于区块链的日志行为审计方法 |
| CN109284267A (zh) * | 2018-09-26 | 2019-01-29 | 深圳壹账通智能科技有限公司 | 基于异常监控的日志管理方法及终端设备 |
Non-Patent Citations (2)
| Title |
|---|
| 王国林等: "基于日志挖掘的装备健康管理系统设计与实现", 《计算机测量与控制》 * |
| 陈庭平等: "日志服务器建设和应用", 《网络安全技术与应用》 * |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111045885A (zh) * | 2019-11-11 | 2020-04-21 | 网联清算有限公司 | 数据库日志文件的处理方法、装置及计算机设备 |
| CN111046010A (zh) * | 2019-11-13 | 2020-04-21 | 泰康保险集团股份有限公司 | 日志储存方法、装置、系统、电子设备和计算机可读介质 |
| CN111143164A (zh) * | 2019-12-18 | 2020-05-12 | 银清科技有限公司 | 基于区块链的作业数据处理方法及装置 |
| CN111367867B (zh) * | 2020-03-05 | 2023-03-21 | 腾讯云计算（北京）有限责任公司 | 日志信息处理方法、装置、电子设备及存储介质 |
| CN111367867A (zh) * | 2020-03-05 | 2020-07-03 | 腾讯云计算（北京）有限责任公司 | 日志信息处理方法、装置、电子设备及存储介质 |
| CN111639059A (zh) * | 2020-05-28 | 2020-09-08 | 深圳壹账通智能科技有限公司 | 日志信息的存储及定位方法、电子设备及存储介质 |
| CN112000617B (zh) * | 2020-08-07 | 2022-08-12 | 北京浪潮数据技术有限公司 | 一种日志预处理方法、装置、设备及可读存储介质 |
| CN112000617A (zh) * | 2020-08-07 | 2020-11-27 | 北京浪潮数据技术有限公司 | 一种日志预处理方法、装置、设备及可读存储介质 |
| CN112199596A (zh) * | 2020-10-19 | 2021-01-08 | 杭州迪普科技股份有限公司 | 一种日志过滤处理的方法、装置、设备及介质 |
| CN112199596B (zh) * | 2020-10-19 | 2023-08-25 | 杭州迪普科技股份有限公司 | 一种日志过滤处理的方法、装置、设备及介质 |
| CN113177023A (zh) * | 2021-04-19 | 2021-07-27 | 杭州海康威视系统技术有限公司 | 一种日志检索方法、装置及电子设备 |
| CN114353422A (zh) * | 2021-12-13 | 2022-04-15 | 珠海格力电器股份有限公司 | 分类装置、冰箱、分类方法和存储介质 |
| CN115378803A (zh) * | 2022-04-13 | 2022-11-22 | 网易（杭州）网络有限公司 | 日志管理方法、装置、区块链节点和存储介质 |
| CN115378803B (zh) * | 2022-04-13 | 2023-12-12 | 网易（杭州）网络有限公司 | 日志管理方法、装置、区块链节点和存储介质 |
| WO2023216042A1 (zh) * | 2022-05-08 | 2023-11-16 | Oppo广东移动通信有限公司 | 事件管理方法、装置、设备、存储介质及程序产品 |
| CN115348160A (zh) * | 2022-07-15 | 2022-11-15 | 深圳手回科技集团有限公司 | 回溯数据存储方法、装置及计算机设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109977089A (zh) | 日志管理方法、装置、计算机设备及计算机可读存储介质 | |
| CN108156006B (zh) | 一种埋点数据上报方法、装置及电子设备 | |
| CN105488610B (zh) | 一种电力应用系统故障实时分析诊断方法 | |
| US10664837B2 (en) | Method and system for real-time, load-driven multidimensional and hierarchical classification of monitored transaction executions for visualization and analysis tasks like statistical anomaly detection | |
| CN105159964B (zh) | 一种日志监控方法及系统 | |
| US8533536B2 (en) | Monitoring data categorization and module-based health correlations | |
| CN110309030A (zh) | 基于ELK和Zabbix的日志分析监控系统和方法 | |
| CN102567185B (zh) | 一种应用服务器的监控方法 | |
| US20180143891A1 (en) | Testing and improving performance of mobile application portfolios | |
| CN111581054A (zh) | 一种基于elk的日志埋点的业务分析告警系统及方法 | |
| CN105610648B (zh) | 一种运维监控数据的采集方法及服务器 | |
| CN113190423B (zh) | 业务数据的监控方法、装置及系统 | |
| CN105302697B (zh) | 一种密集数据模型数据库的运行状态监控方法及系统 | |
| CN111881011A (zh) | 日志管理方法、平台、服务器及存储介质 | |
| CN112152823B (zh) | 网站运行错误监控方法、装置及计算机存储介质 | |
| CN101997709A (zh) | 一种根告警数据分析的方法及其系统 | |
| CN112000502B (zh) | 海量错误日志的处理方法、装置、电子装置及存储介质 | |
| CN114356499A (zh) | Kubernetes集群告警根因分析方法及装置 | |
| CN110677304A (zh) | 一种分布式问题追踪系统及设备 | |
| CN109918260A (zh) | 一种项目代码的监控方法和装置 | |
| CN106789158A (zh) | 一种云服务保险定损方法和系统 | |
| US9201752B2 (en) | System and method for correlating empirical data with user experience | |
| CN109409948B (zh) | 交易异常检测方法、装置、设备及计算机可读存储介质 | |
| CN108984362A (zh) | 日志采集方法及装置、存储介质、电子设备 | |
| CN116932148B (zh) | 一种基于ai的问题诊断系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190705 |
|
| RJ01 | Rejection of invention patent application after publication |