CN117112521A - 一种日志管理方法、装置、电子设备及存储介质 - Google Patents
一种日志管理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN117112521A CN117112521A CN202311073885.3A CN202311073885A CN117112521A CN 117112521 A CN117112521 A CN 117112521A CN 202311073885 A CN202311073885 A CN 202311073885A CN 117112521 A CN117112521 A CN 117112521A
- Authority
- CN
- China
- Prior art keywords
- log
- template
- log data
- data
- predefined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 40
- 230000002159 abnormal effect Effects 0.000 claims abstract description 65
- 238000000034 method Methods 0.000 claims abstract description 48
- 230000008569 process Effects 0.000 claims description 29
- 230000014509 gene expression Effects 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 11
- 238000001914 filtration Methods 0.000 claims description 6
- 238000011835 investigation Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000013024 troubleshooting Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000002547 anomalous effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000002304 perfume Substances 0.000 description 1
- 229920001690 polydopamine Polymers 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请提供了一种日志管理方法、装置、电子设备及存储介质,所述方法包括:获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种日志管理方法、装置、电子设备及存储介质。
背景技术
日志通常用于跟踪应用程序、操作系统或网络设备的运行情况,对于故障排除和问题解决非常重要。在程序或者系统中增加日志输出,可以帮助程序开发人员或系统管理员定位问题、修复缺陷。
然而,应用程序和系统在运行过程中会产生大量的日志,导致日志存储需要耗费大量的存储空间,同时也增加了定位问题的难度,降低了效率。
发明内容
有鉴于此,本申请提供一种日志管理方法、装置、电子设备及存储介质,以解决相关技术中存在的缺陷,本申请技术方案如下:
根据本申请第一方面的实施例,提供一种日志管理方法,包括:
获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
可选的,所述预定义日志模板包括:
系统日志模板,用于匹配所述日志数据中的系统日志数据,所述系统日志数据记录有系统运行过程中的事件信息;和/或,
业务日志模板,用于匹配所述日志数据中的业务日志数据,所述业务日志数据记录有业务处理过程中的业务信息。
可选的,所述预定义日志模板还包括:正常日志模板;
所述日志管理方法还包括:在所述日志数据成功匹配所述正常日志模板的情况下,过滤所述日志数据。
可选的,还包括:
在所述日志数据无法匹配所述预定义日志模板的情况下,确定所述日志数据为疑似异常日志数据,并输出所述疑似异常日志数据。
可选的,所述预定义日志模板包括:日志类别和正则表达式,所述正则表达式为针对所述日志数据的匹配规则。
可选的,通过下述方式将所述日志数据与预定义日志模板进行匹配:
确定所述日志数据的日志类别,作为目标模板类别;
将具有与所述目标模板类别相同日志类别的预定义日志模板划入目标模板列表;
基于所述目标模板列表中日志模板的正则表达式,匹配所述日志数据。
根据本申请第二方面的实施例,提供一种日志管理装置,包括:
匹配单元,获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
输出单元,在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
可选的,所述预定义日志模板包括:
系统日志模板,用于匹配所述日志数据中的系统日志数据,所述系统日志数据记录有系统运行过程中的事件信息;和/或,
业务日志模板,用于匹配所述日志数据中的业务日志数据,所述业务日志数据记录有业务处理过程中的业务信息。
根据本申请第三方面的实施例,提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述的日志管理方法。
根据本申请第四方面的实施例,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的日志管理方法的步骤。
在本申请提供的技术方案中,由于预定义日志模板中包括了异常日志模板,因此在得到用于输出的日志数据之后将其与预定义日志模板进行匹配,可以准确得到日志数据中的异常日志数据,并将得到的异常日志数据进行输出。应用本申请的技术方案,能够通过预定义日志模板准确匹配日志数据,使得输出的日志数据中只包含异常日志数据,从而节省了存储日志所需的存储空间;同时,由于剔除了正常日志数据的干扰,因此也降低了日志排查的工作难度,使得技术人员能够更加快速地通过日志数据定位问题,提高了处理效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请实施例。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请实施例中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1是本申请一示例性实施例示出的一种日志管理方法的流程图;
图2是本申请一示例性实施例示出的一种日志模板匹配方法的流程图;
图3是本申请一示例性实施例示出的一种日志管理方法的流程图;
图4是本申请一示例性实施例示出的一种日志管理装置的示意图;
图5是本申请一示例性实施例示出的一种电子设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请一个或多个实施例相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请一个或多个实施例的一些方面相一致的装置和方法的例子。
需要说明的是:在其他实施例中并不一定按照本申请示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中,其方法所包括的步骤可以比本申请所描述的更多或更少。此外,本申请中所描述的单个步骤,在其他实施例中可能被分解为多个步骤进行描述;而本申请中所描述的多个步骤,在其他实施例中也可能被合并为单个步骤进行描述。
日志是记录和存储特定活动、事件或过程的一种方法,它通常包含与时间相关的信息,例如日期、时间、事件描述和相关的细节,并且日志具有多种用途,例如故障排除、问题解决、监视系统或应用程序性能、追踪变更和记录历史信息等。在计算机领域,日志文件常用于记录系统、应用程序或网络设备的活动。例如,操作系统会生成日志文件以记录启动、关闭、错误和警告等事件。应用程序也可以生成日志文件,用于跟踪用户活动、记录业务信息和调试信息等等。因此,日志对于故障排除和问题解决非常重要,在程序或者系统中增加日志输出,可以帮助程序开发人员或系统管理员定位问题、修复缺陷。
然而,应用程序和系统在运行过程中会产生大量的日志,其中记录有应用程序和系统的所有事件信息与操作信息等等,例如其中既包括记录了异常事件的日志信息,也会包括记录了正常事件的日志信息,进而导致日志存储需要耗费大量的存储空间,同时也增加了定位问题的难度,降低了效率。
相关技术中,通常会设定日志保存周期,只保存该周期内输出的日志,新输出的日志会不断覆盖超出保存周期的历史日志,因此能够在一定程度上缓解存储压力。但由于超出保存周期的日志数据会被覆盖,导致历史异常日志缺失,增大了排查历史错误的难度;同时在该周期内输出的正常日志也一并保存,也会对排查异常日志造成干扰,降低了定位问题的效率。
为了解决上述问题,本申请提出一种日志管理方法、装置、电子设备及存储介质,由于预定义日志模板中包括了异常日志模板,因此在得到用于输出的日志数据之后将其与预定义日志模板进行匹配,可以准确得到日志数据中的异常日志数据,并将得到的异常日志数据进行输出。应用本申请的技术方案,能够通过预定义日志模板准确匹配日志数据,使得输出的日志数据中只包含异常日志数据,从而节省了存储日志所需的存储空间;同时,由于剔除了正常日志数据的干扰,因此也降低了日志排查的工作难度,使得技术人员能够更加快速地通过日志数据定位问题,提高了处理效率。
在一示例性实施例中,该日志管理方法可以应用于用户终端中。用户终端可以包括手机、平板设备、笔记本电脑、掌上电脑(PDAs,Personal Digital Assistants)、可穿戴设备(如智能眼镜、智能手表等)、户外共享设备(如智能镜面设备、智能广告牌等)等任意类型,本申请并不对此进行限制。在运行过程中,该用户终端可以直接管理其系统或者运行于该终端上的应用程序的日志,以实现本申请的日志管理方法;或者可以通过插件等形式安装在用户终端的各个应用程序之中,以实现本申请的日志管理方法。
在一示例性实施例中,该日志管理方法还可以应用于服务端。服务端可以为包含一独立主机的物理服务器,或者该服务器可以为主机集群承载的虚拟服务器。在运行过程中,服务器可以实施服务器侧的日志管理方法,以实现为管理服务器自身系统的日志,或者其运行的程序的程序日志以及与程序处理的业务相关的业务日志。
图1是本申请一示例性实施例示出的一种日志管理方法的流程图,包括:
S101,获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
S102,在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
在一示例性实施例中,用于输出的日志数据为系统或应用程序在运行过程中的产生的日志,在实施本申请的日志管理方法前,该日志数据处于未输出的状态,并会在实施本申请的日志管理方法后进行存储。
具体的,日志数据可以包含系统日志数据和业务日志数据。系统日志数据记录有系统运行过程中的事件信息,例如操作系统日志中记录了系统启动、关闭、错误和其他系统级别的事件;安全日志记录了用户登录、访问控制、权限更改等与系统安全相关的事件和操作;性能日志记录了有关处理器利用率、内存使用量、网络带宽等与系统资源使用和性能指标相关的数据。业务日志数据记录有业务处理过程中的业务信息,可以是指与特定业务活动相关的数据、信息和记录,通常包含与业务过程、交易、客户、产品、服务等相关的信息。可以理解的是,不同的业务对应不同的业务日志数据,其格式、内容等方面都可能随业务变化而变化。例如,在物品销售的业务场景中,其业务日志的内容可能与商品库存、物流信息有关;在团队管理的业务场景中,其业务日志的内容可能与成员数量、权限信息有关。
需要说明的是,系统日志数据和业务日志数据的具体的格式和内容都可以根据系统或应用程序的需求和配置进行定制。例如,系统日志数据中关于防火墙的安全日志格式可以设置为“[(日志类别)](操作时间)(处理操作)IP地址为(试图访问的IP地址)的访问”,那么系统日志数据中的其中一条防火墙的日志即可能为“[INFO]2023-07-01 09:00:30阻止了123.456.789.10的访问”。再例如,业务日志数据中关于商品库存的日志的格式可以设置为“[(日志类别)](操作时间)商品名为(商品名称)的库存量为(当前库存量)件”,那么业务日志数据中的其中一条日志即可能为“[WARNING]2023-07-02 19:00:30商品名为A香氛的库存量为0件”。技术人员可以根据实际需求对日志内容及格式进行设置,本申请对此不进行限制。
在一示例性实施例中,预定义日志模板可以由技术人员预先设置,针对日志数据中包含的系统日志数据,可以设置相应的系统日志模板;针对日志数据中包含的业务日志数据,可以设置相应的业务日志模板。如上所述,系统日志数据和业务日志数据的具体的格式和内容都可以根据系统或应用程序的需求和配置进行定制,因此技术人员可以根据其定制的日志数据的格式和内容,设置相应的日志模板,以使日志模板能够准确匹配日志数据。
具体的,预定义日志模板中可以包括日志类别。目前在许多日志管理系统和框架中,通常将日志划分为不同的级别或类别,以便对其进行分类和过滤。例如,ERROR日志用于表示严重的错误和故障,通常用于记录导致应用程序中断或异常终止的问题,需要立即进行修复;WARNING日志用于表示警告和一些非致命的错误或异常情况,一般用于记录一些可能导致问题的情况,但不会中断应用程序的正常运行;INFO日志用于记录程序正常运行过程中的重要信息和关键事件,通常用于追踪应用程序的工作流程和状态,此外还有DEBUG、TRACE等等类别的日志。预定义模板中包括日志类别可以在匹配日志数据的时候初步进行划分,快速筛选出可以用于匹配的日志模板,使日志数据只与具有相同日志类别的日志模板进行匹配,提高了日志匹配效率。
需要说明的是,不同的日志系统和框架可能会有不完全相同的级别分类,且具体的使用方式可以根据应用程序需求进行自定义。例如,若在某一系统中并不需要关注异常地点访问,则可以将通常设为WARNING类别的异常访问日志改为INFO类别;若在某一业务处理程序中需要特别关注用户权限变更,那么可以将通常设为INFO类别的权限变更日志改为WARNING类别。技术人员可以根据实际需求,选择适当的日志级别来记录信息,本申请对此不进行限制。
同时需要说明的是,此处日志类别与系统事件内容、业务处理内容的关系可以为一对一、一对多、多对一、多对多的关系。例如,在业务日志中,可以将所有有关库存的日志数据都设为INFO类别的日志,也可以将与增加库存相关的日志数据设为INFO、将与减少库存相关的日志数据设为WARNING。同样的,其他与库存无关的业务日志也可以设置为INFO、WARNING等类别的日志,也可以同样地再进行类别细分,本申请对此不进行限制。
具体的,预定义日志模板中也可以包括正则表达式,所述正则表达式为针对所述日志数据的匹配规则。正则表达式为用于匹配和操作文本模式的工具,可以使用特定的语法规则来描述所需匹配的字符组合,并能够在文本中搜索、替换、提取和验证符合模式的内容。其中,可以通过单一使用或组合使用元字符、量词、锚定符以及转义符等语法规则来完成表达式的编写,使之能够匹配技术人员期望的日志数据的文本内容。
可以理解的是,系统日志数据和业务日志数据的具体的格式和内容都可以根据系统或应用程序的需求和配置进行定制,因此大部分用于输出的日志数据对技术人员来说是可知的。例如技术人员根据需求定制了业务日志数据中关于商品库存的日志的格式为“[(日志类别)](操作时间)商品名为(商品名称)的库存量为(当前库存量)件”,那么技术人员可以预见,在正常情况下,关于商品库存的日志数据可能只存在变量上的不同,而日志内容中的“商品名为”、“的库存量为”、“件”等字段则可以作为不变的常量,用于编写正则表达式的字符匹配规则。通过正则表达式对日志数据的具体内容进行进一步匹配,能够准确获得日志数据的关键信息,进而保证了预定义日志模板匹配日志数据的准确性。
在一示例性实施例中,具体可以通过图2示出的具体方式将所述日志数据与预定义日志模板进行匹配:
S201,确定所述日志数据的日志类别,作为目标模板类别;
S202,将具有与所述目标模板类别相同日志类别的预定义日志模板划入目标模板列表;
S203,基于所述目标模板列表中日志模板的正则表达式,匹配所述日志数据。
具体的,由于日志数据和预定义日志模板都可以由技术人员定制,那么用于输出的日志数据与预定义日志模板可以具有相同的日志类别。可以将与日志数据具有相同日志类别的预定义日志模板作为用于匹配的目标模板,将所有目标模板归入同一个列表,作为目标模板列表。那么将日志数据在目标模板列表中进行匹配,则可以减少大量无效的匹配操作,提高匹配效率。例如,在某一业务处理过程中用于输出的日志数据可能为“[WARNING]2023-07-02 19:00:30商品名为A香氛的库存量为0件”,则可以将所有日志类别为WARNING的预定义日志模板划入目标模板列表,将该条日志在目标模板列表中进一步地通过各个目标模板的正则表达式进行匹配,最后可以通过内容为:“[WARNING]*/商品名为A*/0件”的预定义日志模板匹配到该条日志。
本申请实施例的日志管理方法,由于预定义模板中包括日志类别可以在匹配日志数据的时候初步进行划分,快速筛选出可以用于匹配的日志模板,使日志数据只与具有相同日志类别的日志模板进行匹配,提高了日志匹配效率;同时通过正则表达式对日志数据的具体内容进行进一步匹配,能够准确获得日志数据的关键信息,进而保证了预定义日志模板匹配日志数据的准确性。
在一示例性实施例中,预定义日志模板包含异常日志模板,用于匹配异常日志数据。其中,异常日志模板中的正则表达式应当能够成功匹配到被认定为异常的数据。沿用前述举例,在物品销售的业务场景中,某商品的库存为0件时应该被关注,以便工作人员及时添加库存,或便于排查由该情况导致的其他问题,因此可以将商品库存为0作为期望匹配的异常数据,定义相应的日志模板作为异常日志模板来匹配具有该异常数据的日志数据。如“[WARNING]*/商品名为A*/0件”即可作为异常日志模板,在匹配过程中可以匹配到“[WARNING]2023-07-02 19:00:30商品名为A香氛的库存量为0件”的异常日志数据。再例如,如果业务场景中规定一个会员ID只能购买一件X商品,那么可以将商品数量大于1作为期望匹配的异常数据,定义相应的日志模板作为异常日志模板来匹配具有该异常数据的日志数据。如“[ERROR]*/商品X*/[@number]>1件”即可作为异常日志模板,在匹配过程中可以匹配到“[ERROR]2023-07-03 10:00:30useid addefsdf创建商品X订单,商品X数量为10件”的异常日志数据。可以理解的是,异常日志模板的具体格式和内容都可以由技术人员根据实际需求进行设置,本申请对此不进行限制。
在一示例性实施例中,在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据,而不输出其他未能成功匹配异常日志模板的日志数据。
通过本申请实施例的日志管理方法,能够通过日志模板中包含的异常日志模板准确地匹配日志数据中的异常日志数据,并只输出异常日志数据,从而节省了存储日志所需的存储空间;同时,由于剔除了正常日志数据的干扰,因此也降低了日志排查的工作难度,使得技术人员能够更加快速地通过日志数据定位问题,提高了处理效率。
在一示例性实施例中,预定义日志模板也可以包括正常日志模板,用于匹配正常日志数据,并在所述日志数据成功匹配所述正常日志模板的情况下,过滤所述日志数据,不进行输出。其中,正常日志模板中的正则表达式应当能够成功匹配到被认定为正常的数据。沿用前述举例,如果业务场景中规定一个会员ID只能购买一件X商品,那么可以将商品数量等于1作为期望匹配的正常数据,定义相应的日志模板作为正常日志模板来匹配具有该正常数据的日志数据。如“[INFO]*/商品X*/[@number]=1件”即可作为正常日志模板,在匹配过程中可以匹配到“[INFO]2023-07-04 11:00:30useid esgfver创建商品X订单,商品X数量为1件”的正常日志数据。
在另一示例性实施例中,在所述日志数据无法匹配所述预定义日志模板的情况下,确定所述日志数据为疑似异常日志数据,并输出所述疑似异常日志数据。可以理解的是,技术人员不可能预知所有日志数据的内容,因此预定义日志模板无法覆盖所有的日志数据,会出现某一条日志数据既不能匹配异常日志模板、也不能匹配异常日志模板的情况。在这种情况下,可以将其确定为疑似异常日志并输出,以便于技术人员做针对性处理,避免问题遗漏。
基于上述日志管理方法,下面将配合图3对一示例性的日志管理方法的流程进行说明:
S301,获取用于输出的日志数据;
S302,进行异常日志模板的匹配。在日志数据成功匹配异常日志模板的情况下,执行步骤S3021,直接输出日志数据,至此关于该条日志的匹配流程结束;在日志数据未能成功匹配异常日志模板的情况下,执行步骤S303;
S303,进行正常日志模板的匹配。在前述步骤中如果未能成功匹配异常日志模板,则将该条日志继续匹配正常日志模板。在日志数据成功匹配正常日志模板的情况下,执行步骤S3031,过滤日志数据,不进行输出,至此关于该条日志的匹配流程结束;在日志数据未能成功匹配正常日志模板的情况下,执行步骤S304;
S304,确定为疑似异常日志,并进行输出。
需要说明的是,S302与S303的执行顺序可以前后调整,即可以如图3所示,先匹配异常日志模板、再匹配正常日志模板,也可以先匹配正常日志模板、再匹配异常日志模板。技术人员可以根据需求进行设置,本申请对此不进行限制。
通过本申请实施例的日志管理方法,可以通过异常日志模板、正常日志模板对日志数据进行准确的匹配,并输出异常日志数据、过滤正常日志数据,一方面使得输出的日志数据中只包含异常日志数据,从而节省了存储日志所需的存储空间,同时剔除了正常日志数据的干扰,也降低了日志排查的工作难度;另一方面将未能成功匹配日志模板的日志数据也进行输出处理,以便于技术人员后续再做针对性处理,避免问题遗漏。
基于本申请提供的日志管理方法,本申请还提供了一种日志管理装置,参见图4,包括:
匹配单元41,用于获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
输出单元42,用于在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
可选的,所述预定义日志模板包括:
系统日志模板,用于匹配所述日志数据中的系统日志数据,所述系统日志数据记录有系统运行过程中的事件信息;和/或,
业务日志模板,用于匹配所述日志数据中的业务日志数据,所述业务日志数据记录有业务处理过程中的业务信息。
可选的,所述预定义日志模板还包括:正常日志模板;
输出单元42还用于:
在所述日志数据成功匹配所述正常日志模板的情况下,过滤所述日志数据。
可选的,输出单元42还用于:
在所述日志数据无法匹配所述预定义日志模板的情况下,确定所述日志数据为疑似异常日志数据,并输出所述疑似异常日志数据。
可选的,所述预定义日志模板包括:日志类别和正则表达式,所述正则表达式为针对所述日志数据的匹配规则。
可选的,通过下述方式将所述日志数据与预定义日志模板进行匹配:
确定所述日志数据的日志类别,作为目标模板类别;
将具有与所述目标模板类别相同日志类别的预定义日志模板划入目标模板列表;
基于所述目标模板列表中日志模板的正则表达式,匹配所述日志数据。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
相应的,本申请还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如上任一实施例所述的日志管理方法。
参考图5,在硬件层面,该电子设备包括处理器502、内部总线504、网络接口506、内存508以及非易失性存储器510,当然还可能包括其他业务所需要的硬件。处理器502从非易失性存储器510中读取对应的计算机程序到内存508中然后运行,在逻辑层面上形成日志管理的装置。当然,除了软件实现方式之外,本申请并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
相应的,本申请还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上任一实施例所述的日志管理方法。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
在一个典型的配置中,计算机包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带、磁盘存储、量子存储器、基于石墨烯的存储介质或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
上述对本申请特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
在本申请一个或多个实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请一个或多个实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请一个或多个实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
以上所述仅为本申请一个或多个实施例的较佳实施例而已,并不用以限制本申请一个或多个实施例,凡在本申请一个或多个实施例的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请一个或多个实施例保护的范围之内。
Claims (10)
1.一种日志管理方法,其特征在于,包括:
获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
2.根据权利要求1所述的方法,其特征在于,所述预定义日志模板包括:
系统日志模板,用于匹配所述日志数据中的系统日志数据,所述系统日志数据记录有系统运行过程中的事件信息;和/或,
业务日志模板,用于匹配所述日志数据中的业务日志数据,所述业务日志数据记录有业务处理过程中的业务信息。
3.根据权利要求1所述的方法,其特征在于,所述预定义日志模板还包括:正常日志模板;
所述日志管理方法还包括:在所述日志数据成功匹配所述正常日志模板的情况下,过滤所述日志数据。
4.根据权利要求3所述的方法,其特征在于,还包括:
在所述日志数据无法匹配所述预定义日志模板的情况下,确定所述日志数据为疑似异常日志数据,并输出所述疑似异常日志数据。
5.根据权利要求1所述的方法,其特征在于,所述预定义日志模板包括:日志类别和正则表达式,所述正则表达式为针对所述日志数据的匹配规则。
6.根据权利要求1所述的方法,其特征在于,通过下述方式将所述日志数据与预定义日志模板进行匹配:
确定所述日志数据的日志类别,作为目标模板类别;
将具有与所述目标模板类别相同日志类别的预定义日志模板划入目标模板列表;
基于所述目标模板列表中日志模板的正则表达式,匹配所述日志数据。
7.一种日志管理装置,其特征在于,包括:
匹配单元,获取用于输出的日志数据,并将所述日志数据与预定义日志模板进行匹配,所述预定义日志模板包括异常日志模板;
输出单元,在所述日志数据成功匹配所述异常日志模板的情况下,输出所述日志数据。
8.根据权利要求7所述的装置,其特征在于,所述预定义日志模板包括:
系统日志模板,用于匹配所述日志数据中的系统日志数据,所述系统日志数据记录有系统运行过程中的事件信息;和/或,
业务日志模板,用于匹配所述日志数据中的业务日志数据,所述业务日志数据记录有业务处理过程中的业务信息。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的日志管理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的日志管理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311073885.3A CN117112521A (zh) | 2023-08-22 | 2023-08-22 | 一种日志管理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311073885.3A CN117112521A (zh) | 2023-08-22 | 2023-08-22 | 一种日志管理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117112521A true CN117112521A (zh) | 2023-11-24 |
Family
ID=88795904
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311073885.3A Pending CN117112521A (zh) | 2023-08-22 | 2023-08-22 | 一种日志管理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117112521A (zh) |
-
2023
- 2023-08-22 CN CN202311073885.3A patent/CN117112521A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11449379B2 (en) | Root cause and predictive analyses for technical issues of a computing environment | |
US12032461B2 (en) | Software upgrade stability recommendations | |
US20170132724A1 (en) | Defect management | |
CN107194276A (zh) | 数据库动态脱敏方法及设备 | |
CN116090808A (zh) | 一种rpa断点重建方法、装置、电子设备和介质 | |
EP3539016B1 (en) | Traceability identifier | |
US20160267586A1 (en) | Methods and devices for computing optimized credit scores | |
CN116661758B (zh) | 一种优化日志框架配置的方法、装置、电子设备及介质 | |
CN110928941B (zh) | 一种数据分片抽取方法及装置 | |
US20160063375A1 (en) | Determination of substances in an assembly | |
CN117112521A (zh) | 一种日志管理方法、装置、电子设备及存储介质 | |
CN112580915A (zh) | 一种项目里程碑确定方法、装置、存储介质及电子设备 | |
CN115659045A (zh) | 用户操作的识别方法、装置、存储介质以及电子设备 | |
CN114693358A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
EP3751500B1 (en) | System and method for technology recommendations | |
US20160110664A1 (en) | Determining levels of compliance based on principles and points of focus | |
JP2018028776A (ja) | ソフトウェア資産管理装置、ソフトウェア資産管理方法、および、ソフトウェア資産管理プログラム | |
EP3556084B1 (en) | Application-sensitive strategy for server decommissioning | |
CN106649086B (zh) | 用于配置系统的修改管理的系统和方法 | |
CN110134597A (zh) | 业务系统资金安全的回归测试方法及其系统 | |
US11762809B2 (en) | Scalable subscriptions for virtual collaborative workspaces | |
US10686645B1 (en) | Scalable subscriptions for virtual collaborative workspaces | |
US20100082563A1 (en) | System impact search engine | |
US20220343359A1 (en) | Record management system for enabling access to a record | |
US20080033590A1 (en) | Method and system for managing lot transactions |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |