CN111538712A - 日志的记录方法及处理节点、电子设备、存储介质 - Google Patents

日志的记录方法及处理节点、电子设备、存储介质 Download PDF

Info

Publication number
CN111538712A
CN111538712A CN202010362069.4A CN202010362069A CN111538712A CN 111538712 A CN111538712 A CN 111538712A CN 202010362069 A CN202010362069 A CN 202010362069A CN 111538712 A CN111538712 A CN 111538712A
Authority
CN
China
Prior art keywords
service request
dyeing
processing node
sub
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010362069.4A
Other languages
English (en)
Other versions
CN111538712B (zh
Inventor
胡细笔
马进朝
仵亚平
石忠杰
宴竹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hundsun Technologies Inc
Original Assignee
Hundsun Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hundsun Technologies Inc filed Critical Hundsun Technologies Inc
Priority to CN202010362069.4A priority Critical patent/CN111538712B/zh
Publication of CN111538712A publication Critical patent/CN111538712A/zh
Application granted granted Critical
Publication of CN111538712B publication Critical patent/CN111538712B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/1805Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815Journaling file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/1737Details of further file system functions for reducing power consumption or coping with limited storage space, e.g. in mobile devices

Abstract

本申请提供了一种日志的记录方法及处理节点、电子设备、存储介质;其中,日志的记录方法应用于业务处理系统中的一个处理节点,所述处理节点包括主处理节点和子处理节点;所述日志的记录方法具体包括:接收业务请求;在处理所述业务请求时,判断本地是否存储有所述业务请求对应的染色标识;其中,所述染色标识用于标识所述业务请求与预设的染色规则相匹配;所述染色规则用于说明进行日志记录的业务请求需要包含的特定信息;若判断出本地存储有所述业务请求对应的染色标识,则在所述业务请求的处理过程中,记录所述业务请求被处理时的处理日志。实现了一种有选择性地记录日志的方法,从而不仅可以记录到详细的日志,也避免了占用大量存储资源。

Description

日志的记录方法及处理节点、电子设备、存储介质
技术领域
本申请涉及日志记录技术领域,特别涉及一种日志的记录方法及处理节点、电子设备、存储介质。
背景技术
在各种软件系统中,日志具有非常重要的作用,不但能够在出现故障时,作为排查系统故障依据,还能够用于分析软件系统行为和性能等。所以软件系统的业务节点在处理业务请求一般都需要进行日志记录。
目前的日志记录方案中,一种是通过系统配置开启软件系统的日志记录功能,从而记录每个业务请求处理过程的详细日志。另一种则不记录详细的访问日志,只记录错误日志。
但是软件系统的业务请求的数量非常大,采用第一种方案对每个业务请求都进行详细日志的记录,这不仅会占用大量存储资源,并且还会降低系统性能,而且不少较为简单或者不重要的业务请求的详细日志几乎没有用处的。第二种方案虽然不会占用大量存储资源,但是错误日志所包含的信息相对比较有限,所以并不利于快速排查出发送异常的根源,并且记录错误日志则无法通过日志分析软件系统行为和性能。
发明内容
基于上述现有技术的不足,本发明提供了一种日志的记录方法及处理节点、电子设备、存储介质,以解决现有的日志记录方式占用大量存储资源以及记录信息有限的问题。
为了实现上述目的,本发明提供了以下技术方案:
本申请第一方面提供了一种日志的记录方法,应用于业务处理系统中的一个处理节点,其中,所述处理节点包括主处理节点和子处理节点;所述日志的记录方法,包括:
接收业务请求;
在处理所述业务请求时,判断本地是否存储有所述业务请求对应的染色标识;其中,所述染色标识用于标识所述业务请求与预设的染色规则相匹配;所述染色规则用于说明进行日志记录的业务请求需要包含的特定信息;
若判断出本地存储有所述业务请求对应的染色标识,则在所述业务请求的处理过程中,记录所述业务请求被处理时的处理日志。
可选地,在上述的日志的记录方法中,所述处理节点为所述主处理节点,所述接收业务请求之后,还包括:
提取所述业务请求中的目标字段的信息;
判断所述目标字段的信息与预设的所述染色规则中相应的信息是否相匹配;
若判断所述目标字段中的信息与预设的所述染色规则中相应的信息相匹配,则生成所述染色标识,并将所述染色标识存储到本地线程的私有存储空间中。
可选地,在上述的日志的记录方法中,所述处理节点为所述子处理节点,所述业务请求为子业务请求且携带有染色标识;其中:所述接收业务请求之后,还包括:
从所述业务请求中提取出所述染色标识;
将所述染色标识存储至本地线程的私有存储空间中。
可选地,在上述的日志的记录方法中,所述若判断出本地存储有所述业务请求对应的染色标识,所述记录方法还包括:
在需要调用其他子处理节点的功能处理所述业务请求时,提取本地存储的所述染色标识;
生成所述业务请求的子业务请求,并将所述染色标识添加至所生成的所述子业务请求中;
向下一层子处理节点发送所述子业务请求。
可选地,在上述的日志的记录方法中,还包括:
通过管理接口接收所述染色规则的修改指令;
根据所述修改指令对存储在在内存中的所述染色规则进行修改,并将所述染色规则同步到磁盘文件中。
本申请第二方面提供了一种处理节点,包括:
第一接收单元,用于接收业务请求;
第一判断单元,用于在处理所述业务请求时,判断本地是否存储有所述业务请求对应的染色标识;其中,所述染色标识用于标识所述业务请求与预设的染色规则相匹配;所述染色规则用于说明进行日志记录的业务请求需要包含的特定信息;
记录单元,用于在所述第一判断单元判断出本地存储有所述业务请求对应的染色标识时,在所述业务请求的处理过程中,记录所述业务请求被处理时的处理日志。
可选地,在上述的处理节点中,所述处理节点为所述主处理节点;其中,所述处理节点还包括:
第一提取单元,用于提取所述业务请求中的目标字段的信息;
第二判断单元,用于判断所述目标字段的信息与预设的所述染色规则中相应的信息是否相匹配;
第一生成单元,用于在所述第二判断单元判断出所述目标字段中的信息与预设的所述染色规则中相应的信息相匹配时,生成所述染色标识,并将所述染色标识存储到本地线程的私有存储空间中。
可选地,在上述的处理节点中,所述处理节点为所述子处理节点;其中,所述处理节点还包括:
第二提取单元,用于从所述业务请求中提取出所述染色标识;
存储单元,用于将所述染色标识存储至本地线程的私有存储空间中。
可选地,在上述的处理节点中,还包括:
第三提取单元,用于在需要调用其他子处理节点的功能处理所述业务请求时,提取本地存储的所述染色标识;
第二生成单元,用于生成所述业务请求的子业务请求,并将所述染色标识添加至所生成的所述子业务请求中;
发送单元,用于向下一层子处理节点发送所述子业务请求。
可选地,在上述的处理节点中,还包括:
第二接收单元,用于通过管理接口接收所述染色规则的修改指令;
修改单元,用于根据所述修改指令对存储在在内存中的所述染色规则进行修改,并将所述染色规则同步到磁盘文件中。
本申请第三方面提供了一种电子设备,包括处理器和存储器;其中:
所述存储器用于存储计算机指令;
所述处理器用于执行所述存储器存储的计算机指令,具体执行如上述任意一项所述的日志的记录方法。
本申请第四方面提供了一种存储介质,用于存储程序,所述程序被执行时,用于实现如上述任意一项所述的日志的记录方法。
本申请提供的一种日志的记录方法,应用于业务处理系统中的一个处理节点,其中,处理节点包括主处理节点和子处理节点。在接收到业务请求后,在处理业务请求时,通过判断本地是否存储有业务请求对应的染色标识,来确定在业务请求的处理过程中,是否记录业务请求被处理时的处理日志。其中,染色标识用于标识业务请求与预设的染色规则相匹,并且由于染色规则用于说明进行日志记录的业务请求需要包含的特定信息,所以可以根据需求通过在染色规则中配置多种条件,实现只对特定业务请求进行记录日志操作,从而避免了记录没有意义的处理日志,减少了对存储资源占用和对系统性能的影响。并且,所记录的处理日志是整个业务请求处理的详细日志,也便于异常的排查分析,以及分析系统整体性能和行为等。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种日志的记录方法的流程示意图;
图2为本申请另一实施例提供的另一种日志的记录方法的流程示意图;
图3为本申请另一实施例提供的另一种日志的记录方法的流程示意图;
图4为本申请另一实施例提供的一种处理节点的结构示意图
图5为本申请另一实施例提供的一种电子设备的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本申请中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本申请实施例提供了一种日志的记录方法,应用于业务处理系统中的一个处理节点,其中,处理节点包括主处理节点和子处理节点。如图1所示,日志的记录方法具体包括:
S101、接收业务请求。
首先需要说明的是,业务请求可以指的是客户端发送的,也可以是业务处理系统中的处理节点发送。其中,主处理节点指的专门接收客户端发送的业务请求的业务节点,即当业务请求是客户端发送的,则接收业务请求的处理节点为主处理节点。
由于,一个业务请求通常需要进行多种处理,例如校验、审核、计算等,所以当主处理节点无法完成整个业务请求的处理流程时,就会向其他子处理节点发送所接收到的业务员请求的子业务请求,以调用其他子业务节点的功能,共同协作完成客户端发送的也要玩请求。同样,一个子处理节点也无法完全承担接收到的子业务请求时,也会向其他的子处理节点发送所接收到的子业务请求的子业务请求。因此业务请求也可以是主处理节点或其他子节点发送的,此时接收业务请求的处理节点为子处理节点。
S102、在处理业务请求时,判断本地是否存储有业务请求对应的染色标识,染色标识用于标识业务请求与预设的染色规则相匹配,染色规则用于说明进行日志记录的业务请求需要包含的特定信息。
具体的,可以在染色规则中配置多个特定信息,例如业务请求的业务的功能类型、业务场景类型、通讯连接编号、用户账号等,然后存储至内存中。当业务请求中的各个特定信息与染色规则中的信息相一致时,则确定业务请求与预设的染色规则相匹配,并生成并存储染色标识。
由于,当确定需要记录客户端发送的一个业务请求的处理日志时,则需要对该业务请求的整个处理过程都需要记录日志,即需要对每个处理节点处理该业务请求相关的业务时的处理过程都需要进行日志记录。所以可选地,在本申请实施例中,只有当主处理节点接收到客户端发送的业务请求时,需要判断业务请求与预设的染色规则是否相匹配,并在业务请求与预设的染色规则相匹配时,生成染色标识。由于其他子处理节点接收的业务请求都属于主处理节点接收到的业务请求的子请求,所以在本申请实施例中,此时可以认定子处理节点接收到的业务请求与染色规则匹配,所以可以直接将主处理节点生成染色标识一层一层地传递下去。每个接收业务请求的子处理节点,在接收同时也会接收到染色标识并存储在本地中,从而不需要每个处理节点都将业务请求中的各个特定信息与染色规则中的各个对应的信息进行匹配,有效地提高了业务请求的处理效率。当然只是一种可选地的方式,也可以是每个节点都分别判断业务请求与染色规则是否相匹配,并在两者相匹配时,生成并存储染色标识。
具体的,每个处理节点在处理自己所要接收到的业务请求时,调用处理节点中的日志模块判断自身本地是否存储有业务请求对应的染色标识,若判断出本地未存储有业务请求对应的染色标识,则在业务请求的处理过程中,不需要记录业务请求被处理时的处理日志。若判断出本地存储有业务请求对应的染色标识,则执行步骤S103。
本申请另一实施例中,还可以对染色规则进行修改,如图2所示,具体包括:
S201、通过管理接口接收染色规则的修改指令。
具体的,通过向运维工具提供管理接口,以让软件系统管理人员对染色规则进行修改。在软件系统管理人员修改染色规则时,通过管理接口接收软件系统管理人员触发的修改指令。
S202、根据修改指令对存储在在内存中的染色规则进行修改,并将染色规则同步到磁盘文件中。
需要说明的是,当重启业务处理系统时,会从磁盘文件中加载修改后的染色规则,
S103、在业务请求的处理过程中,记录业务请求被处理时的处理日志。
具体的,处理节点通过调用日志模块记录业务请求被该处理节点处理的整个过程的日志。
本申请实施例提供的一种日志的记录方法,应用于业务处理系统中的一个处理节点,其中,处理节点包括主处理节点和子处理节点。在接收到业务请求后,在处理业务请求时,通过判断本地是否存储有业务请求对应的染色标识,来确定在业务请求的处理过程中,是否记录业务请求被处理时的处理日志。其中,染色标识用于标识业务请求与预设的染色规则相匹,并且由于染色规则用于说明进行日志记录的业务请求需要包含的特定信息,所以可以根据需求配置多条染色规则,实现只对特定业务请求进行记录日志操作,从而避免了记录没有意义的处理日志,减少了对存储资源占用和对系统性能的影响。并且,所记录的处理日志是整个业务请求处理的详细日志,也便于异常的排查分析,以及分析系统整体性能和行为等。
本申请另一实施例提供了另一种日志处理方法,如图3所示,包括:
S301、主处理节点接收客户端发送的业务请求。
S302、主处理节点提取业务请求中的目标字段的信息,并判断目标字段的信息与预设的染色规则中相应的信息是否相匹配。
需要说明的是,目标字段指的是业务请求中指定的字段,并且目标字段通常为多个,当然也可以是一个。其中,业务请求中的每个目标字段在染色规则中都配置有相应的信息,用于判断目标字段的信息是否为所要求包含的请求信息,因此染色规则用于说明进行日志记录的业务请求需要包含的特定信息。
具体的,若判断出每个目标字段中的信息与预设的染色规则中相应的信息都相匹配,说明业务请求与预设的染色规则相匹配,所以此时执行步骤S303。
S303、主处理节点生成染色标识,并将染色标识存储到本地线程的私有存储空间中。
也就是说在,在业务请求与预设的染色规则相匹配时才生成染色标识,所以染色标识用于标识业务请求与预设的染色规则相匹配。
具体的,在本申请实施例中,在线程的私有存储中开闭存储空间,并将将染色标识存储到线程的私有存储空间中,以便于在向其他子处理节点发送该业务请求的子业务请求时,不需要通过接口就可以将染色标识传递给子处理节点。
可选地,在业务请求与预设的染色规则相匹配时,也可以生成相应的不记录标识。所以,具体在判断目标字段的信息与预设的染色规则中相应的信息是否相匹配得到判断结果后,根据判断结果生成目标标识。其中,当判断结果为业务请求与预设的染色规则相匹配时,生成的目标标识为染色标识;当判断结果为业务请求与预设的染色规则不匹配时,生成的目标标识为不记录标识。其中,可以分别用1和0作为染色标识和不记录标识。
需要说明的是,主处理节点在处理业务请求时,会判断本地是否存储有业务请求对应的染色标识,并判断出本地存储有业务请求对应的染色标识,记录业务请求被处理时的处理日志。具体的,若是相应地生成染色标识或不记录标识,则具体在若判断出线程的私有存储空间存储的标识为染色标识,则记录业务请求被处理时的处理日志,若判断出线程的私有存储空间存储的标识为不记录标识,则在处理业务请求时,不进行日志记录。
S304、主处理节点在需要调用其他子处理节点的功能处理业务请求时,提取本地存储的染色标识。
由于,客户端发送的业务请求中通常是需要进行多个业务处理,例如校验、查询、计算等。其中的部分业务需要由其他的子处理节点进行处理,所以主处理节点会向其他的子处理节点发送业务请求,以调用其他子处理节点的功能处理所发送的业务请求。子处理节点在处理完主处理节点发送的业务请求后,会向主处理节点进行反馈,并最终由主处理节点向客户端进行反馈。
可选地,主处理节点在需要调用其他子处理节点的功能处理业务请求时,从线程的私有存储空间中提取出存储的染色标识。
S305、主处理节点生成业务请求的子业务请求,并将染色标识添加至所生成的子业务请求中。
需要说明的是,将染色标识添加至子业务请求中,能便于将子业务请求和染色标识一次性发送给子处理节点,无需分别单独发送子业务请求和染色标识。
S306、向下一层子处理节点发送子业务请求。
其中,下一层子处理节点是相对于发送子业务请求的处理节点而言的,子业务请求的接收方为相对于发送方的下一层子处理节点,但实际并未对处理节点进行分级。
S307、子处理节点从子业务请求中提取出染色标识。
需要说明的是,对于子处理节点,接收子业务请求也等同于接收到了其他处理节点发送的业务请求。由于,子处理节点接收到的业务请求中包含有染色标识,所以子处理节点直接从子业务请求中提取出染色标识,无需进行与染色规则进行匹配再生成染色标识。对于主处理节点,其所接收到的业务请求时客户端发送的,
S308、子处理节点将染色标识存储至本地线程的私有存储空间中。
需要说明的是,本申请实施例虽然仅以主处理节点与一个子处理节点的交互进行说明,但是对于任意一个子处理节点,在获得染色标识并存储至本地线程的私有存储空间后,在需要调用其他子处理节点的功能处理自己所接收到的业务请求时,也同样会向其他子处理节点发送所接收到的业务请求的子业务请求,并且同样将染色标识添加至子业务请求中发送给下一级的子处理节点。具体的过程可相应地参考步骤S304~步骤S306,仅是将执行主体由主处理节点变更为子处理节点。同样,一个的子处理节点在接收到另一个子处理节点发送的子业务请求后,所具体执行的步骤与子处理节点接收到主处理节点发送的子业务请求后的执行步骤相一致。其中,一个的子处理节点在接收到另一个子处理节点发送的子业务请求后,所具体执行的步骤可相应地参考步骤S307~步骤S310,所以本申请实施例中不再赘述。
S309、子处理节点在处理子业务请求时,判断本地是否存储有子业务请求对应的染色标识。
同样,每个子处理节点接收到的子业务请求也相应的包含有染色标识,所以在处理子业务请求时,都判断本地是否存储有子业务请求对应的染色标识,以确定是否需要记录处理日志。
S310、子处理节点在子业务请求的处理过程中,记录子业务请求被处理时的处理日志。
需要说明的是,在主处理节点生成染色标识后,每一个参与到客户端所发送的业务请求的业务处理的子处理节点,都会接收到染色标识,并且都在处理子业务请求的时,根据是否存储有染色标识,确定是否需要记录处理子业务请求的处理过程的处理日志,即每个处理节点都根据染色标识,确定是否需要记录日志。
本申请实施例提供的一种日志的记录方法,主处理节点在接收到业务请求后,判断业务请求与染色规则是否匹配,并在判断出两者匹配时,生成染色标识。并在向其他子处理节点发送业务请求时,将染色标识添加至业务请求中,以让子处理节点等到染色标识,同样每个子处理节点也可以将标识添加至发送给其他子处理节点的业务请求中,实现了染色标识传递。然后每个处理节点在处理业务请求时,通过判断是否存储有业务请求对应的染色标识,来确定在业务请求的处理过程中,是否记录业务请求被处理时的处理日志。其中,由于染色规则用于说明进行日志记录的业务请求需要包含的特定的信息,所以可以根据需求通过在染色规则中配置多种特定的信息,实现处理节点只对特定业务请求进行记录日志操作,从而避免了记录没有意义的处理日志,减少了对存储资源占用和对系统性能的影响。并且,所记录的处理日志是整个业务请求处理的详细日志,也便于异常的排查分析,以及分析系统整体性能和行为等。
本申请另一实施例提供了一种处理节点,如图4所示,包括:
第一接收单元401,用于接收业务请求。
第一判断单元402,用于在处理业务请求时,判断本地是否存储有业务请求对应的染色标识。
其中,染色标识用于标识业务请求与预设的染色规则相匹配。染色规则用于说明进行日志记录的业务请求需要包含的特定信息。
记录单元403,用于在第一判断单元判断出本地存储有业务请求对应的染色标识时,在业务请求的处理过程中,记录业务请求被处理时的处理日志。
需要说明的是,上述单元的具体工作过程可相应地参考上述方法实施例中的步骤S101~步骤S103,此处不再赘述。
可选地,本申请另一实施例中的处理节点为主处理节点,该处理节点还包括:
第一提取单元,用于提取业务请求中的目标字段的信息。
第二判断单元,用于判断目标字段的信息与预设的染色规则中相应的信息是否相匹配。
第一生成单元,用于在第二判断单元判断出目标字段中的信息与预设的染色规则中相应的信息相匹配时,生成染色标识,并将染色标识存储到本地线程的私有存储空间中。
需要说明的是,上述单元的具体工作过程可相应地参考上述方法实施例中的步骤S302~步骤S303,此处不再赘述。
可选地,本申请另一实施例中的处理节点为子处理节点,其中,该处理节点还包括:
第二提取单元,用于从业务请求中提取出染色标识。
存储单元,用于将染色标识存储至本地线程的私有存储空间中。
需要说明的是,上述单元的具体工作过程可相应地参考上述方法实施例中的步骤S307~步骤S308,此处不再赘述。
可选地,本申请另一实施例中的处理节点,还可以进一步包括:
第三提取单元,用于在需要调用其他子处理节点的功能处理业务请求时,提取本地存储的染色标识。
第二生成单元,用于生成业务请求的子业务请求,并将染色标识添加至所生成的子业务请求中。
发送单元,用于向下一层子处理节点发送子业务请求。
需要说明的是,上述单元的具体工作过程可相应地参考上述方法实施例中的步骤S304~步骤S306,此处不再赘述。
可选地,本申请另一实施例中的处理节点,还可以进一步包括:
第二接收单元,用于通过管理接口接收染色规则的修改指令;
修改单元,用于根据修改指令对存储在在内存中的染色规则进行修改,并将染色规则同步到磁盘文件中。
需要说明的是,上述单元的具体工作过程可相应地参考上述方法实施例中的步骤S201~步骤S202,此处不再赘述。
本申请实施例提供的一种处理节点,在第一接收单元接收到业务请求后,在处理业务请求时,通过第一判断单元判断本地是否存储有业务请求对应的染色标识,来确定在业务请求的处理过程中,记录单元是否需要记录业务请求被处理时的处理日志。其中,染色标识用于标识业务请求与预设的染色规则相匹,并且由于染色规则用于说明进行日志记录的业务请求需要包含的特定信息,所以可以根据需求配置多条染色规则,实现只对特定业务请求进行记录日志操作,从而避免了记录没有意义的处理日志,减少了对存储资源占用和对系统性能的影响。并且,所记录的处理日志是整个业务请求处理的详细日志,也便于异常的排查分析,以及分析系统整体性能和行为等。
本申请另一实施例还公开了一种电子设备,如图5所示,包括:存储器501和处理器502。
其中,存储器501用于存储计算机指令。处理器502用于执行存储器501存储的计算机指令,具体执行上述中任意一个实施例中所提供的日志的记录方法。
本申请另一实施例还公开了一种存储介质,用于存储程序,所述程序被执行时,用于实现上述任意一个实施例中所提供的日志的记录方法。专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种日志的记录方法,其特征在于,应用于业务处理系统中的一个处理节点,其中,所述处理节点包括主处理节点和子处理节点;所述日志的记录方法,包括:
接收业务请求;
在处理所述业务请求时,判断本地是否存储有所述业务请求对应的染色标识;其中,所述染色标识用于标识所述业务请求与预设的染色规则相匹配;所述染色规则用于说明进行日志记录的业务请求需要包含的特定信息;
若判断出本地存储有所述业务请求对应的染色标识,则在所述业务请求的处理过程中,记录所述业务请求被处理时的处理日志。
2.根据权利要求1所述的记录方法,其特征在于,所述处理节点为所述主处理节点,所述接收业务请求之后,还包括:
提取所述业务请求中的目标字段的信息;
判断所述目标字段的信息与预设的所述染色规则中相应的信息是否相匹配;
若判断所述目标字段中的信息与预设的所述染色规则中相应的信息相匹配,则生成所述染色标识,并将所述染色标识存储到本地线程的私有存储空间中。
3.根据权利要求1所述的记录方法,其特征在于,所述处理节点为所述子处理节点,所述业务请求为子业务请求且携带有染色标识;其中:所述接收业务请求之后,还包括:
从所述业务请求中提取出所述染色标识;
将所述染色标识存储至本地线程的私有存储空间中。
4.根据权利要求1至3中任意一项所述的记录方法,其特征在于,所述若判断出本地存储有所述业务请求对应的染色标识,所述记录方法还包括:
在需要调用其他子处理节点的功能处理所述业务请求时,提取本地存储的所述染色标识;
生成所述业务请求的子业务请求,并将所述染色标识添加至所生成的所述子业务请求中;
向下一层子处理节点发送所述子业务请求。
5.根据权利要求1所述的方法,其特征在于,还包括:
通过管理接口接收所述染色规则的修改指令;
根据所述修改指令对存储在在内存中的所述染色规则进行修改,并将所述染色规则同步到磁盘文件中。
6.一种处理节点,其特征在于,包括:
第一接收单元,用于接收业务请求;
第一判断单元,用于在处理所述业务请求时,判断本地是否存储有所述业务请求对应的染色标识;其中,所述染色标识用于标识所述业务请求与预设的染色规则相匹配;所述染色规则用于说明进行日志记录的业务请求需要包含的特定信息;
记录单元,用于在所述第一判断单元判断出本地存储有所述业务请求对应的染色标识时,在所述业务请求的处理过程中,记录所述业务请求被处理时的处理日志。
7.根据权利要求6所述的处理节点,其特征在于,所述处理节点为所述主处理节点;其中,所述处理节点还包括:
第一提取单元,用于提取所述业务请求中的目标字段的信息;
第二判断单元,用于判断所述目标字段的信息与预设的所述染色规则中相应的信息是否相匹配;
第一生成单元,用于在所述第二判断单元判断出所述目标字段中的信息与预设的所述染色规则中相应的信息相匹配时,生成所述染色标识,并将所述染色标识存储到本地线程的私有存储空间中。
8.根据权利要求6所述的处理节点,其特征在于,所述处理节点为所述子处理节点;其中,所述处理节点还包括:
第二提取单元,用于从所述业务请求中提取出所述染色标识;
存储单元,用于将所述染色标识存储至本地线程的私有存储空间中。
9.一种电子设备,其特征在于,包括处理器和存储器;其中:
所述存储器用于存储计算机指令;
所述处理器用于执行所述存储器存储的计算机指令,具体执行如权利要求1至5中任意一项所述的日志的记录方法。
10.一种存储介质,其特征在于,用于存储程序,所述程序被执行时,用于实现如权利要求1至5中任意一项所述的日志的记录方法。
CN202010362069.4A 2020-04-30 2020-04-30 日志的记录方法及处理节点、电子设备、存储介质 Active CN111538712B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010362069.4A CN111538712B (zh) 2020-04-30 2020-04-30 日志的记录方法及处理节点、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010362069.4A CN111538712B (zh) 2020-04-30 2020-04-30 日志的记录方法及处理节点、电子设备、存储介质

Publications (2)

Publication Number Publication Date
CN111538712A true CN111538712A (zh) 2020-08-14
CN111538712B CN111538712B (zh) 2023-07-21

Family

ID=71977354

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010362069.4A Active CN111538712B (zh) 2020-04-30 2020-04-30 日志的记录方法及处理节点、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN111538712B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112000555A (zh) * 2020-08-31 2020-11-27 深圳市同行者科技有限公司 基于染色的日志生成方法、装置、设备及存储介质
CN112860636A (zh) * 2021-01-18 2021-05-28 北京金山云网络技术有限公司 操作数据的存储方法和装置、电子设备和存储介质

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090204560A1 (en) * 2004-05-21 2009-08-13 Nhn Corporation Method for determining validity of command and system thereof
JP2010108391A (ja) * 2008-10-31 2010-05-13 Brother Ind Ltd ノード装置、ノード処理プログラム及び利用状況管理方法
CN102480383A (zh) * 2010-11-23 2012-05-30 腾讯科技(深圳)有限公司 一种日志消息报文处理方法及装置
US20120284287A1 (en) * 2011-05-06 2012-11-08 Sap Ag Systems and Methods for Business Process Logging
WO2013000215A1 (zh) * 2011-06-27 2013-01-03 中兴通讯股份有限公司 下发通知消息的方法及装置
CN104331487A (zh) * 2014-11-13 2015-02-04 携程计算机技术(上海)有限公司 日志的处理方法及装置
US20160063776A1 (en) * 2014-08-29 2016-03-03 Ford Global Technologies, Llc Method and Apparatus for Event Data Recording Activation and Logging
CN107678933A (zh) * 2017-09-28 2018-02-09 中国平安人寿保险股份有限公司 日志生成管理方法、装置、设备及计算机可读存储介质
CN108427619A (zh) * 2018-03-13 2018-08-21 腾讯科技(深圳)有限公司 日志管理方法、装置、计算设备及存储介质
KR20190041192A (ko) * 2017-10-12 2019-04-22 에스케이텔레콤 주식회사 규칙 기반의 동적 로그 수집 방법 및 장치
US20190155792A1 (en) * 2016-06-01 2019-05-23 Samsung Electronics Co., Ltd. Electronic device and file data journaling method of electronic device
CN110019064A (zh) * 2017-09-01 2019-07-16 大唐移动通信设备有限公司 消除重复日志记录的过滤方法及装置
CN110543463A (zh) * 2019-09-16 2019-12-06 南方电网科学研究院有限责任公司 一种日志存储方法、装置、设备及可读存储介质
CN110990353A (zh) * 2019-12-11 2020-04-10 深圳证券交易所 日志提取方法、日志提取装置及存储介质

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090204560A1 (en) * 2004-05-21 2009-08-13 Nhn Corporation Method for determining validity of command and system thereof
JP2010108391A (ja) * 2008-10-31 2010-05-13 Brother Ind Ltd ノード装置、ノード処理プログラム及び利用状況管理方法
CN102480383A (zh) * 2010-11-23 2012-05-30 腾讯科技(深圳)有限公司 一种日志消息报文处理方法及装置
US20120284287A1 (en) * 2011-05-06 2012-11-08 Sap Ag Systems and Methods for Business Process Logging
WO2013000215A1 (zh) * 2011-06-27 2013-01-03 中兴通讯股份有限公司 下发通知消息的方法及装置
US20160063776A1 (en) * 2014-08-29 2016-03-03 Ford Global Technologies, Llc Method and Apparatus for Event Data Recording Activation and Logging
CN104331487A (zh) * 2014-11-13 2015-02-04 携程计算机技术(上海)有限公司 日志的处理方法及装置
US20190155792A1 (en) * 2016-06-01 2019-05-23 Samsung Electronics Co., Ltd. Electronic device and file data journaling method of electronic device
CN110019064A (zh) * 2017-09-01 2019-07-16 大唐移动通信设备有限公司 消除重复日志记录的过滤方法及装置
CN107678933A (zh) * 2017-09-28 2018-02-09 中国平安人寿保险股份有限公司 日志生成管理方法、装置、设备及计算机可读存储介质
KR20190041192A (ko) * 2017-10-12 2019-04-22 에스케이텔레콤 주식회사 규칙 기반의 동적 로그 수집 방법 및 장치
CN108427619A (zh) * 2018-03-13 2018-08-21 腾讯科技(深圳)有限公司 日志管理方法、装置、计算设备及存储介质
CN110543463A (zh) * 2019-09-16 2019-12-06 南方电网科学研究院有限责任公司 一种日志存储方法、装置、设备及可读存储介质
CN110990353A (zh) * 2019-12-11 2020-04-10 深圳证券交易所 日志提取方法、日志提取装置及存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
乔晓琳;刘定生;李景山;: "基于通用遥感数据处理系统的日志子系统的设计与实现", 遥感信息, no. 06 *
毕红双;王宝生;张京京;: "多源日志的远程存储和分析管理", 信息通信, no. 03 *
郝郁;徐炜民;: "可扩展的Web日志采集框架的设计与实现", 计算机应用与软件, no. 01 *
马强;刘晓洁;梁刚;: "入侵防御系统日志采集和存储的改进方法", 计算机工程与设计, no. 17 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112000555A (zh) * 2020-08-31 2020-11-27 深圳市同行者科技有限公司 基于染色的日志生成方法、装置、设备及存储介质
CN112860636A (zh) * 2021-01-18 2021-05-28 北京金山云网络技术有限公司 操作数据的存储方法和装置、电子设备和存储介质

Also Published As

Publication number Publication date
CN111538712B (zh) 2023-07-21

Similar Documents

Publication Publication Date Title
US8108234B2 (en) System and method for deriving business processes
CN109298997A (zh) 接口测试方法、系统、计算机设备和存储介质
CN111752799A (zh) 一种业务链路跟踪方法、装置、设备及储存介质
US20080270515A1 (en) Method and apparatus for migrating the system environment on which the applications depend
CN113794636B (zh) 一种基于Spring Cloud Gateway实现的动态路由编排方法及系统
CN107704360A (zh) 监控数据的处理方法、设备、服务器及存储介质
CN111538712A (zh) 日志的记录方法及处理节点、电子设备、存储介质
CN110088744A (zh) 一种数据库维护方法及其系统
WO2020063550A1 (zh) 策略决策方法及装置、系统、存储介质、策略决策单元及集群
US9405531B2 (en) Methods for building application intelligence into event driven applications through usage learning, and systems supporting such applications
CN110941632A (zh) 一种数据库审计方法、装置及设备
CN109714208A (zh) 一种设备纳入网管的方法、存储介质及电子设备
US20080033995A1 (en) Identifying events that correspond to a modified version of a process
CN107451435B (zh) 一种硬件加密机的管控方法、管控机及管控系统
US11425172B2 (en) Application security for service provider networks
CN115221507A (zh) 一种基于自定义策略的数据库审计方法
CN111722783B (zh) 数据存储方法及装置
CN109412861B (zh) 一种终端网络建立安全关联展示方法
CN110221952B (zh) 业务数据的处理方法及装置、业务数据处理系统
CN112860398A (zh) 基于规则引擎的数据处理方法、装置、设备及介质
CN110572430A (zh) 一种基于定时任务的身份数据同步系统及方法
CN114500073B (zh) 一种云存储系统中支持隐私保护的用户数据割接方法及系统
US20110153788A1 (en) Method and System for Automated Network Operations
CN111177097B (zh) 一种日志收集方法、装置、设备及计算机可读存储介质
CN115883243A (zh) 自动化攻防对抗评估方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant