CN113055760A - 日志处理方法、装置、设备和存储介质 - Google Patents

日志处理方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN113055760A
CN113055760A CN201911364466.9A CN201911364466A CN113055760A CN 113055760 A CN113055760 A CN 113055760A CN 201911364466 A CN201911364466 A CN 201911364466A CN 113055760 A CN113055760 A CN 113055760A
Authority
CN
China
Prior art keywords
message
log
service
transaction identification
identification number
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911364466.9A
Other languages
English (en)
Inventor
田琪
温秋明
朱玺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201911364466.9A priority Critical patent/CN113055760A/zh
Priority to PCT/CN2020/139801 priority patent/WO2021129849A1/zh
Publication of CN113055760A publication Critical patent/CN113055760A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q11/00—Selecting arrangements for multiplex systems
    • H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
    • H04Q11/0062—Network aspects
    • H04Q11/0067—Provisions for optical access or distribution networks, e.g. Gigabit Ethernet Passive Optical Network (GE-PON), ATM-based Passive Optical Network (A-PON), PON-Ring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q11/00—Selecting arrangements for multiplex systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q11/00—Selecting arrangements for multiplex systems
    • H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
    • H04Q11/0062—Network aspects
    • H04Q2011/0079—Operation or maintenance aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q11/00—Selecting arrangements for multiplex systems
    • H04Q11/0001—Selecting arrangements for multiplex systems using optical switching
    • H04Q11/0062—Network aspects
    • H04Q2011/0079—Operation or maintenance aspects
    • H04Q2011/0081—Fault tolerance; Redundancy; Recovery; Reconfigurability

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请实施例提出了一种日志处理方法、装置、设备和存储介质。其中，该方法包括：确定业务流的事务标识号；为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；根据所述消息日志的故障信息确定业务故障源。本申请实施例的技术方案，通过事务标识号标识业务流，统一了各应用模块中业务流的关联关系，为不同的应用模块提供相同格式的消息日志，降低消息日志的处理难度，凸显业务故障源，可降低消息日志处理难度和增强故障定位的准确性。

Description

日志处理方法、装置、设备和存储介质
技术领域
本申请涉及电信设备领域，具体涉及一种日志处理方法、装置、系统和存储介质。
背景技术
当前光传送网(Optical Transport Network,OTN)设备通过自动交换光网络(Automatically Switched Opetical，ASON)协议实现控制平面的接入，使设备在ASON的自动控制下，保证网络的高效及时和智能可靠。然而，基于ASON的控制面管理架构，从上游控制器到下游单板，经过众多的应用模块，各应用模块记录的消息日志格式不统一，甚至缺少消息日志。此外，消息日志通常以二进制形式记录，当业务数据爆炸性增长后，通过传统的“数字节”的方式对消息日志进行解析，通常无法体现业务流的关联关系，无法准确定位故障位置。
发明内容
本申请提供了一种日志处理方法、装置、设备和存储介质。
本申请实施例提供的一种日志处理方法包括：
确定业务流的事务标识号；为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；根据所述消息日志的故障信息确定业务故障源。
本申请实施例提供的一种日志处理装置包括：
标识确定模块，用于确定业务流的事务标识号；
日志生成模块，用于为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；
日志分析模块，用于根据所述消息日志的故障信息确定业务故障源。
本申请实施例提供的一种设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本申请实施例中任一所述的日志处理方法。
本申请实施例提供的一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请实施例中任一所述的日志处理方法。
本申请实施例的技术方案，通过对业务流生成事务标识号，根据事务标识号在各应用模块处生成消息日志，根据消息日志的故障信息确定业务故障源，本申请实施例的通过事务标识号为不同的业务模块提供相同格式的消息日志，通过事务标识号体现业务流的关联关系，降低了消息日志处理的难度，可提高故障源的定位准确度。
关于本申请的以上实施例和其他方面以及其实现方式，在附图说明、具体实施方式和权利要求中提供更多说明。
附图说明
图1是本申请实施例提供的一种日志处理方法的步骤流程图；
图2是本申请实施例提供的另一种日志处理方法的步骤流程图；
图3是本申请实施例提供的另一种日志处理方法的步骤流程图；
图4是本申请实施例提供的一种日志处理装置的结构示意图；
图5是本申请实施例提供的一种设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚明白，下文中将结合附图对本申请的实施例进行详细说明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
图1是本申请实施例提供的一种日志处理方法的步骤流程图，本申请实施例可应用于处理光传送网设备中消息日志的情况，该方法可由本申请实施例中的日志处理装置来执行，该装置可以通过软件和/或硬件的方式实现，参见图1，本申请实施例的方法具体包括如下步骤：
步骤101、确定业务流的事务标识号。
其中，业务流可以是光传送网设备中传输的数据流，可以是光传送网设备上承载的业务相关的数据，业务流可以由光传送网设备中的应用模块处理，一个业务流可以被多个应用模块处理，例如，业务流a可以先通过应用模块A处理，再由应用模块B进行处理。
具体的，事务标识号可以是用于标识业务流的标识号，在光传输网设备中事务标识号可以全局唯一，不同的业务流对应的事务标识号可以不同，可以为各业务流生成对应的事务标识号。
步骤102、为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志。
其中，应用模块可以是搭载在光传送网设备上的软件模块或者硬件模块，应用模块可以通过对业务流进行处理实现相关业务功能；消息日志可以是记录业务流处理过程的数据文件，消息日志存储在光传送网设备的存储空间上。
具体的，处理业务流的应用模块可以通过调用公共应用软件接口实现消息日志的生成，消息日志中的日志记录与业务流对应，多个业务流可以对应相同的日志记录，可以理解的是，消息日志可以通过事务标识号进行标识，消息日志可以存储在应用本申请方法的设备存储空间。
步骤103、根据所述消息日志的故障信息确定业务故障源。
其中，故障信息可以是消息日志中存储的错误信息，可以是处理业务流产生的失败信息，也可以是处理业务流产生的超时信息等，业务故障源可以是处理业务流失败的应用模块，例如，一个业务流可以被应用模块A、应用模块B和应用模块C处理，该业务流在应用模块B进行处理时发生错误，该业务流的业务故障源可以是应用模块B。
在本申请实施例中，可以对消息日志进行分析获取到其中的故障信息，可以根据故障信息获取到该故障发生的业务故障源，示例性的，由于本申请中的消息日志为统一格式，可以根据正则表达式在消息日志中匹配故障信息，可以对故障信息进行分析获取业务故障源。
本申请实施例的技术方案，通过确定业务流的事务标识号，为处理业务流的应用模块生成消息日志，消息日志可以与事务标识号关联，基于消息日志内的故障信息确定业务故障源，明确了在各应用模块中业务流的关联关系，降低了消息日志处理的难度，可提高业务故障源定位的准确程度。
图2是本申请实施例提供的另一种日志处理方法的步骤流程图；本申请实施例对生成消息日志的方式进行了具体化，参见图2，本申请实施例的提供的日志处理方法包括：
步骤201、通过预设校验算法根据当前系统时间生成校验值。
其中，预设校验算法可以是预先设定校验算法，可以根据系统时间生成校验值，预设校验算法具体可以是循环冗余校验(Cyclic Redundancy Check，CRC)算法，当前系统时间可以是实现本申请日志处理方法的设备中的系统时间，例如，可以是智能终端或者光传送设备的系统时间，校验值可以是对当前系统时间转换后生成的数位组，校验值的位数可以固定，校验值可以用于生成业务流的事务标识号。
具体的，可以获取到实现本申请实施例方法的设备系统时间，可以对系统时间按照预设校验算法进行处理生成校验值。
步骤202、生成所述业务流的随机数，根据所述随机数和所述校验值生成所述业务流的所述事务标识号，其中，所述事务标识号全局唯一。
其中，随机数可以是随机生成的数值，随机数对应业务流生成，不同的业务流生成的随机数可以不同。
在本申请实施例中，可以针对各业务流生成对应的随机数，可以将基于系统时间生成的校验值与随机数进行求和运算，可以将随机数与校验值之和作为业务流对应的事务标识号，可以理解的是，根据随机数和校验值生成业务流对应的事务标识号的方式不唯一，还可以将随机数与校验值的差值、异或值和与值作为业务流对应的事务标识号。可以理解的是，由于不同的业务流的随机数不相同，当业务流对应的系统时间相同时，业务流对应的事务标识号也可以不同，业务流对应的事务标识号全局唯一，可以与其他业务流的事务标识号不重复。
步骤203、根据所述应用模块的消息报文协议确定对应的报文提取规则。
其中，消息报文协议可以是应用模块解析业务流的处理方式，消息报文协议具体可以存储在统一消息模型装置中，该统一消息模型装置可以为应用模块提供多种协议的接口，例如UC口、MIM口、S口、UIL口和U口等，应用模块可以调用统一消息模块装置获取到对应的报文提取规则。
具体的，可以调用统一消息模块装置读取到处理业务流的报文提取规则，报文提取规则中可以包括消息结构文件、公共头文件以及消息报文类型等，进一步的，报文类型可以与业务流中的消息码关联存储，报文类型可以在统一消息模块装置中存储为一个哈希表，索引可以是消息码，可以通过业务流中的消息码在统一消息模型装置中查找到对应的报文类型。
步骤204、根据所述报文提取规则提取所述业务流的报文内容。
具体的，报文内容可以是业务流中的业务数据，应用模块由于可以处理的消息报文的报文格式不同，可以获取到的报文提取规则对业务流内的消息报文进行解析，获取到对应业务流内消息报文的报文内容。
步骤205、将所述报文内容与所述业务流的事务标识号关联存储为消息日志。
其中，消息日志可以是日志记录组成的文本文件，消息日志可以存储在应用本申请实施例方法的设备存储空间。
在本申请实施例中，可以将应用模块中处理的报文内容存储为消息日志，为了对报文内容进行标识，将业务流的事务标识号与对应的报文内容一并存储到消息日志作为消息日志的日志记录序号。进一步的，消息日志中还可以存储应用模块对报文内容的处理操作和业务流中消息报文的收发方向。
步骤206、获取所述消息日志内的日志记录组成消息队列。
其中，日志记录可以是消息日志的组成部分，日志记录中可以包括应用模块对业务流的操作信息、应用模块处理的报文内容、应用模块处理消息报文的报文方向等，消息队列可以是用于对日志记录进行分析的存储空间，具体可以是实现本申请实施例方法的设备的缓存空间。
具体的，可以将消息日志内的日志记录读取到消息队列，其中，读取到消息队列中的日志记录可以是与预设关键字匹配的日志记录。示例性的，可以通过正则表达式在消息日志内选择与预设关键字匹配的日志记录添加到消息队列。
步骤207、获取所述消息队列中的故障信息，并按照预设格式进行展示以确定业务故障源。
其中，故障信息可以是应用模块处理业务流时产生故障的信息，故障信息可以存储在消息日志中。
在本申请实施例中，可以提取消息队列中日志记录的故障信息，故障信息可以具体是日志记录的一个或者多个字段，可以将消息队列中的日志记录进行展示，并将故障信息进行突出显示，例如，可以将故障信息以增大字号或者描粗字体的方式进行显示，其中，预设格式可以是对故障信息进行突出展示的格式，还可以包括高亮显示或者改变字体等，可以通过对故障信息的展示帮助用户及时发现业务故障源，可以理解的是，故障信息还可以与事务标识号一同展示，便于梳理业务故障对应的故障业务流。
本申请实施例的技术方案，通过预设校验算法根据当前系统时间确定校验值，生成业务流对应的随机数，根据校验值和随机数确定业务流对应的事务标识号，根据应用模块的消息报文协议确定对应的报文提取规则，根据报文提取规则提取业务流中的报文内容，将报文内容和事务标识号存储为消息日志，获取消息日志内日志记录组成消息队列，获取消息队列中的故障信息，并将故障信息按照预设格式展示以确定业务故障源，实现了业务故障源的快速确定，降低了消息日志的处理难度，可增强业务的稳定性。
一种实施方式中，将所述报文内容与所述事务标识号关联存储为消息日志，包括：
将所述报文内容与所述事务标识号存储作为业务消息日志；读取至少两个所述应用模块的所述业务消息日志合并作为所述消息日志。
在本申请实施例中，在生成消息日志时，可以将先将报文内容作为业务消息日志存储在设备存储空间中，各应用模块可以存储有各自的业务消息日志，可以读取各应用模块中的业务消息日志进行合并，可以将合并后的业务消息日志文件作为消息日志。
图3是本申请实施例提供的另一种日志处理方法的步骤流程图；参见图3，本申请实施例提供的日志处理方法包括：
步骤301、通过预设校验算法根据当前系统时间生成校验值。
步骤302、生成所述业务流的随机数，根据所述随机数和所述校验值生成所述业务流的所述事务标识号，其中，所述事务标识号全局唯一。
步骤303、根据所述应用模块的消息报文协议确定对应的报文提取规则。
步骤304、根据所述报文提取规则提取所述业务流的报文内容。
步骤305、将所述报文内容与所述业务流的事务标识号关联存储为消息日志。
步骤306、根据预设关键字匹配所述消息日志内的目标日志记录，将所述目标日志记录存储到所述消息队列。
其中，预设关键字可以是筛序目标日志记录的关键字，具体可以是报文方向和报文类型等，目标日志记录可以是与预设关键字匹配的消息日志的日志记录，目标日志记录中可以包括预设关键字。
具体的，可以根据预设关键字对消息日志内日志记录进行匹配，当日志记录存在预设关键字时，可以将该日志记录作为目标日志记录，可以理解的是，在消息日志内可以通过匹配预设关键字获取到多个目标日志记录。可以将获取到的目标日志记录添加到消息队列中。
步骤307、根据预设过滤关键字过滤所述消息队列内的日志记录。
在本申请实施例中，可以对消息队列中日志记录进行过滤，当日志记录包含预设过滤关键字时，可以将该日志记录从消息队列中清除。
步骤308、按照所述事务标识号的顺序将所述消息队列内的日志记录进行排序展示。
具体的，为了便于直观显示故障信息，可以按照事务标识号的顺序将消息队列中的日志记录进行排序，可以将排序后的消息队列进行展示。进一步的，可以将属于相同事务标识号的日志记录按照请求消息和应答消息的顺序进行显示，对应相同事务标识号的日志记录还可以根据时间先后顺序依次进行显示。
步骤309、所述日志记录中的故障信息以红色高亮标识，其中，故障信息包括应答失败信息和超时失败信息中至少一种。
具体的，可以将故障信息以红色高亮的信息进行标识，当消息队列中的日志记录以视图方式展示时，可以凸显显示故障信息，在本申请实施例中故障信息可以包括应用模块处理业务流时的应对失败信息和超时失败信息。
示例性的，SND控制器对电/光层业务进行配置，可以对每条业务流生成唯一的事务ID，事务ID可以实现业务流在各应用模块中的关联，业务模块通过调用统一消息接口记录消息报文作为消息日志，消息日志中还可以包括下发报文和配置结果应对报文，可以读取静态消息结构XML文件和固定公共头文件，获取到预先设定的消息报文解析原型，消息报文解析原型可以存放在一个全局哈希表中，该全局哈希表的索引可以为消息码，消息报文解析原型和消息码可以一一对应。可以从消息日志中将存储的消息提取，提取的方式可以通过python正则表达式提取与关键字匹配的字段，可以将提取到的字段存储到消息队列。可以对消息队列中的消息进行过滤，丢弃匹配过滤条件的消息，可以根据统一消息模型获取消息解析原型，根据消息解析原型与消息队列中的消息仅对比，根据消息解析原型中属性类型定义的占用长度解析消息内容，为了便于直观显示，可以对解析出的消息内容按照业务ID进行排序，属于同一业务流的消息内容可以按照实际顺序进行排序，归属一条业务流的请求消息和应答消息一起显示，业务流内部按照时间先后依次显示，业务配置应答结果失败和超时用红色高亮标示，通过对应答结果的判断，可以快速定位到业务故障的界限区域。
本申请实施例的技术方案，通过预设校验算法根据当前系统时间确定校验值，生成业务流对应的随机数，根据校验值和随机数确定业务流对应的事务标识号，根据应用模块的消息报文协议确定对应的报文提取规则，根据报文提取规则提取业务流中的报文内容，将报文内容和事务标识号存储为消息日志，获取消息日志内日志记录组成消息队列，获取消息队列中的故障信息，并将故障信息按照预设格式展示以确定业务故障源，实现了业务故障源的快速确定，降低了消息日志的处理难度，可增强业务的稳定性。
图4是本申请实施例提供的一种日志处理装置的结构示意图；本申请实施例提供的日志处理装置可以执行本申请任意实施例提供的日志处理方法，具备执行方法相应的功能模块和有益效果。该装置可以由软件和/或硬件实现，具体包括：标识确定模块401、日志生成模块402和日志分析模块403。
其中，标识确定模块401，用于确定业务流的事务标识号。
日志生成模块402，用于为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志。
日志分析模块403，用于根据所述消息日志的故障信息确定业务故障源。
本申请实施例的技术方案，通过标识确定模块确定业务流的事务标识号，日志生成模块为处理业务流的应用模块生成消息日志，消息日志可以与事务标识号关联，日志分析模块基于消息日志内的故障信息确定业务故障源，明确了在各应用模块中业务流的关联关系，降低了消息日志处理的难度，可提高业务故障源定位的准确程度。
一种实施方式中，标识确定模块401包括：
校验值单元，用于通过预设校验算法根据当前系统时间生成校验值。
标识单元，用于生成所述业务流的随机数，根据所述随机数和所述校验值生成所述业务流的所述事务标识号，其中，所述事务标识号全局唯一。
一种实施方式中，日志生成模块402包括：
规则确定单元，用于根据所述应用模块的消息报文协议确定对应的报文提取规则。
内容提取单元，用于根据所述报文提取规则提取所述业务流的报文内容。
日志存储单元，用于将所述报文内容与所述业务流的事务标识号关联存储为消息日志。
一种实施方式中，日志存储单元包括：
业务日志子单元，用于将所述报文内容与所述事务标识号存储作为业务消息日志。
合并日志子单元，用于读取至少两个所述应用模块的所述业务消息日志合并作为所述消息日志。
一种实施方式中，日志分析模块403包括：
消息队列单元，用于获取所述消息日志内的日志记录组成消息队列。
故障信息单元，用于获取所述消息队列中的故障信息，并按照预设格式进行展示以确定业务故障源。
一种实施方式中，消息队列单元包括：
记录读取子单元，用于根据预设关键字匹配所述消息日志内的目标日志记录，将所述目标日志记录存储到所述消息队列。
记录过滤子单元，用于根据预设过滤关键字过滤所述消息队列内的日志记录。
一种实施方式中，故障信息单元包括：
消息排序子单元，用于按照所述事务标识号的顺序将所述消息队列内的日志记录进行排序展示。
突出显示子单元，用于所述日志记录中的故障信息以红色高亮标识，其中，故障信息包括应答失败信息和超时失败信息中至少一种。
图5是本申请实施例提供的一种设备的结构示意图，如图5所示，该设备包括处理器50、存储器51、输入装置52和输出装置53；设备中处理器50的数量可以是一个或多个，图5中以一个处理器50为例；设备处理器50、存储器51、输入装置52和输出装置53可以通过总线或其他方式连接，图5中以通过总线连接为例。
存储器51作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本申请实施例日志处理装置对应的模块(标识确定模块401、日志生成模块402和日志分析模块403)。处理器50通过运行存储在存储器51中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的日志处理方法。
存储器51可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器51可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器51可进一步包括相对于处理器50远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置52可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置53可包括显示屏等显示设备。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种日志处理方法，该方法包括：
确定业务流的事务标识号；为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；根据所述消息日志的故障信息确定业务故障源。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作，还可以执行本申请任意实施例所提供的日志处理方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请实施例所述的方法。
值得注意的是，上述日志处理装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。
本领域内的技术人员应明白，术语用户终端涵盖任何适合类型的无线用户设备，例如移动电话、便携数据处理装置、便携网络浏览器或车载移动台。
一般来说，本申请的多种实施例可以在硬件或专用电路、软件、逻辑或其任何组合中实现。例如，一些方面可以被实现在硬件中，而其它方面可以被实现在可以被控制器、微处理器或其它计算装置执行的固件或软件中，尽管本申请不限于此。
本申请的实施例可以通过移动装置的数据处理器执行计算机程序指令来实现，例如在处理器实体中，或者通过硬件，或者通过软件和硬件的组合。计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码。
本申请附图中的任何逻辑流程的框图可以表示程序步骤，或者可以表示相互连接的逻辑电路、模块和功能，或者可以表示程序步骤与逻辑电路、模块和功能的组合。计算机程序可以存储在存储器上。存储器可以具有任何适合于本地技术环境的类型并且可以使用任何适合的数据存储技术实现，例如但不限于只读存储器(ROM)、随机访问存储器(RAM)、光存储器装置和系统(数码多功能光碟DVD或CD光盘)等。计算机可读介质可以包括非瞬时性存储介质。数据处理器可以是任何适合于本地技术环境的类型，例如但不限于通用计算机、专用计算机、微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、可编程逻辑器件(FGPA)以及基于多核处理器架构的处理器。
通过示范性和非限制性的示例，上文已提供了对本申请的示范实施例的详细描述。但结合附图和权利要求来考虑，对以上实施例的多种修改和调整对本领域技术人员来说是显而易见的，但不偏离本发明的范围。因此，本发明的恰当范围将根据权利要求确定。

Claims (10)

1.一种日志处理方法，其特征在于，包括：
确定业务流的事务标识号；
为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；
根据所述消息日志的故障信息确定业务故障源。
2.根据权利要求1所述的方法，其特征在于，所述确定业务流的事务标识号，包括：
通过预设校验算法根据当前系统时间生成校验值；
生成所述业务流的随机数，根据所述随机数和所述校验值生成所述业务流的所述事务标识号，其中，所述事务标识号全局唯一。
3.根据权利要求1所述的方法，其特征在于，所述为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志，包括：
根据所述应用模块的消息报文协议确定对应的报文提取规则；
根据所述报文提取规则提取所述业务流的报文内容；
将所述报文内容与所述业务流的事务标识号关联存储为消息日志。
4.根据权利要求3所述的方法，其特征在于，将所述报文内容与所述事务标识号关联存储为消息日志，包括：
将所述报文内容与所述事务标识号存储作为业务消息日志；
读取至少两个所述应用模块的所述业务消息日志合并作为所述消息日志。
5.根据权利要求1所述的方法，其特征在于，所述根据所述消息日志的故障信息确定业务故障源，包括：
获取所述消息日志内的日志记录组成消息队列；
获取所述消息队列中的故障信息，并按照预设格式进行展示以确定业务故障源。
6.根据权利要求5所述的方法，其特征在于，所述获取所述消息日志内的日志记录组成消息队列，包括：
根据预设关键字匹配所述消息日志内的目标日志记录，将所述目标日志记录存储到所述消息队列；
根据预设过滤关键字过滤所述消息队列内的日志记录。
7.根据权利要求5所述的方法，其特征在于，所述获取所述消息队列中的故障信息，并按照预设格式进行展示以确定业务故障源，包括：
按照所述事务标识号的顺序将所述消息队列内的日志记录进行排序展示；
所述日志记录中的故障信息以红色高亮标识，其中，故障信息包括应答失败信息和超时失败信息中至少一种。
8.一种日志处理装置，其特征在于，包括：
标识确定模块，用于确定业务流的事务标识号；
日志生成模块，用于为处理所述业务流的应用模块生成与所述事务标识号关联的消息日志；
日志分析模块，用于根据所述消息日志的故障信息确定业务故障源。
9.一种设备，其特征在于，所述设备包括：
一个或多个处理器；
存储器，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的日志处理方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的日志处理方法。
CN201911364466.9A 2019-12-26 2019-12-26 日志处理方法、装置、设备和存储介质 Pending CN113055760A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911364466.9A CN113055760A (zh) 2019-12-26 2019-12-26 日志处理方法、装置、设备和存储介质
PCT/CN2020/139801 WO2021129849A1 (zh) 2019-12-26 2020-12-27 日志处理方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911364466.9A CN113055760A (zh) 2019-12-26 2019-12-26 日志处理方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN113055760A true CN113055760A (zh) 2021-06-29

Family

ID=76505886

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911364466.9A Pending CN113055760A (zh) 2019-12-26 2019-12-26 日志处理方法、装置、设备和存储介质

Country Status (2)

Country Link
CN (1) CN113055760A (zh)
WO (1) WO2021129849A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115242606A (zh) * 2022-06-21 2022-10-25 北京字跳网络技术有限公司 数据处理方法、装置、服务器、存储介质及程序产品

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102238023B (zh) * 2010-04-23 2014-03-19 中兴通讯股份有限公司 一种生成网络管理系统的告警数据的方法及装置
US8635617B2 (en) * 2010-09-30 2014-01-21 Microsoft Corporation Tracking requests that flow between subsystems using transaction identifiers for generating log data
CN105099735B (zh) * 2014-05-07 2018-05-22 中国移动通信集团福建有限公司 一种获取海量详细日志的方法及系统
CN105577454A (zh) * 2016-03-03 2016-05-11 上海新炬网络信息技术有限公司 一种基于日志快速定位业务故障的方法
CN107861833B (zh) * 2017-10-30 2020-01-21 平安科技（深圳）有限公司 识别码的生成方法和装置、计算机设备、可读存储介质
CN110113200A (zh) * 2019-04-29 2019-08-09 平安科技（深圳）有限公司 链路系统与日志系统的关联方法、装置及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115242606A (zh) * 2022-06-21 2022-10-25 北京字跳网络技术有限公司 数据处理方法、装置、服务器、存储介质及程序产品
CN115242606B (zh) * 2022-06-21 2024-04-16 北京字跳网络技术有限公司 数据处理方法、装置、服务器、存储介质及程序产品

Also Published As

Publication number Publication date
WO2021129849A1 (zh) 2021-07-01

Similar Documents

Publication Publication Date Title
CN109510737B (zh) 协议接口测试方法、装置、计算机设备和存储介质
WO2018113385A1 (zh) 对客户端的应用程序动态埋点的方法、系统、客户端及服务器
US9973521B2 (en) System and method for field extraction of data contained within a log stream
CN111917740B (zh) 一种异常流量告警日志检测方法、装置、设备及介质
CN102647414B (zh) 协议解析方法、设备及系统
CN114185708A (zh) 基于分布式链路追踪的数据分析方法、装置和电子设备
CN113987074A (zh) 分布式服务全链路监控方法、装置、电子设备及存储介质
CN107977473B (zh) 基于Logback的分布式系统日志的检索方法和系统
US11886818B2 (en) Method and apparatus for detecting anomalies in mission critical environments
CN111079408A (zh) 一种语种识别方法、装置、设备及存储介质
CN113706176A (zh) 一种结合云计算的信息反欺诈处理方法及服务平台系统
CN111126071A (zh) 提问文本数据的确定方法、装置和客服群的数据处理方法
CN110888791A (zh) 一种日志处理方法、装置、设备和存储介质
CN113055760A (zh) 日志处理方法、装置、设备和存储介质
CN111966339B (zh) 埋点参数的录入方法、装置、计算机设备和存储介质
CN111581057B (zh) 一种通用日志解析方法、终端设备及存储介质
CN110442439B (zh) 任务进程处理方法、装置和计算机设备
CN111767161A (zh) 远程调用深度识别方法、装置、计算机设备及可读存储介质
CN115328734A (zh) 跨服务的日志处理方法、装置及服务器
CN114281761A (zh) 一种数据文件加载方法、装置、计算机设备及存储介质
CN114996080A (zh) 数据处理方法、装置、设备及存储介质
CN112131611A (zh) 数据正确性验证方法、装置、设备、系统及存储介质
CN113496035A (zh) 信息、笔记信息、代码检测方法、设备及存储介质
CN106777010B (zh) 日志的提供方法、装置以及日志的获取方法、装置和系统
CN107609008A (zh) 一种基于Apache Sqoop的从关系型数据库到Kafka的数据导入装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination