CN111026604B - 一种日志文件解析方法及装置 - Google Patents

Abstract

本发明公开了一种日志文件解析方法及装置，属于计算机技术领域，方法包括：在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；对多个单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；对每个单行文本进行解析得到关键字段，并记录至字段键值对列表中。本发明实施例通过对现有日志文件的二次加工，能够实现将任意格式的日志文件格式转化为标准化的数据格式，从而实现很友好地向非技术用户进行显示日志信息，以便在RPA流程发生异常时，快速定位到异常。

Description

一种日志文件解析方法及装置

技术领域

本发明涉及计算机技术领域，特别涉及一种日志文件解析方法及装置。

背景技术

RPA(Robotic Process Automation，机器人流程自动化)是一种自动化工具，用于创建软件机器人的虚拟劳动力，从而优化和降低企业中端到端业务流程的成本。RPA可以翻译成机器人流程自动化，也可翻译成软件机器人、虚拟劳动者，是可以记录人在计算机上的操作，并重复运行的软件。

目前RPA设计器为流程中的每个组件定义了全局唯一的编号。在生成的RPA流程脚本中，该编号以入参的形式传递给相应的组件调用，RPA流程脚本的运行日志以文本形式写入到指定目录下。RPA设计器可以通过文件数据流的方式读取日志文件，实现进程间的信息交换。

然而，通过上述方式处理RPA流程状态信息时存在两方面的问题：一方面是由于这些日志信息包含了流程脚本运行时的堆栈信息，通常具有很强的技术性，无法很友好地向非技术用户进行显示；另一方面是日志文件中的行与RPA流程的组件并非一一对应关系，用户无法根据日志信息跳转到相应的RPA组件。

发明内容

本发明旨在至少解决现有技术或相关技术中存在的技术问题之一，为此本发明提供一种日志文件解析方法及装置。

本发明实施例提供的具体技术方案如下：

第一方面，提供了一种日志文件解析方法，所述方法包括：

在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；

对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个所述区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；

对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中。

进一步地，所述在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本，包括：

逐行扫描所述日志文件，得到所述日志文件中的所有行文本；

对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

进一步地，所述对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，包括：

按照预设的区域标志头，对多个所述单行文本进行区域解析，形成各个所述区域；

分别对各个所述区域内的单行文本进行区域解析，形成各个所述区域的子区域；

通过递归的方式继续对各个所述子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

进一步地，所述对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中，包括：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；

根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

进一步地，所述关键字段中至少包括RPA组件的唯一标识，所述方法还包括：

根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

第二方面，提供了一种日志文件解析装置，所述装置包括：

行解析模块，用于在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；

区域解析模块，用于对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个所述区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；

字段解析模块，用于对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中。

进一步地，所述行解析模块具体用于：

逐行扫描所述日志文件，得到所述日志文件中的所有行文本；

对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

进一步地，所述区域解析模块具体用于：

按照预设的区域标志头，对多个所述单行文本进行区域解析，形成各个所述区域；

分别对各个所述区域内的单行文本进行区域解析，形成各个所述区域的子区域；

通过递归的方式继续对各个所述子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

进一步地，所述字段解析模块具体用于：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；

根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

进一步地，所述关键字段中至少包括RPA组件的唯一标识，所述装置还包括：

关联模块，用于根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

第三方面，提供了一种计算机设备，包括：

一个或者多个处理器；

存储器；

存储在存储器中的程序，当被一个或者多个处理器执行时，程序使处理器执行如第一方面所述的日志文件解析方法的步骤。

第四方面，提供了一种计算机可读存储介质，计算机可读存储介质存储有程序，当程序被处理器执行时，使得处理器执行如第一方面所述的日志文件解析方法的步骤。

本发明实施例提供一种日志文件解析方法及装置，通过在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；对多个单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；对每个单行文本进行解析得到关键字段，并记录至字段键值对列表中，由此通过对现有日志文件的二次加工，能够实现将任意格式的日志文件格式转化为标准化的数据格式，从而实现很友好地向非技术用户进行显示日志信息，以便在RPA流程发生异常时，快速定位到异常。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种日志文件解析方法的流程示意图；

图2a是本发明实施例提供的日志解析前的界面示意图；

图2b是本发明实施例提供的日志解析后的界面示意图；

图2c是本发明实施例提供的代码跳转的界面示意图；

图3是本发明实施例提供的一种日志文件解析装置的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本申请的描述中，除非另有说明，“多个”的含义是两个或两个以上。

本发明实施例提出一种日志文件解析方法，通过对RPA流程的日志文件进行行解析、区域解析以及字段解析，能够将任意格式的日志统一转化为一种标准的数据格式，实现日志格式的标准化转换以及基于日志信息的其他功能，例如日志跳转、组件是否执行成功、执行的开始时间和结束时间等功能。

图1示出了本发明实施例提供的日志文件解析方法的流程示意图。该日志文件解析方法应用于终端，终端可以但不限于是各种个人计算机、笔记本电脑、智能手机和平板电脑等，如图1所示，该日志文件解析方法可以包括：

101，在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本。

其中，RPA流程的日志文件中包含：RPA流程脚本运行时所调用的每个组件的编号、每个组件所执行的动作名称、执行结果、执行时间等信息。

通常在日志文件中，会因长度或视觉友好性等问题，存在针对同一信息的多行文本，这里，针对同一信息的多行文本是指对应同一条记录的多个文本，一条记录对应一次用户操作，例如，打开浏览器、输入网址、页面点击等用户操作。

具体地，逐行扫描所述日志文件，得到所述日志文件中的所有行文本，对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

其中，无效信息具体可以为日志中的冗余信息，行标志头用于表征日志文件中的各行日志的开头，通常是由软件开发者预先设定的，例如设定以时间日期作为行标志头。

其中，行标志头是指单行文本开始的关键字段，于本实施例中，预设的行标志头为可以转换成预设格式的字符串，预设格式例如时间格式或GUID(Globally UniqueIdentifier，全局唯一标识符)格式。

具体地，对预设的行标志头在所有行文本中进行匹配检测，根据匹配检测结果，将针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。本实施例中，在获得多个单行文本后，将多个单行文本记录至有效信息列表。

102，对多个单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个区域对象中均包含属于本区域的所有单行文本以及子区域对象列表。

具体地，该过程可以包括：

a，按照预设的区域标志头，对多个单行文本进行区域解析，形成各个区域。

本实施例中，区域标志头是指区域开始的关键字段，区域标志头可以由软件开发者预先进行设定。

在具体实施过程中，可以对预设的区域标志头在多个单行文本中进行逐行匹配检测，根据匹配检测结果形成各个区域。具体来说，在多个单行文本中进行逐行匹配检测，检测出包含区域标志头的至少一个关键单行文本，根据至少一个关键单行文本，对多个单行文本进行区域划分，形成各个区域。

示例性地，假设对RPA流程的日志文件形成10行单行文本，对这10行文本进行逐行匹配检测，若在第1行文本、第7行中分别检测到区域标志头，则第1行至第6行的文本形成一个区域，将第7行至第10行的文本形成另一个区域，若仅第1行文本中检测到区域标志头，将则第1行文本至第10行文本形成一个区域。

b，分别对各个区域内的单行文本进行区域解析，形成各个区域的子区域。

在具体实施过程中，针对每个区域内的单行文本，可以对预设的子区域标志头在该区域的单行文本中进行逐行匹配检测，根据匹配检测结果形成该区域的子区域。其中，子区域标志头是指一个区域的子区域开始的关键字段，子区域标志头可以由软件开发者预先进行设定。具体来说，在每个区域内的单行文本中进行逐行匹配检测，检测出包含子区域标志头的至少一个目标单行文本，根据至少一个目标单行文本，对每个区域内的单行文本中进行区域划分，形成各个区域的子区域。

c，通过递归的方式继续对各个子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

本实施例中，可以通过自动调用区域解析规则将有效信息列表中的所有单行文本转换为一个Area对象列表，每一个Area对象中都会包含属于本区域的所有行列表数据及子区域对象列表，其中，Area对象包含基本的数据寻址方法以及子区域的构造方式。Area对象列表是以区域列表的数据形式存放在内存中的。

103，对每个单行文本进行解析得到关键字段，并记录至字段键值对列表中。

具体地，该过程可以包括：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

其中，一个单行文本所匹配的指定规则用于指示在该单行文本中找到预先设定的key的value，也就是说，一个指定规则对应一个预先设定的key；字段标志头和字段标志尾可以是由软件开发者预先设定，例如，某个指定规则所包括的字段标志头可以是单行文本的首字符，字段标志尾可以是单行文本中的特殊字符，比如“-”。示例性地，假如某行单行文本的内容如下：

“2019-08-02 15:58:21,155-INFO-开始执行流程：TaxRobotModule”；

该行单行文本匹配到的指定规则有两个，分别对应Time和Action，Time和Action均为预先设定的key，则可以根据这两个指定规则各自包括的字段标志头和字段标志尾，在上述的单行文本中分别找到时间匹配出Time的Value，找到开始执行流程匹配到Action的Value。

需要说明的是，一个单行文本匹配到的指定规则的数量可以是一个或多个。

本实施例中，由于不同格式的日志的行信息很难做到统一，即使使用同一种日志工具，输出的结果也会有很大的差异性，针对这一情况，在实现了字段解析的基础上，通过键值对字段对象用以表述行内的关键字元并帮助开发者进行文本到对象的转换，开发者可以基于此类型减少代码的编写。

示例性地，假设RPA流程的日志信息解析前的界面如图2a所示，通过本发明实施例提供的方法对日志信息进行解析转换得到Area对象列表，Area对象列表会以区域列表的数据形式存放在内存中，并不会直接进行展现给用户，此时可以由开发人员根据UI情况提取相应的数据进行呈现，从而可以得到如图2b中所示的日志信息。

本实施例中，通过完成对日志文件中的行、区域、字段进行解析，从而实现将任意格式的日志文件格式转化为标准化的数据格式，进而在此基础上可以实现更多功能，例如，实现日志跳转，或利用ILogAction等接口，获得日志中组件执行是否成功、开始和结束的时间等功能。

进一步地，关键字段中至少包括RPA组件的唯一标识，在执行步骤103之后，本发明实施例提供的方法还可以包括：

根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

其中，RPA组件的唯一标识可以是RPA组件的唯一编号。

本实施例中，当RPA流程运行出现异常时，通过日志解析能够友好地提示异常发生的位置与异常的详细信息，并且，通过对每个所述单行文本与对应的RPA组件进行关联，用户可以根据异常信息所在的单行文本直接跳转到对应的RPA组件，从而实现开发人员快速定位到异常的组件代码，有助于提高RPA流程的开发效率，如图2c所示。

本发明实施例提供一种日志文件解析方法，通过在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；对多个单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；对每个单行文本进行解析得到关键字段，并记录至字段键值对列表中，由此通过对现有日志文件的二次加工，能够实现将任意格式的日志文件格式转化为标准化的数据格式，从而实现很友好地向非技术用户进行显示日志信息，以便在RPA流程发生异常时，快速定位到异常。

实施例二

本发明实施例提供了一种日志文件解析装置，如图3所示，所述装置包括：

行解析模块31，用于在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；

区域解析模块32，用于对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个所述区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；

字段解析模块33，用于对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中。

进一步地，所述行解析模块31具体用于：

逐行扫描所述日志文件，得到所述日志文件中的所有行文本；

对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

进一步地，所述区域解析模块32具体用于：

按照预设的区域标志头，对多个所述单行文本进行区域解析，形成各个所述区域；

分别对各个所述区域内的单行文本进行区域解析，形成各个所述区域的子区域；

通过递归的方式继续对各个所述子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

进一步地，所述字段解析模块33具体用于：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；

根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

进一步地，所述关键字段中至少包括RPA组件的唯一标识，所述装置还包括：

关联模块，用于根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

本实施例提供的日志文件解析装置，与本发明实施例提供的日志文件解析方法属于同一发明构思，可执行本发明实施例所提供的日志文件解析方法，具备执行日志文件解析方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明实施例提供的日志文件解析方法，此处不再加以赘述。

此外，本发明另一实施例还提供了一种计算机设备，包括：

一个或者多个处理器；

存储器；

存储在存储器中的程序，当被一个或者多个处理器执行时，程序使处理器执行如上述实施例所述的日志文件解析方法的步骤。

此外，本发明另一实施例还提供了一种计算机可读存储介质，计算机可读存储介质存储有程序，当程序被处理器执行时，使得处理器执行如上述实施例所述的日志文件解析方法的步骤。

本领域内的技术人员应明白，本发明实施例中的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例中可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例中可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明实施例中是参照根据本发明实施例中实施例的方法、装置(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个liuc流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明实施例中的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例中范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种日志文件解析方法，其特征在于，所述方法包括：

在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；

对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个所述区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；

对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中。

2.根据权利要求1所述的方法，其特征在于，所述在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本，包括：

逐行扫描所述日志文件，得到所述日志文件中的所有行文本；

对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

3.根据权利要求1所述的方法，其特征在于，所述对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，包括：

按照预设的区域标志头，对多个所述单行文本进行区域解析，形成各个所述区域；

分别对各个所述区域内的单行文本进行区域解析，形成各个所述区域的子区域；

通过递归的方式继续对各个所述子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

4.根据权利要求1所述的方法，其特征在于，所述对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中，包括：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；

根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

5.根据权利要求1至4任一所述的方法，其特征在于，所述关键字段中至少包括RPA组件的唯一标识，所述方法还包括：

根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

6.一种日志文件解析装置，其特征在于，所述装置包括：

行解析模块，用于在RPA流程的日志文件中，将针对同一信息的多行文本解析合并成单行文本，以获得多个单行文本；

区域解析模块，用于对多个所述单行文本进行区域解析，生成包含至少一个区域对象的区域对象列表，其中，各个所述区域对象中均包含属于本区域的所有单行文本以及子区域对象列表；

字段解析模块，用于对每个所述单行文本进行解析得到关键字段，并记录至字段键值对列表中。

7.根据权利要求6所述的装置，其特征在于，所述行解析模块具体用于：

逐行扫描所述日志文件，得到所述日志文件中的所有行文本；

对所述所有行文本分别进行剔除无效信息，并按照预设的行标志头，针对同一信息且剔除无效信息后的多行文本解析合并成单行文本，得到多个单行文本。

8.根据权利要求6所述的装置，其特征在于，所述区域解析模块具体用于：

按照预设的区域标志头，对多个所述单行文本进行区域解析，形成各个所述区域；

分别对各个所述区域内的单行文本进行区域解析，形成各个所述区域的子区域；

通过递归的方式继续对各个所述子区域内的单行文本进行区域解析，直至解析完成所有所述单行文本，生成所述区域对象列表。

9.根据权利要求6所述的装置，其特征在于，所述字段解析模块具体用于：

对每个所述单行文本分别匹配到指定规则，其中，所述指定规则中包括预设的字段标志头和字段标志尾；

根据匹配到的指定规则，从每个所述单行文本中分别解析出关键字段，并记录至字段键值对列表中。

10.根据权利要求6至9任一所述的装置，其特征在于，所述关键字段中至少包括RPA组件的唯一标识，所述装置还包括：

关联模块，用于根据每个所述关键字段中的RPA组件的唯一标识，对每个所述单行文本与对应的RPA组件进行关联。

Images