CN112363904B - log数据分析定位方法、装置及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种log数据分析定位方法，包括：获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；根据遍历结果确定与所述log信息匹配的逻辑检测模型；执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。本发明还公开了一种装置及计算机可读存储介质，本发明提出了一种消费类电子产品中记录的日志中提取关键信息然后自动定位问题的数据分析方法，通过设置预设的逻辑处理模型对日志中的相关数据逻辑进行分析排除的方式，无需人工参与，提高了日志分析效率。

Description

log数据分析定位方法、装置及计算机可读存储介质

技术领域

本发明涉及电子设备log数据分析的技术领域，尤其涉及一种log数据分析定位方法、装置及计算机可读存储介质。

背景技术

现在消费类电子产品中都具有维测日志功能，在产品中记录产品的运行情况。日志的内容包括时间戳、以及可以一些代码中标记打印的日志内容。

产品开发过程中会有各种验收测试或者Beta测试，测试出问题会同步提供对应的日志给到开发分析。目前开发人员都是采用人工的方式来分析日志中的异常点，且日志分析工作中很多都是重复机械的，一天分析的日志数量有限，效率低下。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供一种log数据分析定位方法、装置及计算机可读存储介质，旨在解决现有开发人员采用人工的方式分析日志异常点，而日志分析工作都是重复机械的前提下造成的分析日志数量有限，分析效率低下的技术问题。

为实现上述目的，本发明提供一种log数据分析定位方法，所述log数据分析定位方法包括以下内容：

获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；

根据遍历结果确定与所述log信息匹配的逻辑检测模型；

执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。

可选地，所述获取当前电子设备的log信息的步骤，包括：

通过预设的预处理数据模型对所述log信息进行预处理操作，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型。

可选地，所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤之前，还包括：

根据所述log信息的序列号确认所述log信息是否丢失；

在确认所述log信息未丢失时，通过预设的预处理数据模型对所述log信息进行预处理操作。

可选地，所述跟所述log信息的序列号确认所述log信息是否丢失的步骤之前，还包括：

提取当前电子设备的log信息，以所述log信息的序列号为顺序依次将所述log信息存储至预设的字典列表。

可选地，所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤，包括：

确认执行所述预处理模型的执行结果；

在确认所述执行结果不为空时，输出所述执行结果。

可选地，所述执行所述逻辑检测模型的步骤之前还包括：

若所述逻辑检测模型的第一判定逻辑与所述log信息读取结果匹配，执行所述逻辑检测模型。

可选地，所述log数据分析定位方法，还包括：

新建log数据分析定位插件；

根据当前电子设备应用系统的系统功能接口将所述log数据分析定位插件部署至所述电子设备。

可选地，所述新建log数据分析定位插件的步骤，包括：

在所述log数据分析定位插件中创建数据分析模型，所述数据分析模型包括预处理数据模型及逻辑检测模型，所述预处理数据模型及逻辑检测模型均包括多个。

此外，为实现上述目的，本发明还提供log数据分析定位装置，其特征在于，所述log数据分析定位装置包括：存储器、处理器以及存储在所述存储器上并可以在所述处理器上运行的log数据分析定位程序，所述log数据分析定位程序被处理器执行时实现如上所述的log数据分析定位方法的步骤。

本发明还提供一种计算机可读存储介质，所述计算机可读存储介质包括存储在所述计算机可读存储介质的log数据分析定位程序，所述log数据分析定位程序执行时实现如上所述的log数据分析定位方法的步骤。

本发明实施例提出的一种log数据分析定位方法，通过获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；根据遍历结果确定与所述log信息匹配的逻辑检测模型；执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。本发明提出了一种消费类电子产品中记录的日志中提取关键信息然后自动定位问题的数据分析方法，通过本发明中预设的逻辑分析模型对日志进行数据分析处理，无需人工参与，且预先设置的逻辑分析模型可提前设置并反复使用无需过多的开发工作，在减少了开发工作的前提下提高了电子设备的日志分析效率。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的终端\装置结构示意图；

图2为本发明log数据分析定位方法第一实施例的流程示意图；

图3为本发明log数据分析定位方法第二实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明实施例的主要解决方案是：获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；根据遍历结果确定与所述log信息匹配的逻辑检测模型；执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。

由于现有开发人员采用人工的方式分析日志异常点，而日志分析工作都是重复机械的前提下造成的分析日志数量有限，分析效率低下的技术问题。

本发明提供一种解决方案，提出了一种消费类电子产品中记录的日志中提取关键信息然后自动定位问题的数据分析方法。一般人工分析日志的时间大约为1小时，采用本发明所应用的分析方法对log数据进行自动分析后得出分析结果，提升了电子设备的日志分析效率。

如图1所示，图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。

本发明实施例终端可以是是PC、智能手机、平板电脑、电子书阅读器，便携计算机等可移动式或不可移动式的消费类电子终端设备。

如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及log数据分析定位程序。

在图1所示的终端中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的log数据分析定位程序，并执行以下操作：

获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；

根据遍历结果确定与所述log信息匹配的逻辑检测模型；

执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

通过预设的预处理数据模型对所述log信息进行预处理操作，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

根据所述log信息的序列号确认所述log信息是否丢失；

在确认所述log信息未丢失时，通过预设的预处理数据模型对所述log信息进行预处理操作。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

提取当前电子设备的log信息，以所述log信息的序列号为顺序依次将所述log信息存储至预设的字典列表。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

确认执行所述预处理模型的执行结果；

在确认所述执行结果不为空时，输出所述执行结果。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

若所述逻辑检测模型的第一判定逻辑与所述log信息读取结果匹配，执行所述逻辑检测模型。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

新建log数据分析定位插件；

根据当前电子设备应用系统的系统功能接口将所述log数据分析定位插件部署至所述电子设备。

进一步地，处理器1001可以调用存储器1005中存储的log数据分析定位程序，还执行以下操作：

在所述log数据分析定位插件中创建数据分析模型，所述数据分析模型包括预处理数据模型及逻辑检测模型，所述预处理数据模型及逻辑检测模型均包括多个。

参照图2，图2为本发明log数据分析定位方法第一实施例的流程示意图，所述log数据分析定位方法包括：

步骤S10，获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；

基于当前电子设备的应用，获取所述电子设备的log信息，所述log为系统所指定对象的某些操作和其操作结果按时间有序的集合。Log信息即为日志信息，一般情况下以文件形式存在于终端设备，因此所述log信息亦可定义为日志文件，日志文件记录了系统和系统的用户之间交互的信息，是自动捕获人与系统终端之间交互的类型、内容或时间的数据收集方法；对网络搜索而言，日志是利用网络搜索引擎搜索信息的用户在搜索信息期间与该网络搜索引擎发生互动的电子记录，在实际应用中，log文件的扩展名为.log。log文件没有固定的格式，通常是文本文件，可用记事本和文本编辑器打开；也可能是其他格式，需要专用的工具进行分析。本发明中实施例中，直接获取当前终端设备登记的log信息，并读取所述log信息以确定当前基于所述log信息执行分析人物的逻辑检测模型，所述逻辑检测模型为预先创建的用于分析定义日志信息中相关异常的数据方法结构，并且，基于已定义的所述逻辑检测模型中，其具体可实现当前log信息数据分析的数据方法结构包括多个，即所述逻辑检测模型包括多个，为确认当前实现log信息的逻辑检测模型，可通过遍历的当前多个逻辑检测模型的方式确认对应需应用的逻辑检测模型。另外，涉及到log信息中多种数据类型的存在可能性，为提高数据分析效率，还可对所述log信息预处理后再进行逻辑检测模型的应用，即所述获取当前电子设备的log信息的步骤，包括：

通过预设的预处理数据模型对所述log信息进行预处理操作，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型。

在当前需处理电子涉笔的log信息时，获取到需处理的log信息，并与预设的预处理数据模型对所述log信息进行预处理操作，涉及到log信息中不同数据内容的应用，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型，所述状态逻辑模型，定义为log信息中各种状态的筛选数据结构，涉及到不同状态的数据应用，所述状态逻辑模型的筛选数据结构还有可能包括基于所述log信息的状态逻辑的匹配的日志关键字的筛选条件，其相关的筛选条件的数据模型方法可如下所述：

a2dp业务状态的配置，当检索到A2DP_SINK_START时状态为on，当检索到A2DP_SINK_STOP时状态为off。相关代码如下：

所述关键字问题定位模型，定义为log信息基于检索某个关键字端的数据结构定位模型，并且，根据检索到的log信息中的关键字，对应执行所述关键字的控制操作，例如以上所述的当检索到“weak performance”表示主频不足，当检索到“reboot”表示系统重启。

进一步的，涉及到所述log信息预处理的操作，可能涉及到执行结果的输出，即所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤，包括：

确认执行所述预处理模型的执行结果；

在确认所述执行结果不为空时，输出所述执行结果。

根据当前预处理的log信息，即基于状态逻辑模型以及关键字问题定位模型的执行操作，确认执行所述预处理模型的执行结果，其中，涉及到数据结构的区别，在执行所述状态逻辑模型时，可能仅为执行所述状态逻辑模型缩小筛选更有目的性的log信息，因此可能不存在需输出的执行结果，一般情况下，执行所述预处理模型的执行结果，指关键字问题定位模型，在确认所述关键字问题定位模型执行时，具备对应的执行结果时，输出所述执行结果。所述执行结果与所述关键字定位模型中的筛选数据结构的筛选条件相关，在所述log信息中具备与所述筛选条件一致的信息时，输出筛选到的所述log信息。

步骤S20，根据遍历结果确定与所述log信息匹配的逻辑检测模型；

步骤S30，执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。

基于当前获取到的log信息遍历逻辑检测模型的遍历结果，确认与所述log信息匹配的对应逻辑检测模型，在本发明方法实施例中，以所述log信息遍历逻辑检测模型的遍历操作中，以所述逻辑检测模型中的第一判定逻辑确定所述log信息匹配的逻辑检测模型，即所述逻辑检测模型中的第一判定逻辑与所述log信息的内容是否匹配，在确认所述第一判定逻辑与所述log信息的内容匹配时，以匹配的所述逻辑检测模型作为分析所述log信息的目标逻辑检测模型。即，所述执行所述逻辑检测模型的步骤之前还包括：

若所述逻辑检测模型的第一判定逻辑与所述log信息读取结果匹配，执行所述逻辑检测模型。

根据已确认与所述log信息匹配的逻辑检测模型，在所述log信息中执行所述逻辑检测模型的数据结构以得出所述逻辑检测模型的执行结果。其中，在所述log信息中执行逻辑检测模型的操作，亦定义为以所述逻辑检测模型的判定条件分析所述log信息并得出分析结果，因而，在所述log信息中根据上下文log信息的顺序逻辑定位出问题。作为逻辑检测模型的数据结构，所述逻辑检测模型需配置的参数包括但不限于关键字段、超时时间、是否重复标志位等。其具体的如下所述：

基于所述逻辑检测模型的判断逻辑，检索到“first logic string”后会启动第一个该模型的检测，日志时间戳超时前检测到“second logic string”，则该模型匹配，输出该模型的分析结论。相关代码如下：

进一步的，根据当前匹配并应用的逻辑检测模型，还可登记基于所述逻辑检测模型的使用频率，即在所述逻辑检测模型具备不同判定方法的前提下，以登记到的所述逻辑检测模型的使用频率，可分析出当前电子设备的log信息中各日志信息的出现频率，进而可定义下一log信息的相关判断条件直接定位至一逻辑检测模型以省略逻辑检测模型遍历这一操作步骤。另外，基于当前逻辑检测模型的应用，若是预先创建逻辑检测模型未能匹配至log信息，则需确认所述log信息的判定条件，并将基于所述判定条件的相关逻辑添加至预先创建的逻辑检测模型中，或者另行新建基于所述判定条件的逻辑检测模型，使得能够补充各log信息的判定逻辑提高日志分析能力。

在本实施例中，通过本发明中预设的逻辑分析模型对日志进行数据分析处理，无需人工参与，且预先设置的逻辑分析模型可提前设置并反复使用无需过多的开发工作，在减少了开发工作的前提下提高了电子设备的日志分析效率。

进一步的，还可参照图3，图3为本发明log数据分析定位方法第二实施例的流程示意图，基于上述图2所示的第一实施例，所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤之前，还包括：

步骤S30，提取当前电子设备的log信息，以所述log信息的序列号为顺序依次将所述log信息存储至预设的字典列表。

步骤S40，根据所述log信息的序列号确认所述log信息是否丢失；

步骤S50，在确认所述log信息未丢失时，通过预设的预处理数据模型对所述log信息进行预处理操作。

本实施例中，基于当前电子设备的设备应用，在所述电子设备的系统存储区域提取所述电子设备的log信息，所述log信息即为日志信息，作为电子设备运行时的数据登记内容，所述log信息以序列号为标识进行登记，因此，根据提取到的log信息，将提取到的所述log信息以序列号为顺序依次将所述log信息存储至预设的字典列表，所述预设的字典列表为固定格式的数据存储表格，根据当前已存储至所述预设的字典列表中的log信息，以所述log信息的序列号确认所述log信息是否丢失，即所述log信息的序列号是否缺失，在确认所述log信息的序列号未缺失时，以预设的预处理数据模型对所述log信息进行预处理操作，即以状态逻辑模型及关键字问题定位模型对所述log信息进行预处理操作，以缩小所述log信息的筛选范围。

此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有log数据分析定位程序，所述log数据分析定位程序被处理器执行时实现如下操作：

获取当前电子设备的log信息，读取所述log信息并以读取结果遍历当前的逻辑检测模型；

根据遍历结果确定与所述log信息匹配的逻辑检测模型；

执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

通过预设的预处理数据模型对所述log信息进行预处理操作，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

根据所述log信息的序列号确认所述log信息是否丢失；

在确认所述log信息未丢失时，通过预设的预处理数据模型对所述log信息进行预处理操作。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

提取当前电子设备的log信息，以所述log信息的序列号为顺序依次将所述log信息存储至预设的字典列表。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

确认执行所述预处理模型的执行结果；

在确认所述执行结果不为空时，输出所述执行结果。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

若所述逻辑检测模型的第一判定逻辑与所述log信息读取结果匹配，执行所述逻辑检测模型。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

新建log数据分析定位插件；

根据当前电子设备应用系统的系统功能接口将所述log数据分析定位插件部署至所述电子设备。

进一步地，所述log数据分析定位程序被处理器执行时还实现如下操作：

在所述log数据分析定位插件中创建数据分析模型，所述数据分析模型包括预处理数据模型及逻辑检测模型，所述预处理数据模型及逻辑检测模型均包括多个。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、药品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、药品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、药品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (7)

1.一种log数据分析定位方法，其特征在于，所述log数据分析定位方法包括以下步骤：

获取当前电子设备的log信息，通过预设的预处理数据模型对所述log信息进行预处理操作，所述预设的预处理模型包括状态逻辑模型及关键字问题定位模型，其中，所述状态逻辑模型为log信息中各种状态的筛选数据结构，涉及到不同状态的数据应用，所述关键字问题定位模型为log信息基于检索某个关键字端的数据结构定位模型，根据检索到的log信息中的关键字，对应执行所述关键字的控制操作；

读取所述log信息并以读取结果遍历当前的逻辑检测模型，所述log为系统所制定对象的某些操作和其操作结果按时间有序的集合；

根据遍历结果确定与所述log信息匹配的逻辑检测模型；

执行所述逻辑检测模型，输出所述逻辑检测模型的执行结果；

所述log数据分析定位方法，还包括：

新建log数据分析定位插件，在所述log数据分析定位插件中创建数据分析模型，所述数据分析模型包括预处理数据模型及逻辑检测模型，所述预处理数据模型及逻辑检测模型均包括多个；

根据当前电子设备应用系统的系统功能接口将所述log数据分析定位插件部署至所述电子设备。

2.如权利要求1所述的log数据分析定位方法，其特征在于，所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤之前，还包括：

根据所述log信息的序列号确认所述log信息是否丢失；

在确认所述log信息未丢失时，通过预设的预处理数据模型对所述log信息进行预处理操作。

3.如权利要求2所述的log数据分析定位方法，其特征在于，根据所述log信息的序列号确认所述log信息是否丢失的步骤之前，还包括：

提取当前电子设备的log信息，以所述log信息的序列号为顺序依次将所述log信息存储至预设的字典列表。

4.如权利要求1所述的log数据分析定位方法，其特征在于，所述通过预设的预处理数据模型对所述log信息进行预处理操作的步骤，包括：

确认执行所述预处理模型的执行结果；

在确认所述执行结果不为空时，输出所述执行结果。

5.如权利要求1所述的log数据分析定位方法，其特征在于，所述执行所述逻辑检测模型的步骤之前还包括：

若所述逻辑检测模型的第一判定逻辑与所述log信息读取结果匹配，执行所述逻辑检测模型。

6.一种log数据分析定位装置，其特征在于，所述log数据分析定位装置包括：存储器、处理器以及存储在所述存储器上并可以在所述处理器上运行的log数据分析定位程序，所述log数据分析定位程序被处理器执行时实现如权利要求1至5任一项所述的log数据分析定位方法的步骤。

7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储在所述计算机可读存储介质的log数据分析定位程序，所述log数据分析定位程序执行时实现如权利要求1至5任一项所述的log数据分析定位方法的步骤。

Images