CN111949627A

CN111949627A - 用于表格化日志文件的方法、装置、电子设备和介质

Info

Publication number: CN111949627A
Application number: CN202010816124.2A
Authority: CN
Inventors: 张国安
Original assignee: Beijing Missfresh Ecommerce Co Ltd
Current assignee: Shenzhen Zhihui Cloud Network Technology Co ltd
Priority date: 2020-08-14
Filing date: 2020-08-14
Publication date: 2020-11-17
Anticipated expiration: 2040-08-14
Also published as: CN111949627B

Abstract

本公开的实施例公开了用于表格化日志文件的方法、装置、电子设备和介质。该方法的一具体实施方式包括：获取日志文件；对该日志文件进行解析，生成日志记录属性名集合和日志记录集合；基于该日志记录属性名集合和该日志记录集合，生成日志记录信息集合；对该日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；基于该加密日志记录信息集合，生成数据表。该实施方式实现了日志文件表格化，提高了日志文件表格化的效率。除此之外，还通过加密提高了数据表中数据的安全性。

Description

用于表格化日志文件的方法、装置、电子设备和介质

技术领域

本公开的实施例涉及计算机技术领域，具体涉及用于表格化日志文件的方法、装置、电子设备和介质。

背景技术

表格化日志文件，是通过一定的技术标准，将非结构化的日志文件转换成结构化的数据表。当前常用的方法是根据不同日志文件的特点，使用不同的方法对日志文件进行表格化。此种方法存在表格化效率不高的问题。此外，一些表格化日志文件的方法，一般直接将明文数据存储在数据表中，导致数据安全性较低。

发明内容

本公开的内容部分用于以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了用于表格化日志文件的方法、装置、电子设备和介质，来解决以上背景技术部分提到的技术问题。

第一方面，本公开的一些实施例提供了一种用于表格化日志文件的方法，该方法包括：获取日志文件；对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合；基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值；对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；基于上述加密日志记录信息集合，生成数据表。

第二方面，本公开的一些实施例提供了一种用于表格化日志文件的装置，装置包括：获取单元，被配置成获取日志文件；处理单元，被配置成对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合；生成单元，被配置成基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值；加密单元，被配置成对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；存储单元，被配置成基于上述加密日志记录信息集合，生成数据表。

第三方面，本公开的一些实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，其上存储有一个或多个程序，当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如第一方面中所描述的方法。

第四方面，本公开的一些实施例提供了一种介质，其上存储有计算机程序，其中，程序被处理器执行时实现如第一方面中所描述的方法。

本公开的上述各个实施例中的一个实施例具有如下有益效果：首先，获取日志文件。然后，对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合。通过对上述日志文件进行解析，分别提取到日志记录属性名集合和日志记录集合，为下一步数据处理进行数据准备。其次，基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值。为下一步加密进行数据准备。除此之外，对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息。通过对日志记录信息进行加密，解决了因直接存储明文数据导致的数据安全性较低的问题，提高了数据的安全性。最后，基于上述加密日志记录信息集合，生成数据表。实现了日志文件表格化，提高了日志文件表格化的效率。

附图说明

结合附图并参考以下具体实施方式，本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中，相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的，原件和元素不一定按照比例绘制。

图1是根据本公开的一些实施例的用于表格化日志文件的方法的一个应用场景示意图；

图2是根据本公开的用于表格化日志文件的方法的一些实施例的流程图；

图3是根据本公开的用于表格化日志文件的方法的另一些实施例的流程图；

图4是根据本公开的用于表格化日志文件的方法的一些实施例的结构示意图；

图5是适于用来实现本公开的一些实施例的电子设备的结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例。相反，提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。

另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互集合。

需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。

需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。

本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。

下面将参考附图并结合实施例来详细说明本公开。

图1是根据本公开的一些实施例的用于表格化日志文件的方法的一个应用场景示意图。

在图1的应用场景中，首先，计算设备101通过获取以及解析日志文件102，生成日志记录属性名集合103和日志记录集合104，其中，上述日志记录包括属性值集合。然后，计算设备101可以根据上述日志记录属性名集合103和上述日志记录集合104，生成日志记录信息集合105，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值。其次，计算设备101可以对上述日志记录信息集合105中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合106。最后，计算设备101可以基于上述加密日志记录信息集合106，生成数据表107。

需要说明的是，上述计算设备101可以是硬件，也可以是软件。当计算设备为硬件时，可以实现成多个服务器或终端设备组成的分布式集群，也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时，可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件和软件模块，也可以是实现成单个软件或软件模块。在此不做具体限定。

应该理解，图1中的计算设备的数目仅仅是示意性的。根据实现需要，可以具有任意数目的计算设备。

继续参考图2，示出了根据本公开的用于表格化日志文件的方法的一些实施例的流程200。该方法可以由图1的计算设备101来执行。该用于表格化日志文件的方法，包括以下步骤：

步骤201，获取日志文件。

在一些实施例中，用于表格化日志文件的方法的执行主体(如图1所示的计算设备101)可以通过有线连接或无线连接的方式从服务器，用户终端获取日志文件。其中，上述日志文件可以是审计日志文件，系统日志文件。

作为示例，上述日志文件可以是：

“UID(User Identifier，用户标识符)/日期和时间/级别/任务级别/来源/详细信息，

001/2019-02-12-3:12/警告/1/服务器日志/服务器过热，

002/2019-03-12-3:12/错误/2/服务器日志/发生宕机，

003/2019-02-11-3:12/错误/2/服务器日志/发生宕机”。

步骤202，对日志文件进行解析，生成日志记录属性名集合和日志记录集合。

在一些实施例中，上述执行主体可以对上述日志文件进行解析，，生成日志记录属性名集合和日志记录集合。其中，上述日志文件可以包括但不限于以下至少一项：CSV(Comma-SeparatedValues，逗号分割值)文件格式，JSON(JavaScriptObjectNotation，JS对象简谱)格式。上述日志记录包括属性值集合。对日志文件解析可以是首先，读取日志文件中的属性名所在行，抽取其中的属性名，生成日志记录属性名集合。然后，按行读取日志记录，生成日志记录集合。

作为示例，对上述日志文件：

“UID/日期和时间/级别/任务级别/来源/详细信息，

001/2019-02-12-3:12/警告/1/服务器日志/服务器过热，

002/2019-03-12-3:12/错误/2/服务器日志/发生宕机，

003/2019-02-11-3:12/错误/2/服务器日志/发生宕机”进行解析，得到日志记录属性名集合：

[‘UID’，‘日期和时间’，‘级别’，‘任务级别’，‘来源’，‘详细信息’]，以及日志记录集合：

[[‘001/2019-02-12-3:12/警告/1/服务器日志/服务器过热’]，

[‘002/2019-03-12-3:12/错误/2/服务器日志/发生宕机’]，

[‘003/2019-02-11-3:12/错误/2/服务器日志/发生宕机’]]。

步骤203，基于日志记录属性名集合和日志记录集合，生成日志记录信息集合。

在一些实施例中，上述执行主体可以基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合。其中，上述日志记录包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值。基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合。可以是将上述日志记录属性名集合中的每个日志记录属性名以及与上述日志记录属性名对应的上述日志记录集合中每个日志记录中包括的属性值集合中的属性值确定为二元组。

作为示例，上述日志记录属性名集合可以是：

[‘UID’，‘日期和时间’，‘级别’，‘任务级别’，‘来源’，‘详细信息’]，日志记录集合可以是：

[[‘001/2019-02-12-3:12/警告/1/服务器日志/服务器过热’]，

[‘002/2019-03-12-3:12/错误/2/服务器日志/发生宕机’]，

[‘003/2019-02-11-3:12/错误/2/服务器日志/发生宕机’]]。

根据上述日志记录属性名集合和日志记录集合得到以下日志信息集合：[{‘UID’：‘001’，‘日期和时间’：‘2019-02-12-3:12’，‘级别’：‘警告’，‘任务级别’：‘1’，‘来源’：‘服务器日志’，‘详细信息’：‘服务器过热’}，{‘UID’:‘002’，‘日期和时间’：‘2019-03-12-3:12’，‘级别’：‘错误’，‘任务级别’：‘2’，‘来源’：‘服务器日志’，‘详细信息’：‘服务器宕机’}，{‘UID’:‘003’，‘日期和时间’：‘2019-02-11-3:12’，‘级别’：‘错误’，‘任务级别’：‘2’，‘来源’：‘服务器日志’，‘详细信息’：‘服务器宕机’}]。

步骤204，对日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合。

在一些实施例中，上述执行主体可以对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合。

作为示例，对上述日志记录信息进行加密可以包括以下步骤：

第一步，通过信息交换用汉字编码字符集对上述日志记录信息中的每个二元组包括的属性名对应的属性值进行编码。

其中，编码是指将上述日志记录信息中每个二元组包括的属性名对应的属性值转换成计算机可以处理的数据形式。

作为示例，对{‘UID’：‘001’，‘日期和时间’：‘2019-02-12-3:12’，‘级别’：‘警告’，‘任务级别’：‘1’，‘来源’：‘服务器日志’，‘详细信息’：‘服务器过热’}中的每个二元组包括的属性名对应的属性值进行编码，得到对属性值进行编码后的日志记录信息：

{‘UID’：[b‘001’]，

‘日期和时间’：[b‘2019-02-12-3:12’]，

‘级别’：[b‘\xbe\xaf\xb8\xe6’]，

‘任务级别’：[b‘1’]，

‘来源’：[b‘\xbe\xaf\xb8\xe6’]，

‘详细信息’：[b‘\xb7\xfe\xce\xf1\xc6\xf7\xb9\xfd\xc8\xc8’]}。

第二步，将对属性值进行编码后的日志记录信息中的属性值转换成十进制值。作为示例，将上述对属性值进行编码后的日志记录信息中的属性值转换成十进制值，可以得到：

{‘UID’：[48，48，49]，

‘日期和时间’：[50，48，49，57，45，48，50，45，49，50，45，51，58，49，50]，

‘级别’：[190，175，184，230]，

‘任务级别’：[49]，

‘来源’：[190，175，184，230]，

‘详细信息’：[183，254，206，241，198，247，185，253，200，200]}。

第三步，可以通过以下第一加密公式对转换成十进制值后的编码后的属性值进行加密：

其中，x表示上述转换成十进制值后的编码的属性值中的十进制数字。O(x)表示十进制数字经过第一加密公式加密后的密文。l表示上述转换成十进制值后的编码的属性值的长度。

表示向下取整。

作为示例，通过上述第一加密公式对“‘UID’：[48，48，49]”中的属性值中的每一个十进制数字进行加密，从而得到“‘UID’：[36，36，37]”(计算过程如下式)。

步骤205，基于加密日志记录信息集合，生成数据表。

在一些实施例中，上述执行主体基于上述加密日志记录信息集合，生成数据表。其中，可以基于上述加密日志记录信息集合中每一个二元组包括的属性名，生成数据表属性名集合。然后，生成空数据表。将上述加密日志记录信息集合中的各个属性值存储到上述空数据表中。

本公开的上述各个实施例中的一个实施例具有如下有益效果：首先，获取日志文件。然后，对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合。通过对上述日志文件进行解析，分别提取到日志记录属性名集合和日志记录集合，为下一步数据处理进行数据准备。其次，基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，上述日志记录信息包括二元组集合，其中，上述二元组包括属性名和上述属性名对应的属性值。为下一步加密进行数据准备。除此之外，对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息。通过对日志记录信息进行加密，解决了因直接存储明文数据导致的数据安全性较低的问题，提高了数据的安全性。最后，基于上述加密日志记录信息集合，生成数据表。实现了日志文件表格化，提高了日志文件表格化的效率。

进一步参考图3，示出了根据本公开的用于表格化日志文件的方法的另一些实施例的流程图300。上述方法可以由图1的计算设备101来执行。上述用于表格化日志文件的方法，包括以下步骤：

步骤301，获取日志文件。

步骤302，对日志文件进行解析，生成日志记录属性名集合和日志记录集合。

步骤303，基于日志记录属性名集合和日志记录集合，生成日志记录信息集合。

在一些实施例中，步骤301-303的具体实现及所带来的技术效果可以参考图2对应的那些实施例中的步骤201-203，在此不再赘述。

步骤304，对日志记录信息进行编码，生成编码后的日志记录信息。

在一些实施例中，上述执行主体可以对上述日志记录信息进行编码，生成编码后的日志记录信息。其中，编码是指将日志记录信息转换为计算机可读以及可处理的数据类型。

在一些实施例的一些可选的实现方式中，上述执行主体对日志记录信息进行编码，生成编码后的日志记录信息可以包括以下步骤：

第一步，通过预设的字符编码方法对属性值进行字符编码，得到经字符编码后的属性值。

其中，字符编码是指对上述属性值中的字符通过预设的字符编码方法逐个进行编码。

作为示例，日志记录信息可以是：

{‘UID’:‘003’，

‘日期和时间’：‘2019-02-11-3:12’，

‘级别’：‘错误’，

‘任务级别’：‘2’，

‘来源’：‘服务器日志’，

‘详细信息’：‘服务器宕机’}。

通过UTF-8(8-bitUnicodeTransformationFormat)对上述日志记录信息中每个二元组包括的属性名对应的属性值进行字符编码，得到经过字符编码后的属性值：

{‘UID’：b′003′，

‘日期和时间’：b‘2019-02-11-3:12’，

‘级别’：b‘\xe9\x94\x99\xe8\xaf\xaf’，

‘任务级别’：b‘2’，

‘来源’：

b‘\xe6\x9c\x8d\xe5\x8a\xa1\xe5\x99\xa8\xe6\x97\xa5\xe5\xbf\x97’，

‘详细信息’：

b‘\xe6\x9c\x8d\xe5\x8a\xa1\xe5\x99\xa8\xe5\xae\x95\xe6\x9c\xba’}。

第二步，通过预设的进制转换方法对字符编码后的属性值进行转换，得到与字符编码后的属性值对应的编码值集，进而得到编码后的日志记录信息。其中，预设的进制转换方法可以是十进制转换方法，进而将上述编码后的属性值转换成对应的编码值集，上述编码值集中的编码值为十进制数字。

作为示例，字符编码后的属性值可以是“b′003′”，通过十进制转换后得到字符编码后的属性值对应的编码值集“[48，48，51]”。

步骤305，对编码后的日志记录信息进行预加密，生成预加密日志记录信息。

在一些实施例中，上述执行主体可以对上述编码后的日志记录信息进行预加密，生成预加密日志记录信息。

在一些实施例的一些可选的实现方式中，上述执行主体对编码后的日志记录信息进行预加密，生成预加密日志记录信息，可以包括以下步骤：

第一步，通过以下公式对编码值集中的每个编码值进行预加密：

其中x表示上述编码值。O(x)表示预加密后的编码值。l表示上述编码值集包括的编码值的个数。

表示向下取整。

作为示例，编码值集可以是“[48，48，51]”，通过上式进行预加密可以得到上述编码值集经过预加密后的编码值集“[27648，27648，33162]”(计算过程如下式)。

通过上述公式对编码值集中的编码值进行预加密，提高了数据的安全性。同时，上述公式引入了编码值对应的编码值集包括的编码值的数量作为参数，不仅提高了上述公式的复杂性，而且使得每个编码值集都有其对应的预加密公式，进而提高了破解难度。

步骤306，对预加密日志记录信息进行加密，生成加密日志记录信息。

在一些实施例中，上述执行主体可以对上述预加密日志记录信息进行加密，生成加密日志记录信息。

在一些实施例的一些可选的实现方式中，上述执行主体对上述预加密日志记录信息进行加密，生成加密日志记录信息，可以包括以下步骤：

第一步，基于至少三个互不相同的随机质数，生成第一密钥。

作为示例，三个随机质数可以是67，71，3。进而，通过以下第一密钥生成公式得到第一密钥：

n＝P×Q×R。

其中，n表示上述第一密钥。P，Q，R表示三个互不相同的质数。从而得到三个随机质数67，71，3对应的第一密钥14271(计算过程如下式)。

14271＝67x71×3。

第二步，基于第一密钥和欧拉函数，确定与上述第一密钥构成互质关系的数字的数目。

作为示例，第一密钥可以是14271，通过欧拉函数得到与14271构成互质关系的数字的个数是9240(计算过程如下式)。

第三步，基于上述数目以及与上述数目构成互质关系的互质质数，生成备选密钥集。其中，上述互质质数的取值范围不小于1且不大于上述数目。

作为示例，上述数目可以是11，通过以下互质质数确定公式生成备选密钥集：

gcd(m，e)＝1。

其中，m表示上述数目。e表示与m构成互质关系的质数，e的取值范围是(1，m)。gcd(m，e)＝1表示m和e存在互质关系。则数目11对应的备选密钥集是[2，3，4，5，6，7，8，9，10]。

第四步，从上述备选密钥集中随机选取备选密钥作为第二密钥。

作为示例，备选密钥集可以是[2，3，4，5，6，7，8，9，10]，则可以随机选取备选密钥5，作为第二密钥。

第五步，将第一密钥和第二密钥确定为二元组，得到公开密钥。

作为示例，第一密钥可以是14271，第二密钥可以是101，从而得到公开密钥(14271，101)。

第六步，通过以下公式对预加密日志记录信息进行加密：

其中，x表示预加密日志记录信息中的编码值。e表示上述公开密钥中的第一密钥。n表示上述公开密钥中的第二密钥。c表示加密后的编码值。

表示向下取整。

作为示例，上述预加密日志记录信息可以是：

{‘UID’：[11664，11664，9497]，

‘任务级别’：[12]}。公开密密钥可以是(14271，101)。通过上述公式对上述预加密日志记录信息进行加密，得到加密日志记录信息：

{‘UID’：[9749，9749，2119]，

‘任务级别’：[5510]}(计算过程如下式)。

相比选取两个随机质数得到的公开密钥，通过选取至少三个互不相同的随机质数得到的公开密钥更为复杂。除此之外，上述公式通过引入e和n对x^emod(n)进行一定程度的扩大，增大了计算难度，从而提高了数据的破解难度，进一步提高了数据的安全性。

步骤307，基于加密日志记录信息集合，生成数据表。

在一些实施例中，步骤307的具体实现及所带来的技术效果可以参考图2对应的那些实施例中的步骤205，在此不再赘述。

步骤308，将数据表进行冗余备份，得到备份数据表。

在一些实施例中，上述执行主体可以将数据表进行冗余备份，得到备份数据表。

作为示例，可以将数据表进行冗余备份，得到三份备份数据。

步骤309，将上述备份数据表发送并存储到冗余存储终端。

在一些实施例中，上述执行主体可以将上述三份备份数据发送并存储到冗余存储终端。

本公开的上述各个实施例中的一个实施例具有如下有益效果：通过对获取的日志文件进行解析，生成日志记录属性名集合和日志记录集合。然后，基于上述日志记录属性名集合和日志记录集合，生成日志记录信息集合。是为了将日志文件中的数据进行重新组合，方便作为下一步的输入。再然后，对日志记录信息进行编码，生成编码后的日志记录信息。是为了将文本数据转换为计算机可处理的数据。其次，对编码后的日志记录信息进行预加密，生成预加密日志记录信息。进而，对预加密日志记录信息进行加密，生成加密日志记录信息。通过两次不同的加密方式对数据进行加密，增加了数据的破解难度，提高了数据的安全性。然后，基于加密日志记录信息集合，生成数据表。将数据表进行冗余备份，得到备份数据表。将备份数据表发送并存储到冗余存储终端。通过数据备份，提高了数据的安全性，避免因某些原因导致的数据不可恢复丢失所造成的损失。通过将数据进行两次不同的加密，提高了数据的保密性，同时通过冗余存储保证了数据的安全性。

进一步参考图4，作为对上述各图上述方法的实现，本公开提供了一种用于表格化日志文件的装置的一些实施例，这些装置实施例与图2上述的那些方法实施例相对应，该装置具体可以应用于各种电子设备中。

如图4所示，一些实施例的用于表格化日志文件的装置400包括：获取单元401，被配置成获取日志文件。处理单元402，被配置成对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合；生成单元403，被配置成基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值；加密单元404，被配置成对上述日志记录信息集合中的每条日志记录信息进行加密，生成加密日志记录信息，得到加密日志记录信息集合；存储单元405，被配置成基于上述加密日志记录信息集合，生成数据表。

可以理解的是，该装置400中记载的存诸单元与参考图2描述的方法中的各个步骤相对应。由此，上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置400及其中包含的单元，在此不再赘述。

下面参考图5，其示出了适于用来实现本公开的一些实施例的电子设备(例如图1中的计算设备101)500的结构示意图。图5示出的服务器仅仅是一个示例，不应对本公开的实施例的功能和使用范围带来任何限制。

如图5所示，电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM503中，还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。

通常，以下装置可以连接至I/O接口505：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507；包括例如磁带、硬盘等的存储装置508；以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图5中示出的每个方框可以代表一个装置，也可以根据需要代表多个装置。

特别地，根据本公开的一些实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的一些实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中，该计算机程序可以通过通信装置509从网络上被下载和安装，或者从存储装置508被安装，或者从ROM502被安装。在该计算机程序被处理装置501执行时，执行本公开的一些实施例的方法中限定的上述功能。

需要说明的是，本公开的一些实施例上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。

在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperTextTransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，adhoc端对端网络)，以及任何当前已知或未来研发的网络。

上述计算机可读介质可以是上述装置中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：获取日志文件；对上述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，上述日志记录包括属性值集合；基于上述日志记录属性名集合和上述日志记录集合，生成日志记录信息集合，其中，上述日志记录信息包括二元组集合，上述二元组包括属性名和上述属性名对应的属性值；对上述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；基于上述加密日志记录信息集合，生成数据表。

可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本公开的一些实施例中的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括获取单元、处理单元，生成单元，加密单元，存储单元。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，获取单元还可以被描述为“获取日志文件的单元”。

本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。

以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开的实施例中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims

1.一种用于表格化日志文件的方法，包括：

获取日志文件；

对所述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，所述日志记录包括属性值集合；

基于所述日志记录属性名集合和所述日志记录集合，生成日志记录信息集合，其中，所述日志记录信息包括二元组集合，所述二元组包括属性名和所述属性名对应的属性值；

对所述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；

基于所述加密日志记录信息集合，生成数据表。

2.根据权利要求1所述的方法，其中，所述方法还包括：

将所述数据表进行冗余备份，得到备份数据表；

将所述备份数据表发送及存储到冗余存储终端。

3.根据权利要求1所述的方法，其中，所述对所述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，包括：

对所述日志记录信息进行编码，生成编码后的日志记录信息；

对所述编码后的日志记录信息进行预加密，生成预加密日志记录信息；

对所述预加密日志记录信息进行加密，生成加密日志记录信息。

4.根据权利要求3所述的方法，其中，所述对所述日志记录信息进行编码，生成编码后的日志记录信息，包括：

对所述属性值进行字符编码，得到字符编码后的属性值；

对所述字符编码后的属性值进行转换，得到所述字符编码后的属性值对应的编码值集。

5.根据权利要求4所述的方法，其中，所述对所述编码后的日志记录信息进行预加密，生成预加密日志记录信息，包括：

通过以下公式对所述编码后的日志记录信息中的每个属性值包括的编码值集中的每个编码值进行预加密，生成预加密日志记录信息：

其中x表示上述编码值；O(x)表示预加密后的编码值；l表示上述编码值集包括的编码值的个数；

表示向下取整。

6.根据权利要求5所述的方法，其中，所述对所述预加密日志记录信息进行加密，生成加密日志记录信息，包括：

基于至少三个互不相同的随机质数，生成第一密钥；

基于所述第一密钥，确定与所述第一密钥构成互质关系的数字的数目；

基于所述数目以及与所述数目构成互质关系的互质质数，生成备选密钥集，其中，所述互质质数的取值范围不小于1且不大于所述数目；

从所述备选密钥集中随机选取备选密钥作为第二密钥；

将所述第一密钥和所述第二密钥组合成二元组，得到公开密钥；

基于所述公开密钥以及以下公式，对所述预加密日志记录信息进行加密，生成加密日志记录信息：

其中，x表示预加密日志记录信息中的编码值；e表示公开密钥中的第一密钥；n表示公开密钥中的第二密钥；c表示加密后的编码值；

表示向下取整。

7.一种表格化日志文件装置，包括：

获取单元，被配置成获取日志文件；

处理单元，被配置成对所述日志文件进行解析，生成日志记录属性名集合和日志记录集合，其中，所述日志记录包括属性值集合；

生成单元，被配置成基于所述日志记录属性名集合和所述日志记录集合，生成日志记录信息集合，其中，所述日志记录信息包括二元组集合，所述二元组包括属性名和所述属性名对应的属性值；

加密单元，被配置成对所述日志记录信息集合中的每条日志记录信息进行加密以生成加密日志记录信息，得到加密日志记录信息集合；

存储单元，被配置成基于所述加密日志记录信息集合，生成数据表。

8.一种电子设备，包括：

一个或多个处理器；

存储装置，其上存储有一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的方法。

9.一种计算机可读介质，其上存储有计算机程序，其中，所述程序被处理器执行时实现如权利要求1-6中任一所述的方法。