CN117478535B - 一种日志存储的方法和装置 - Google Patents

Abstract

本发明公开了一种日志存储的方法和装置，涉及计算机技术领域。该方法的具体实施方式包括：获取目标日志；确定临时缓存中是否存在与目标日志对应的第一日志标识；如果是，则根据目标日志对第一日志标识对应的数据集进行更新；其中，在临时缓存中，每个第一日志标识对应一条数据集；如果否，则根据目标日志对应的第二日志标识在临时缓存中插入新的数据集；根据临时缓存对搜索引擎中的数据库进行同步，以将目标日志存储至搜索引擎中。该实施方式通过设置临时缓存对目标日志进行存储，避免直接将日志存储至搜索引擎，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

Description

一种日志存储的方法和装置

技术领域

本发明涉及计算机技术领域，尤其涉及一种日志存储的方法和装置。

背景技术

在现有的日志存储过程中，通常是将邮件网关中获取的邮件日志直接存储至搜索引擎的数据库中，以便于后续利用搜索引擎进行数据的查询。由于一封邮件对应于不同的收件人会产生多条邮件日志，因此邮件日志存在数据量大、并发多、以及实时性高的特点，且多个邮件日志之间存在着关联关系。因此直接将大量的邮件日志存储至搜索引擎存在着存储效率慢的问题，且占用搜索引擎的使用内存，进而影响到搜索引擎的查询性能。

发明内容

有鉴于此，本发明实施例提供一种日志存储的方法和装置，通过设置临时缓存对目标日志进行存储，可以避免直接将日志存储至搜索引擎所导致的问题，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，可以对具备相同第一日志标识的数据进行整合，有效降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

为实现上述目的，根据本发明实施例的一个方面，提供了一种日志存储的方法。

本发明实施例的一种日志存储的方法包括：获取目标日志；确定临时缓存中是否存在与所述目标日志对应的第一日志标识；如果是，则根据所述目标日志对所述第一日志标识对应的数据集进行更新；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集；如果否，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集；根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中。

可选地，所述根据所述目标日志对所述第一日志标识对应的数据集进行更新，包括：将所述目标日志以数组格式添加至所述第一日志标识对应的数据集中，以对所述数据集进行更新。

可选地，所述将所述目标日志以数组格式添加至所述第一日志标识对应的数据集中，包括：根据所述目标日志对应的邮件接收时间，确定所述目标日志在所述数据集中的第一添加位置；根据所述第一添加位置，将目标日志以数组格式添加至所述第一日志标识对应的数据集中。

可选地，该方法还包括：根据预设的时间周期，对所述数据集中的数组进行清空。

可选地，在待存储的日志为多个的情况下，所述获取目标日志，包括：利用第一线程将多个所述待存储的日志存储至消息中间件中；利用第二线程异步从所述消息中间件中获取需要存储至所述搜索引擎中的目标日志；其中，所述第一线程与所述第二线程为不同线程。

可选地，该方法还包括：根据缓存时间分片粒度以及缓存时间分片数量为所述临时缓存配置目标缓存数据量；

所述根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集，包括：在所述临时缓存中的已有缓存数据量不大于所述目标缓存数据量的情况下，根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集。

可选地，所述根据所述临时缓存对搜索引擎中的数据库进行同步，包括：将所述临时缓存中的一个或多个数据集以内嵌对象结构作为存储格式，同步至所述搜索引擎中的数据库中。

为实现上述目的，根据本发明实施例的又一方面，提供了一种日志存储的装置。

本发明实施例的一种日志存储的装置包括：获取模块，用于获取目标日志；确定模块，用于确定临时缓存中是否存在与所述目标日志对应的第一日志标识；更新模块，用于如果临时缓存中存在与所述目标日志对应的第一日志标识，则根据所述目标日志对所述第一日志标识对应的数据集进行更新；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集；如果临时缓存中不存在与所述目标日志对应的第一日志标识，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集；同步模块，用于根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中。

为实现上述目的，根据本发明实施例的又一方面，提供了一种用于日志存储的电子设备。

本发明实施例的一种日志存储的电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明实施例的一种日志存储的方法。

为实现上述目的，根据本发明实施例的再一方面，提供了一种计算机可读存储介质。

本发明实施例的一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明实施例的一种日志存储的方法。

上述发明中的一个实施例具有如下优点或有益效果：通过设置临时缓存对目标日志进行存储，可以避免直接将日志存储至搜索引擎所导致的问题，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，可以对具备相同第一日志标识的数据进行整合，有效降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是根据本发明实施例的日志存储的方法的主要流程示意图；

图2是根据本发明实施例的获取目标日志的主要流程示意图；

图3是根据本发明实施例的数据集的结构示意图；

图4是根据本发明实施例的将目标日志以数组格式添加至第一日志标识对应的数据集的主要流程示意图；

图5是根据本发明实施例的日志存储的装置的主要模块的示意图；

图6是本发明实施例可以应用于其中的示例性系统架构图；

图7是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

需要指出的是，在不冲突的情况下，本发明的实施例以及实施例中的技术特征可以相互结合。

需要说明的是，本公开的技术方案中，所涉及的用户个人信息的采集、收集、更新、分析、处理、使用、传输、存储等方面，均符合相关法律法规的规定，被用于合法的用途，且不违背公序良俗。对用户个人信息采取必要措施，防止对用户个人信息数据的非法访问，维护用户个人信息安全、网络安全和国家安全。

图1是根据本发明实施例的日志存储的方法的主要步骤的示意图。

如图1所示，本发明实施例的日志存储的方法主要包括以下步骤：

步骤S101：获取目标日志；

步骤S102：确定临时缓存中是否存在与目标日志对应的第一日志标识；

如果是，则执行步骤S103：根据目标日志对第一日志标识对应的数据集进行更新；其中，在临时缓存中，每个第一日志标识对应一条数据集；

如果否，则执行步骤S104：根据目标日志在临时缓存中插入新的数据集；

步骤S105：根据临时缓存对搜索引擎中的数据库进行同步，以将目标日志存储至搜索引擎中。

其中，针对于邮件应用的场景下，目标日志可以为邮件日志，第一日志标识可以理解为与邮件对应的邮件标识，即通过第一日志标识可以确定具体是哪封邮件。可以理解的是，对于搜索引擎来说，存储过程与查询过程会同时占用搜索引擎的内存，当需要消耗大量资源进行日志存储时，必然导致查询性能的降低，因此本发明实施例通过提高日志存储的效率可以进一步提高日志查询的效率。

在邮件的往来过程中，邮件日志通常由邮件网关生成，为了便于对邮件日志的查询，需要将多个邮件网关分别生成的多个邮件日志均存储在搜索引擎中，并根据其关联性进行关联，以便于快速查询。需要说明的是，针对于同一封邮件来说，当存在多个收件人或者抄送人的时候，针对于每个收件人或抄送人均会生成对应的邮件日志，即一封邮件会对应多个邮件日志，且多个邮件日志之间是存在关联关系的。因此在现有技术中，通过父子表结构将多个具备关联关系的邮件日志进行存储，以便于梳理邮件日志之间的关联关系。但是，父子表结构在日志存储以及查询的过程中，均存在着汇总报表响应慢的问题，即在存储以及查询时需要根据关联关系逐级对日志进行查找，在数据量较大时，存储以及查询统计的效率较低。因此，本发明实施例通过设置临时缓存先将大量的日志以数据集的形式进行存储，即每个邮件仅对应一条数据集，而后再将临时缓存中存储的日志同步至搜索引擎中，相比于现有技术中需要直接将每封邮件对应的多个邮件日志存储至搜索引擎中来说，有效减少了需要存储的日志数量，提高了邮件存储效率。

在实际日志的存储过程中，是针对于单一的目标日志来进行逐个存储的，因此当同时有多个待存储的日志时，为了避免出现堆积日志过多的情况，本发明实施例利用了消息中间件进行消峰处理，即预先将待存储的日志都存储至消息中间件中，并后续依次从消息中间件中逐个获取目标日志进行处理。即在一种可选的实施例中，在待存储的日志为多个的情况下，步骤S101如图2所示，具体包括：

步骤S201：利用第一线程将多个待存储的日志存储至消息中间件中；

步骤S202：利用第二线程异步从消息中间件中获取需要存储至搜索引擎中的目标日志；其中，第一线程与第二线程为不同线程。

本发明实施例通过设置消息中间件，可以在接收到大量待存储的日志时预先进行缓存，避免服务器接收性能的瓶颈，同时还可以针对待存储的全量日志进行备份，避免在后续的存储进程出现故障时，发生日志丢失的情况。另外，通过异步的线程进行处理，可以将日志存储以及读取的过程进行解耦，保证每个线程的独立处理过程，提高单一线程的处理效率。

可以理解的是，在本发明的临时缓存中，是以第一日志标识为维度进行日志存储的，其中，每个第一日志标识对应一条数据集，与第一日志标识对应的多个日志则为数据集中的多个数组。示例性地，数据集的结构如图3所示，一条数据集由顺次连接的多个数组（0、1、2、3、……3556、3557、3558）组成，每个数组中又包括了每个数组对应的多个元素（key）。通过以数据集的形式进行存储，可以尽可能减少数据的存储数量。因此，在一种可选的实施例中，当需要对数据集进行更新时，步骤S103具体包括：将所述目标日志以数组格式添加至所述第一日志标识对应的数据集中，以对所述数据集进行更新。

通常情况下，可以根据目标日志的生成时间，将目标日志对应的数组对应插入至数据集的对应位置中，也可以默认将目标日志对应的数组始终作为最后一个或者第一个数组插入至数据集中。即在进一步可选的实施例中，将目标日志以数组格式添加至第一日志标识对应的数据集的过程，可以如图4所示，包括：

步骤S401：根据目标日志对应的邮件接收时间，确定目标日志在数据集中的第一添加位置；

步骤S402：根据第一添加位置，将目标日志以数组格式添加至第一日志标识对应的数据集中。

在本发明实施例中，为了避免数据存储占用大量内存空间，还可以对数据集的存储时效进行设置，即根据预设的时间周期，对数据集中的数组进行清空。对于数据集来说，每个数组元素对应有各自的时间长度，可以通过设置定时维护任务，在预设的时间周期后，根据当前时间将其后一秒的数组元素清空，以保证数据集中始终存储着最近一个时间周期的数据。

在一种可选的实施例中，对于临时缓存中缓存的数据的总量也可以根据实际情况进行设置，即保证存储占用的空间不会影响到其他应用程序的进程。即本发明提供的日志存储方法还包括：根据缓存时间分片粒度以及缓存时间分片数量为临时缓存配置目标缓存数据量。其中，缓存时间分片粒度为每个数组元素所覆盖的时间范围，缓存时间分片数量是指数据集中存储多少个数组。此时步骤S103进一步包括：在临时缓存中的已有缓存数据量不大于目标缓存数据量的情况下，根据目标日志在临时缓存中插入新的数据集。其中，缓存时间分片粒度可以为1秒，缓存时间分片数量可以为3600，即所确定的目标缓存数据量为临时缓存中一小时（3600秒）可存储的数据量。

可以理解的是，当临时缓存中存在与目标日志对应的第一日志标识时，则说明已经有于第一日志标识对应的邮件日志进行了存储，即临时缓存中已经存储了与第一日志标识对应的数据集，只需要根据目标日志对数据集中的数组进行更新即可，而当没有与第一日志标识对应的数据集时，说明当前邮件是第一封往来邮件，那么则需要根据目标日志对应的第二日志标识，在临时缓存中建立新的数据集，以便于后续可以在该数据集的基础上进行更新。在本发明实施例中，第一日志标识用于标识已存在于数据集中的标识，第二日志标识用于标识插入的新的数据集对应的标识。

对于步骤S105中根据临时缓存对搜索引擎中的数据库进行同步的过程，一种可选的实施例中，包括：将临时缓存中的一个或多个数据集以内嵌对象结构作为存储格式，同步至搜索引擎中的数据库中。在如前描述中已经说明了现有技术由于以父子表结构结构进行存储所带来的效率低下的问题，因此本发明在数据同步过程中，转换了数据存储的格式，通过内嵌对象结构将日志存储为json对象文档，可以将有限的关联记录以数组对象方式保存在对象文档的一个属性中，进而在查询过程中减少了父子关联，从而提高了整体的查询性能。

根据本发明实施例的日志存储的方法，通过设置临时缓存对目标日志进行存储，可以避免直接将日志存储至搜索引擎所导致的问题，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，可以对具备相同第一日志标识的数据进行整合，有效降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

图5是根据本发明实施例的日志存储的装置的主要模块的示意图。

如图5所示，本发明实施例的日志存储的装置500包括：

获取模块501，用于获取目标日志；

确定模块502，用于确定临时缓存中是否存在与所述目标日志对应的第一日志标识；

更新模块503，用于如果临时缓存中存在与所述目标日志对应的第一日志标识，则根据所述目标日志对所述第一日志标识对应的数据集进行更新；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集；如果临时缓存中不存在与所述目标日志对应的第一日志标识，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集；

同步模块504，用于根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中。

在本发明一种可选的实施例中，所述更新模块503还用于，将所述目标日志以数组格式添加至所述第一日志标识对应的数据集中，以对所述数据集进行更新。

在本发明一种可选的实施例中，所述更新模块503还用于，根据所述目标日志对应的邮件接收时间，确定所述目标日志在所述数据集中的第一添加位置；根据所述第一添加位置，将目标日志以数组格式添加至所述第一日志标识对应的数据集中。

在本发明一种可选的实施例中，该装置还包括清理模块，用于根据预设的时间周期，对所述数据集中的数组进行清空。

在本发明一种可选的实施例中，所述获取模块501还用于，在待存储的日志为多个的情况下，利用第一线程将多个所述待存储的日志存储至消息中间件中；利用第二线程异步从所述消息中间件中获取需要存储至所述搜索引擎中的目标日志；其中，所述第一线程与所述第二线程为不同线程。

在本发明一种可选的实施例中，所述更新模块503还用于，根据缓存时间分片粒度以及缓存时间分片数量为所述临时缓存配置目标缓存数据量；在所述临时缓存中的已有缓存数据量不大于所述目标缓存数据量的情况下，根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集。

在本发明一种可选的实施例中，所述同步模块504还用于，将所述临时缓存中的一个或多个数据集以内嵌对象结构作为存储格式，同步至所述搜索引擎中的数据库中。

根据本发明实施例的日志存储的装置，通过设置临时缓存对目标日志进行存储，可以避免直接将日志存储至搜索引擎所导致的问题，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，可以对具备相同第一日志标识的数据进行整合，有效降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

图6示出了可以应用本发明实施例的日志存储的方法或日志存储的装置的示例性系统架构600。

如图6所示，系统架构600可以包括终端设备601、602、603，网络604和服务器605。网络604用以在终端设备601、602、603和服务器605之间提供通信链路的介质。网络604可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备601、602、603通过网络604与服务器605交互，以接收或发送数据等。终端设备601、602、603上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。

终端设备601、602、603可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器605可以是提供各种服务的服务器，例如对用户利用终端设备601、602、603所发送的日志查询请求提供支持的后台管理服务器。后台管理服务器可以对接收到的日志查询请求等数据进行分析等处理，并将处理结果（例如日志查询结果）反馈给终端设备。

需要说明的是，本发明实施例所提供的日志存储的方法一般由服务器605执行，相应地，日志存储的装置一般设置于服务器605中。另外，本发明实施例中的搜索引擎，可以设置在服务器605中，也可以单独设置在另外的服务器中，本发明对此不做限定。

应该理解，图6中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

下面参考图7，其示出了适于用来实现本发明实施例的终端设备的计算机系统700的结构示意图。图7示出的终端设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图7所示，计算机系统700包括中央处理单元（CPU）701，其可以根据存储在只读存储器（ROM）702中的程序或者从存储部分708加载到随机访问存储器（RAM）703中的程序而执行各种适当的动作和处理。在RAM 703中，还存储有系统700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出（I/O）第一接口705也连接至总线704。

以下部件连接至I/O第一接口705：包括键盘、鼠标等的输入部分706；包括诸如阴极射线管（CRT）、液晶显示器（LCD）等以及扬声器等的输出部分707；包括硬盘等的存储部分708；以及包括诸如LAN卡、调制解调器等的网络第一接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O第一接口705。可拆卸介质711，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器710上，以便于从其上读出的计算机程序根据需要被安装入存储部分708。

特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分709从网络上被下载和安装，和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元（CPU）701执行时，执行本发明的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器（RAM）、只读存储器（ROM）、可擦式可编程只读存储器（EPROM或闪存）、光纤、便携式紧凑磁盘只读存储器（CD-ROM）、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：一种处理器包括获取模块、确定模块、更新模块和同步模块。其中，这些模块的名称在某种情况下并不构成对该模块本身的限定，例如，获取模块还可以被描述为“获取目标日志的模块”。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备包括：获取目标日志；确定临时缓存中是否存在与所述目标日志对应的第一日志标识；如果是，则根据所述目标日志对所述第一日志标识对应的数据集进行更新；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集；如果否，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集；根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中。

根据本发明实施例的技术方案，通过设置临时缓存对目标日志进行存储，可以避免直接将日志存储至搜索引擎所导致的问题，提高了存储效率。同时在临时缓存中采用数据集的方式进行存储，可以对具备相同第一日志标识的数据进行整合，有效降低了需要存储至搜索引擎中的数据总量，进一步提高了存储效率。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (7)

1.一种日志存储的方法，其特征在于，包括：

获取目标日志；

确定临时缓存中是否存在与所述目标日志对应的第一日志标识；其中，所述第一日志标识为邮件标识，所述目标日志为与收件人或抄送人对应的邮件日志；

如果是，则根据所述目标日志对所述第一日志标识对应的数据集进行更新，包括：根据所述目标日志对应的邮件接收时间，确定所述目标日志在所述数据集中的第一添加位置；根据所述第一添加位置，将目标日志以数组格式添加至所述第一日志标识对应的数据集中；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集，与第一日志标识对应的多个邮件日志为数据集中的多个数组；第一日志标识用于标识已存在于数据集中的标识；其中，在临时缓存中采用数据集的方式进行存储，使得具备相同第一日志标识的数据能够被整合；

如果否，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集，以便于后续能够在该数据集的基础上进行更新；其中，第二日志标识用于标识插入的新的数据集对应的标识；

根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中，包括：将所述临时缓存中的一个或多个数据集以内嵌对象结构作为存储格式，同步至所述搜索引擎中的数据库中。

2.根据权利要求1所述的方法，其特征在于，还包括：

根据预设的时间周期，对所述数据集中的数组进行清空。

3.根据权利要求1所述的方法，其特征在于，在待存储的日志为多个的情况下，所述获取目标日志，包括：

利用第一线程将多个所述待存储的日志存储至消息中间件中；

利用第二线程异步从所述消息中间件中获取需要存储至所述搜索引擎中的目标日志；其中，所述第一线程与所述第二线程为不同线程。

4.根据权利要求1所述的方法，其特征在于，还包括：

根据缓存时间分片粒度以及缓存时间分片数量为所述临时缓存配置目标缓存数据量；

所述根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集，包括：

在所述临时缓存中的已有缓存数据量不大于所述目标缓存数据量的情况下，根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集。

5.一种日志存储的装置，其特征在于，包括：

获取模块，用于获取目标日志；

确定模块，用于确定临时缓存中是否存在与所述目标日志对应的第一日志标识；其中，所述第一日志标识为邮件标识，所述目标日志为与收件人或抄送人对应的邮件日志；

更新模块，用于如果临时缓存中存在与所述目标日志对应的第一日志标识，则根据所述目标日志对所述第一日志标识对应的数据集进行更新，包括：根据所述目标日志对应的邮件接收时间，确定所述目标日志在所述数据集中的第一添加位置；根据所述第一添加位置，将目标日志以数组格式添加至所述第一日志标识对应的数据集中；其中，在所述临时缓存中，每个所述第一日志标识对应一条数据集，与第一日志标识对应的多个邮件日志为数据集中的多个数组；第一日志标识用于标识已存在于数据集中的标识；其中，在临时缓存中采用数据集的方式进行存储，使得具备相同第一日志标识的数据能够被整合；如果临时缓存中不存在与所述目标日志对应的第一日志标识，则根据所述目标日志对应的第二日志标识在所述临时缓存中插入新的数据集，以便于后续能够在该数据集的基础上进行更新；其中，第二日志标识用于标识插入的新的数据集对应的标识；

同步模块，用于根据所述临时缓存对搜索引擎中的数据库进行同步，以将所述目标日志存储至所述搜索引擎中，包括：将所述临时缓存中的一个或多个数据集以内嵌对象结构作为存储格式，同步至所述搜索引擎中的数据库中。

6.一种用于日志存储的电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1-4中任一所述的方法。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-4中任一所述的方法。