CN106126731B - 一种获取Elasticsearch分页数据的方法及装置 - Google Patents

Abstract

本发明公开了一种获取Elasticsearch分页数据的方法及装置，属于软件开发技术，解决现有Elasticsearch分页功能不能满足页面分页显示数据的问题。包括根据接收到的页面分页显示请求，获取页面分页显示请求中包含的会话标识和请求参数，将会话标识和请求参数转换为唯一字符串，确定为页面分页显示请求的唯一标识；若检索缓冲区中包含页面分页显示请求的唯一标识，则根据页面分页显示请求的唯一标识，从检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；以获取的Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将Elasticsearch返回的数据确定为页面分页显示请求对应的返回数据。

Description

一种获取Elasticsearch分页数据的方法及装置

技术领域

本发明属于软件开发技术领域，更具体的涉及一种获取Elasticsearch分页数据的方法及装置。

背景技术

Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是目前最流行的企业搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。

现有的Elasticsearch实现分页功能主要有以下方式：第一种：使用From、Size指定起始位置，获取指定分页的数据；第二种：使用Scroll时间轴滚动API遍历数据的方式；以上两种方式中，第一种方式默认From+Size情况值为10000，可以通过修改参数将10000调大，但是调大以后进行分页，占用大量内存，检索效率严重下降；调大到多少无法提前预知，在获取超过调整后大小的页面数据时无法正常获取数据；第二种方式只能依次向后移动，无法向前移动数据集，无法指定显示第几页数据，局限性很大。

综上所述，现有的Elasticsearch分页功能存在不能满足实际分页检索需求的问题。

发明内容

本发明实施例提供一种获取Elasticsearch分页数据的方法及装置，用于解决现有的Elasticsearch分页功能存在不能满足分页检索需求的问题。

本发明实施例提供一种获取Elasticsearch分页数据的方法，包括：

根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据。

优选地，还包括：

若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

本发明实施例还提供一种获取Elasticsearch分页数据的装置，包括：

第一确定单元，用于根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

第二确定单元，用于若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓冲区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

第三确定单元，用于以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据。

优选地，所述第二确定单元还用于：

若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

本发明实施例中，提供一种获取Elasticsearch分页数据的方法及装置，包括根据接收到的页面分页显示请求，获取页面分页显示请求中包含的会话标识和请求参数，将会话标识和请求参数转换为唯一字符串，确定为页面分页显示请求的唯一标识；若检索缓冲区中包含页面分页显示请求的唯一标识，则根据页面分页显示请求的唯一标识，从检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；以获取的Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将Elasticsearch返回的数据确定为页面分页显示请求对应的返回数据。在本发明实施例中，采用一种通用的分页方法，可以满足通用分页检索的需要，支持完成移动到第一页、移动到最后一页、向前移动一页、向后移动一页、移动到指定页的操作。从而解决了现有Elasticsearch分页功能存在不能满足分页检索需求的问题。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种获取Elasticsearch分页数据的方法流程示意图；

图2为本发明实施例提供的一种获取Elasticsearch分页数据的装置结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1示例性的示出了本发明实施例提供的一种获取Elasticsearch分页数据的方法流程示意图，该方法至少可以应用于软件开发技术。

如图1所示，本发明实施例提供的一种获取Elasticsearch分页数据的方法，包括以下步骤：

步骤101，根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

步骤102，若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

步骤103，以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据。

需要说明的是，在本发明实施例中，执行主体为服务器。

在步骤101中，服务器接收到页面分页显示请求，根据接收到的页面分页显示请求，获取页面分页显示请求中包含的会话标识和请求参数，将会话标识和请求参数转换为唯一字符串，确定为页面分页显示请求的唯一标识。

需要说明的是，在本发明实施例中，获取页面分页显示请求所携带的请求参数，不包括分页开始位置、分页大小参数。

在步骤102中，若检索缓冲区中包含页面分页显示请求的唯一标识，则根据页面分页显示请求的唯一标识，从检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识。

需要说明的是，检索缓冲区至少可以包括以下实现方式：1)以文件形式存储在物理硬盘的固定位置；2)采用采用自定义数据结构保存在内存中；3)采用Redis等内存数据库进行存储。在本发明实施例中，对检索缓冲区的实现方法不做具体的限定。

在步骤103中，将步骤102中获取的Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将Elasticsearch返回的数据确定为页面分页显示请求对应的返回数据。

需要说明的是，在本发明实施例步骤102中，还存在一种情况，具体为：若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

综上所述，本发明实施例提供了一种获取Elasticsearch分页数据的方法，包括根据接收到的页面分页显示请求，获取页面分页显示请求中包含的会话标识和请求参数，将会话标识和请求参数转换为唯一字符串，确定为页面分页显示请求的唯一标识；若检索缓冲区中包含页面分页显示请求的唯一标识，则根据页面分页显示请求的唯一标识，从检索缓存区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；以获取的Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将Elasticsearch返回的数据确定为页面分页显示请求对应的返回数据。在本发明实施例中，采用一种通用的分页方法，可以满足通用分页检索的需要，支持完成移动到第一页、移动到最后一页、向前移动一页、向后移动一页、移动到指定页的操作。从而解决了现有Elasticsearch分页功能存在不能满足分页检索需求的问题。

基于同一发明构思，本发明实施例提供了一种获取Elasticsearch分页数据的装置，由于该装置解决技术问题的原理与一种获取Elasticsearch分页数据的方法相似，因此该装置的实施可以参见方法的实施，重复之处不再赘述。

图2为本发明实施例提供的一种获取Elasticsearch分页数据的装置结构示意图。如图2所述，该装置具体包括：第一确定单元20，第二确定单元21，和第三确定单元23。

第一确定单元20，用于根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

第二确定单元21，用于若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓冲区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

第三确定单元22，用于以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据。

进一步地，所述第二确定单元21还用于：

若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

应当理解，以上一种获取Elasticsearch分页数据的装置包括的单元仅为根据该设备装置实现的功能进行的逻辑划分，实际应用中，可以进行上述单元的叠加或拆分。并且该实施例提供的一种获取Elasticsearch分页数据的装置所实现的功能与上述实施例提供的一种获取Elasticsearch分页数据的方法一一对应，对于该装置所实现的更为详细的处理流程，在上述方法实施例一中已做详细描述，此处不再详细描述。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (2)

1.一种获取Elasticsearch分页数据的方法，其特征在于，包括：

根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓冲区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据；

若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

2.一种获取Elasticsearch分页数据的装置，其特征在于，包括：

第一确定单元，用于根据接收到的页面分页显示请求，获取所述页面分页显示请求中包含的会话标识和请求参数，将所述会话标识和所述请求参数转换为唯一字符串，将所述唯一字符串确定为所述页面分页显示请求的唯一标识；

第二确定单元，用于若检索缓冲区中包含所述页面分页显示请求的所述唯一标识，则根据所述唯一标识，从所述检索缓冲区中获取与所述页面分页显示请求对应的Elasticsearch数据唯一标识；

第三确定单元，用于以获取的所述Elasticsearch数据唯一标识作为参数向Elasticsearch发送数据检索请求，将所述Elasticsearch返回的数据确定为所述页面分页显示请求对应的返回数据；

所述第二确定单元还用于：

若所述检索缓冲区内不存在所述页面分页显示请求的唯一标识，则开启一个后台线程，使用Elasticsearch的Scroll时间轴滚动API的方法，将符合页面分页显示请求的所有Elasticsearch的数据唯一标识，保存到检索缓冲区中。

Images