CN103198108B - 一种索引数据更新方法、检索服务器及系统 - Google Patents

Abstract

本发明公开了一种索引数据更新方法、检索服务器及系统，包括：检索服务器当需要对其对应的索引库中的索引数据进行更新时，对该索引库中的索引数据进行缓存；并使用待更新索引数据对该索引库中的索引数据进行更新；以及在对该索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。采用本发明实施例提供的方案，提高了更新索引库中的索引数据时进行索引查询的实时性，进而提高了对检索请求进行处理的处理效率。

Description

一种索引数据更新方法、检索服务器及系统

技术领域

本发明涉及检索技术领域中的索引创建技术领域，尤其涉及一种索引数据更新方法、检索服务器及系统。

背景技术

全文检索（Full text search）是一种将文件中所有文本与检索项匹配的文字资料检索方法。全文检索的核心是解析文本数据建立倒排索引，基于检索条件查询索引库中的索引数据，得到与检索条件匹配的索引数据，从而快速获取检索结果的技术。如何保证索引查询的实时性是全文检索的重点。

现有技术中基于索引库中的索引数据进行检索查询的过程如下：

检索服务器接收用户终端发送的检索请求，从检索请求中获取检索条件，然后在索引库中的索引数据中进行索引查询，查询到与该检索条件匹配的索引数据，将与该检索条件匹配的索引数据作为检索结果，或者，再基于得到的与该检索条件匹配的索引数据，从数据库中查询到与该索引数据匹配的检索结果。

在实际应用中，经常需要在索引库中增加新的索引数据，或者修改索引库中的索引数据，即索引库中的索引数据经常需要进行更新处理，以便修正和丰富索引库中的索引数据。

然而，在更新索引库中的索引数据的过程中，当接收到检索请求时，由于索引数据正在被修改，所以无法通过在索引库中的索引数据中进行查询，以针对该检索请求进行检索处理，只能在索引库中的索引数据更新完成后，才能启动对该检索请求的检索处理，从而降低了索引查询的实时性，进而导致降低了对检索请求进行处理的处理效率。

发明内容

本发明实施例提供一种索引数据更新方法、检索服务器及系统，用以解决现有技术中存在的由更新索引库中的索引数据导致索引查询的实时性降低的问题。

本发明实施例提供一种索引数据更新方法，包括：

检索服务器当需要对其对应的索引库中的索引数据进行更新时，对所述索引库中的索引数据进行缓存；

使用待更新索引数据对所述索引库中的索引数据进行更新；

在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。

本发明实施例还提供一种检索服务器，包括：

缓存单元，用于当需要对所述检索服务器对应的索引库中的索引数据进行更新时，对所述索引库中的当前索引数据进行缓存；

更新单元，用于使用待更新索引数据对所述索引库中的索引数据进行更新；

检索单元，用于在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。

本发明实施例还提供一种索引数据更新系统，包括：检索服务器和所述检索服务器对应的索引库，其中：

所述检索服务器，用于当需要对所述索引库中的索引数据进行更新时，对所述索引库中的索引数据进行缓存；并使用待更新索引数据对所述索引库中的索引数据进行更新；以及在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

所述索引库，用于存储索引数据。

本发明实施例还提供一种索引查询系统，包括：主检索服务器、主索引库、至少一组从检索服务器及其对应的从索引库，其中：

所述主检索服务器，用于获取待更新索引数据，并使用所述待更新索引数据对所述主索引库中的索引数据进行更新，以及在对所述主索引库中的索引数据进行更新完成后，向各从检索服务器发送所述待更新索引数据；

所述从检索服务器，用于在接收到所述待更新索引数据之后，当需要对自身对应的从索引库中的索引数据进行更新时，对自身对应的从索引库中的索引数据进行缓存，并使用所述待更新索引数据对自身对应的从索引库中的索引数据进行更新，以及在对自身对应的从索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

所述主索引库，用于存储索引数据；

所述从索引库，用于存储索引数据。

本发明有益效果包括：

本发明实施例提供的方法中，检索服务器当需要对其对应的索引库中的索引数据进行更新时，首先对索引库中的索引数据进行缓存，然后使用待更新索引数据对该索引库中的索引数据进行更新，并且在对该索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。从而使得对索引库中的索引数据的更新处理和针对检索请求进行索引查询的处理可以并行执行，相比现有技术，不需要在索引库中的索引数据更新完成后，再启动对该检索请求的检索处理，提高了更新索引库中的索引数据时进行索引查询的实时性，进而提高了对检索请求进行处理的处理效率。

本申请的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请而了解。本申请的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为本发明实施例提供的索引数据更新方法的流程图；

图2为本发明实施例1提供的索引数据更新方法的流程图；

图3为本发明实施例2提供的检索服务器的结构示意图；

图4为本发明实施例2提供的索引数据更新系统的结构示意图；

图5为本发明实施例3提供的索引查询系统的结构示意图。

具体实施方式

为了给出提高更新索引库中的索引数据时进行索引查询的实时性的实现方案，本发明实施例提供了一种索引数据更新方法、检索服务器及系统，以下结合说明书附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。并且在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

本发明实施例提供一种索引数据更新方法，如图1所示，包括：

步骤101、检索服务器当需要对其对应的索引库中的索引数据进行更新时，对该索引库中的索引数据进行缓存。

步骤102、使用待更新索引数据对该索引库中的索引数据进行更新。

步骤103、在对该索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。

下面结合附图，用具体实施例对本发明提供的方法进行详细描述。

实施例1：

图2所示为本发明实施例1提供的索引数据更新方法的流程图，具体包括如下处理步骤：

步骤201、检索服务器获取待更新索引数据。

本步骤中，检索服务器具体可以采用如下方式获取待更新数据：

第一种方式：检索服务器获取在自身的接口加载的索引数据创建任务，并确定与该索引数据创建任务对应的文本数据，然后通过对该文本数据的内容进行分词处理建立索引，得到待更新索引数据。

其中，当在检索服务器的接口加载了多个索引数据创建任务时，检索服务器可以对该多个索引数据创建任务进行去重处理，在多个索引数据创建任务中，对于对应的文本数据的文本标识相同的索引数据创建任务，仅保留一个用于后续建立索引，得到待更新索引数据。

对于已经完成索引建立的索引数据创建任务，可以从任务列表中删除，对于索引建立失败的索引数据创建任务，可以再次进行索引建立，当失败次数达到预设次数阈值时，可以从任务列表中删除该索引数据创建任务。

第二种方式：该检索服务器为从检索服务器，从检索服务器对应的索引库为从索引库，其中，从检索服务器及其对应的从索引库包括至少一组，相对从检索服务器还设置有主检索服务器，主检索服务器对应主索引库，主检索服务器在完成对主索引库中的索引数据更新后，向各从检索服务器发送待更新索引数据，作为各从检索服务器之一的该检索服务器，接收该待更新索引数据。

步骤202、检索服务器对其对应的索引库中的索引数据进行缓存。

本步骤中，该检索服务器当确定需要对其对应的该索引库中的索引数据进行更新时，从索引库中获取索引数据，并对获取的索引数据进行缓存。

具体可以将索引库中的索引数据缓存到内存中。

步骤203、使用获取的待更新索引数据对该索引库中的索引数据进行更新。

该检索服务器在获取待更新索引数据之后，对该索引库中的索引数据进行更新，可以是使用待更新索引数据替换索引库中的索引数据，也可以是在索引库中增加该待更新索引数据。

本步骤中，进一步的，当使用待更新索引数据对该索引库中的索引数据进行更新失败时，还可以使用缓存的索引数据恢复索引库中的原索引数据，以便后续可以继续有效的针对检索请求进行索引查询。

步骤204、在对该索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。

具体可以是从检索请求中获取检索条件，并在缓存的索引数据中进行索引查询，确定与检索条件匹配的索引数据。

本步骤中，进一步的，可以将从检索请求中获取的检索条件拆分成多个子检索条件，并针对拆分成的该多个子检索条件进行逻辑运算，生成多个子查询对象，然后针对该多个子查询对象进行索引查询。

步骤205、检索服务器在使用该待更新索引数据对索引库中的当前索引数据进行更新完成后，删除缓存的索引数据。

步骤206、检索服务器在使用该待更新索引数据对索引库中的当前索引数据进行更新完成后，当再接收到检索请求时，基于索引库中更新后的索引数据进行索引查询。

本步骤中针对检索请求进行索引查询的具体处理方式，可以与上述步骤204中的方式相同，在此不再进行详细描述。

采用本发明实施例1提供的上述索引数据更新方法，使得对索引库中的索引数据的更新处理和针对检索请求进行索引查询的处理可以并行执行，相比现有技术，不需要在索引库中的索引数据更新完成后，再启动对该检索请求的检索处理，提高了更新索引库中的索引数据时进行索引查询的实时性，进而提高了对检索请求进行处理的处理效率。

实施例2：

基于同一发明构思，根据本发明上述实施例提供的索引数据更新方法，相应地，本发明实施例2还提供了一种检索服务器，其结构示意图如图3所示，具体包括：

缓存单元301，用于当需要对所述检索服务器对应的索引库中的索引数据进行更新时，对所述索引库中的当前索引数据进行缓存；

更新单元302，用于使用待更新索引数据对所述索引库中的索引数据进行更新；

检索单元303，用于在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。

进一步的，缓存单元301，还用于在所述更新单元使用所述待更新索引数据对所述索引库中的索引数据进行更新完成后，删除缓存的索引数据；

检索单元303，还用于在所述更新单元使用所述待更新索引数据对所述索引库中的当前索引数据进行更新完成后，当再接收到检索请求时，基于所述索引库中更新后的索引数据进行索引查询。

进一步的，所述检索服务器作为从检索服务器，其对应的所述索引库作为从索引库，其中，从检索服务器及其对应的从索引库包括至少一组；

所述检索服务器，还包括：

接收单元304，用于在所述缓存单元对所述索引库中的索引数据进行缓存之前，接收主检索服务器在完成对主索引库中的索引数据更新后向各从检索服务器发送的所述待更新索引数据。

本发明实施例2还提供了一种索引数据更新系统，其结构示意图如图4所示，具体包括：检索服务器401和该检索服务器401对应的索引库402，其中：

检索服务器401，用于当需要对所述索引库402中的索引数据进行更新时，对所述索引库402中的索引数据进行缓存；并使用待更新索引数据对所述索引库402中的索引数据进行更新；以及在对所述索引库402中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

索引库402，用于存储索引数据。

进一步的，检索服务器401，还用于在使用所述待更新索引数据对所述索引库402中的索引数据进行更新完成后，删除缓存的索引数据；并当再接收到检索请求时，基于所述索引库402中更新后的索引数据进行索引查询。

本发明实施例2中上述各单元的功能以及检索服务器的功能可对应于图1和图2所示流程中的相应处理步骤，在此不再赘述。

实施例3：

在现有技术中，索引查询系统通常仅包括一个检索服务器和一个索引库，从而当检索请求量较大时，无法及时的针对检索请求进行索引查询，导致索引查询的实时性较差。

为了解决现有技术中存在的索引查询的实时性较差的问题，本发明实施例3提供一种索引查询系统，如图5所示，具体包括：

主检索服务器501、主索引库502、至少一组从检索服务器503及其对应的从索引库504，其中：

主检索服务器501，用于获取待更新索引数据，并使用所述待更新索引数据对所述主索引库502中的索引数据进行更新，以及在对所述主索引库502中的索引数据进行更新完成后，向各从检索服务器503发送所述待更新索引数据；

从检索服务器503，用于在接收到所述待更新索引数据之后，当需要对自身对应的从索引库504中的索引数据进行更新时，对自身对应的从索引库504中的索引数据进行缓存，并使用所述待更新索引数据对自身对应的从索引库504中的索引数据进行更新，以及在对自身对应的从索引库504中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

主索引库503，用于存储索引数据；

从索引库504，用于存储索引数据。

进一步的，主检索服务器504，具体用于获取在自身的接口加载的索引数据创建任务，并确定与所述索引数据创建任务对应的文本数据，以及通过对所述文本数据的内容进行分词处理建立索引，得到所述待更新索引数据。

本发明实施例3中主检索服务器和从检索服务器的功能可对应于图1和图2所示流程中的相应处理步骤，在此不再赘述。

综上所述，本发明实施例提供的方案，包括：检索服务器当需要对其对应的索引库中的索引数据进行更新时，对该索引库中的索引数据进行缓存；并使用待更新索引数据对该索引库中的索引数据进行更新；以及在对该索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询。采用本发明实施例提供的方案，提高了更新索引库中的索引数据时进行索引查询的实时性，进而提高了对检索请求进行处理的处理效率。

本申请的实施例所提供的检索服务器的功能可通过计算机程序实现。本领域技术人员应该能够理解，上述的模块划分方式仅是众多模块划分方式中的一种，如果划分为其他模块或不划分模块，只要检索服务器具有上述功能，都应该在本申请的保护范围之内。

本申请是参照根据本申请实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (8)

1.一种索引数据更新方法，其特征在于，包括：

检索服务器当需要对其对应的索引库中的索引数据进行更新时，对所述索引库中的索引数据进行缓存；

使用待更新索引数据对所述索引库中的索引数据进行更新；

在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

所述检索服务器作为从检索服务器，其对应的索引库作为从索引库，其中，从检索服务器及其对应的从索引库包括至少一组，在所述检索服务器对所述索引库中的索引数据进行缓存之前，还包括：

所述检索服务器作为从检索服务器，接收主检索服务器在完成对主索引库中的索引数据更新后向各从检索服务器发送的所述待更新索引数据。

2.如权利要求1所述的方法，其特征在于，还包括：

在使用所述待更新索引数据对所述索引库中的索引数据进行更新完成后，删除缓存的索引数据；

当再接收到检索请求时，基于所述索引库中更新后的索引数据进行索引查询。

3.一种检索服务器，其特征在于，包括：

缓存单元，用于当需要对所述检索服务器对应的索引库中的索引数据进行更新时，对所述索引库中的当前索引数据进行缓存；

更新单元，用于使用待更新索引数据对所述索引库中的索引数据进行更新；

检索单元，用于在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

所述检索服务器作为从检索服务器，其对应的所述索引库作为从索引库，其中，从检索服务器及其对应的从索引库包括至少一组；

所述检索服务器，还包括：

接收单元，用于在所述缓存单元对所述索引库中的索引数据进行缓存之前，接收主检索服务器在完成对主索引库中的索引数据更新后向各从检索服务器发送的所述待更新索引数据。

4.如权利要求3所述的检索服务器，其特征在于，所述缓存单元，还用于在所述更新单元使用所述待更新索引数据对所述索引库中的索引数据进行更新完成后，删除缓存的索引数据；

所述检索单元，还用于在所述更新单元使用所述待更新索引数据对所述索引库中的当前索引数据进行更新完成后，当再接收到检索请求时，基于所述索引库中更新后的索引数据进行索引查询。

5.一种索引数据更新系统，其特征在于，包括：检索服务器和所述检索服务器对应的索引库，其中：

所述检索服务器，用于当需要对所述索引库中的索引数据进行更新时，对所述索引库中的索引数据进行缓存；并使用待更新索引数据对所述索引库中的索引数据进行更新；以及在对所述索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；所述检索服务器作为从检索服务器，其对应的索引库作为从索引库，其中，从检索服务器及其对应的从索引库包括至少一组，在所述检索服务器对所述索引库中的索引数据进行缓存之前，还包括：所述检索服务器作为从检索服务器，接收主检索服务器在完成对主索引库中的索引数据更新后向各从检索服务器发送的所述待更新索引数据；

所述索引库，用于存储索引数据。

6.如权利要求5所述的系统，其特征在于，所述检索服务器，还用于在使用所述待更新索引数据对所述索引库中的索引数据进行更新完成后，删除缓存的索引数据；并当再接收到检索请求时，基于所述索引库中更新后的索引数据进行索引查询。

7.一种索引查询系统，其特征在于，包括：主检索服务器、主索引库、至少一组从检索服务器及其对应的从索引库，其中：

所述主检索服务器，用于获取待更新索引数据，并使用所述待更新索引数据对所述主索引库中的索引数据进行更新，以及在对所述主索引库中的索引数据进行更新完成后，向各从检索服务器发送所述待更新索引数据；

所述从检索服务器，用于在接收到所述待更新索引数据之后，当需要对自身对应的从索引库中的索引数据进行更新时，对自身对应的从索引库中的索引数据进行缓存，并使用所述待更新索引数据对自身对应的从索引库中的索引数据进行更新，以及在对自身对应的从索引库中的索引数据进行更新的过程中，当接收到检索请求时，基于缓存的索引数据进行索引查询；

所述主索引库，用于存储索引数据；

所述从索引库，用于存储索引数据。

8.如权利要求7所述的系统，其特征在于，所述主检索服务器，具体用于获取在自身的接口加载的索引数据创建任务，并确定与所述索引数据创建任务对应的文本数据，以及通过对所述文本数据的内容进行分词处理建立索引，得到所述待更新索引数据。