CN107463618A - 一种索引创建方法和装置 - Google Patents

一种索引创建方法和装置 Download PDF

Info

Publication number
CN107463618A
CN107463618A CN201710538204.4A CN201710538204A CN107463618A CN 107463618 A CN107463618 A CN 107463618A CN 201710538204 A CN201710538204 A CN 201710538204A CN 107463618 A CN107463618 A CN 107463618A
Authority
CN
China
Prior art keywords
data
index
definitions file
file
data definitions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710538204.4A
Other languages
English (en)
Other versions
CN107463618B (zh
Inventor
艾国信
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201710538204.4A priority Critical patent/CN107463618B/zh
Publication of CN107463618A publication Critical patent/CN107463618A/zh
Application granted granted Critical
Publication of CN107463618B publication Critical patent/CN107463618B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • G06F16/2272Management thereof

Abstract

本发明提供了一种索引创建方法和装置,该方法包括:建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,第一数据定义文件用于定义数据库中存储的第一数据的数据格式,第二数据定义文件用于定义搜索服务器中存储的索引的数据格式;在第二数据定义文件中记录至少一个索引字段,索引字段选自第一数据;根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引。本发明通过建立两个数据定义文件之间的映射关系,以便创建索引,在需要修改索引时,只需修改第二数据定义文件,无需修改创建索引的代码,降低开发复杂度。

Description

一种索引创建方法和装置
技术领域
本发明涉及索引技术领域,特别是涉及一种索引创建方法和装置。
背景技术
现有技术中,数据库中的数据可建立数据表文件,定义数据库中的数据格式。搜索服务器中创建的索引必须来自于数据库中存储的数据。创建索引时,需在搜索服务器中编写代码,定义索引字段及索引的数据格式,从而可使该数据库中的数据作为索引并保存到搜索服务器中。例如,数据库为Hbase数据库,其存储的数据表基于Hbase定义。搜索服务器为Elastic Search,该搜索服务器中的索引可以通过java api的POJO方式创建。
此外,为使通过该搜索服务器的查询接口进行索引查询,需建立查询的数据定义文件。该定义文件中定义了索引字段,从而使得用户能够进行该索引字段的查询。查询接口的数据描述文件采用protobuf定义。
由于,查询接口的数据定义文件、数据库中的数据表文件的数据格式及索引的数据格式均不相同,当需要更改索引时,需要修改创建索引的代码,容易导致数据不一致,开发难度大。
发明内容
本发明实施例所要解决的技术问题是提供一种索引创建方法和装置,以解决现有技术的创建的索引在需要修改时,开发复杂度大的问题。
为了解决上述问题,根据本发明的一个方面,提供了一种索引创建方法,包括:
建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,其中,所述第一数据定义文件用于定义所述数据库中存储的第一数据的数据格式,所述第二数据定义文件用于定义所述搜索服务器中存储的索引的数据格式;
在所述第二数据定义文件中记录至少一个索引字段,其中,所述索引字段选自所述第一数据;
根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引。
根据本发明的另一方面,本发明还公开了一种索引创建装置,包括:
第一建立模块,用于建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,其中,所述第一数据定义文件用于定义所述数据库中存储的第一数据的数据格式,所述第二数据定义文件用于定义所述搜索服务器中存储的索引的数据格式;
记录模块,用于在所述第二数据定义文件中记录至少一个索引字段,其中,所述索引字段选自所述第一数据;
第一创建模块,用于根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引。
与现有技术相比,本发明实施例包括以下优点:
通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引。通过这种方式创建的索引,由于映射关系,在需要修改索引时,只需要修改第二数据定义文件,无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一的索引创建方法的流程图;
图2是本发明实施例二的索引创建方法的流程图;
图3是本发明实施例三的索引创建方法的流程图;
图4是本发明实施例四的索引创建装置的结构框图;
图5是本发明实施例五的索引创建装置的结构框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
本发明实施例一提供了一种索引创建方法。如图1所示,该方法包括如下的具体步骤:
步骤101:建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系。
其中,第一数据定义文件用于定义数据库中存储的第一数据的数据格式。第二数据定义文件用于定义搜索服务器中存储的索引的数据格式。此外,优选的,第一数据定义文件和第二数据定义文件的类型相同,以便更易建立两者的映射关系。
具体的,该映射关系可通过预设规则建立。该预设规则可由用户设置。该规则可以是:若第一数据定义文件中的定义的字段名与第二数据定义文件中的定义的字段名相同,则该相同字段名之间可建立映射关系。例如,第一数据定义文件中定义了ID,而第二数据定义文件中未定义ID,则ID字段名不会建立映射关系,ID字段名包含的第一数据无法从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式。通过建立该映射关系,才能将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而可在搜索服务器中创建索引。
步骤102:在第二数据定义文件中记录至少一个索引字段。
其中,索引字段选自第一数据。例如,第一数据包括:姓名、性别、年龄,那么索引字段选自上述的至少一种第一数据。若索引字段为职务,由于第一数据中不包括该索引字段对应的数据,因此无法创建索引字段,进而也无法创建该索引。只有记录在第二数据定义文件中的索引字段才能创建为索引。
第一数据定义文件和第二数据定义文件的类型相同,便于建立两份文件之间的映射关系。
步骤103:根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引。
通过该步骤,可将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,以便创建索引。用户进行查询服务时,只能按照该索引查询。该创建的索引存储到搜索服务器中,以便于用户查询。
综上,本发明实施例一的索引创建方法,通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引;通过这种方式创建的索引,由于映射关系,在需要修改索引时,只需要修改第二数据定义文件,无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
实施例二
本发明实施例二提供了一种索引创建方法。如图2所示,该方法包括如下的具体步骤:
步骤201:在数据库中建立第一数据定义文件。
该数据库例如可以是Hbase数据库。第一数据定义文件用于定义数据库中存储的第一数据的数据格式。通过第一数据定义文件限定了第一数据的数据格式,从而可使存入数据库中的第一数据的数据格式统一。
步骤202:将至少一个第一数据从原始数据格式转化为第一数据定义文件定义的数据格式,并存储到数据库中。
该第一数据可以是通过接口从外部服务器等获得的。一般的,该第一数据为一类对象的统称。例如,第一数据可以包括:姓名、性别、年龄等等。第一数据的原始数据格式可能有多种,为了便于统一管理,需要将第一数据从原始数据格式转化为第一数据定义文件定义的数据格式。
步骤203:在搜索服务器中建立第二数据定义文件。
第二数据定义文件用于定义搜索服务器中存储的索引的数据格式。通过第二数据定义文件限定了索引的数据格式,从而可使存入搜索服务器中的索引的数据格式统一。
此外,该第二数据定义文件可以为搜索服务器和搜索服务器的查询接口共用的文件。由于现有技术中还建立有搜索服务器的查询接口使用的查询的数据定义文件,该定义文件中定义了索引字段,从而使得用户能够进行该索引字段的查询。因此,现有技术中需要修改索引字段时,不仅需要修改创建索引的代码,还需要修改查询接口使用的查询的数据定义文件。而本发明实施例的第二数据定义文件中记录有索引字段,因此,将该第二数据定义文件也作为查询接口的定义文件,从而使得创建索引和查询接口的定义文件统一为一份。当需要修改索引时,只需要修改该第二数据定义文件,降低了开发的难度,避免了数据不统一的问题。
优选的,第一数据定义文件和第二数据定义文件的类型相同,以便更易建立两者的映射关系。一般的,现有技术中查询接口使用的查询的数据定义文件为protobuf文件,protobuf为谷歌(google)公司提供的一种开源序列化框架,是一种轻便高效的二进制的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化。它很适合做数据存储或远程过程调用(Remote Procedure Call,RPC)的数据交换格式;可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。因此,更优选的,第一数据定义文件和第二数据定义文件均选用protobuf文件。
步骤204:建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系。
具体的,该映射关系可通过预设规则建立。该预设规则可由用户设置。该规则可以是:若第一数据定义文件中的定义的字段名与第二数据定义文件中的定义的字段名相同,则该相同字段名之间可建立映射关系。例如,第一数据定义文件中定义了ID,而第二数据定义文件中未定义ID,则ID字段名不会建立映射关系,ID字段名包含的第一数据无法从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式。通过建立该映射关系,才能将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,从而可在搜索服务器中创建索引。
步骤205:在第二数据定义文件中记录至少一个索引字段。
其中,索引字段选自第一数据。例如,所需的索引字段为姓名、性别、年龄、职务,则在第二数据定义文件中记录这些字段。只有记录在第二数据定义文件中的索引字段才能创建为索引。
步骤206:根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引。
通过该步骤,可将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,以便创建索引。用户进行查询服务时,只能按照该索引查询。该创建的索引存储到搜索服务器中,以便于用户查询。
步骤207:若增加的索引字段对应的第一数据未存储在数据库中,则将增加的索引字段对应的第一数据从原始数据格式转化为第一数据定义文件定义的数据格式,并存储到数据库中。
若增加的索引字段对应的第一数据未存储在数据库中,则需先在数据库中存入该第一数据。由于,增加的索引字段对应的第一数据的原始格式可能有多种,为了便于统一管理,需要将增加的索引字段对应的第一数据从原始数据格式转化为第一数据定义文件定义的数据格式。例如,增加的索引字段为职务,而第一数据只包括:姓名、性别、年龄,则需要将职务的原始格式转化为第一数据定义文件定义的数据格式,并存储到数据库中,才能通过后续步骤在第二数据定义文件中增加“职务”作为索引字段。
应当理解的是,若增加的索引字段对应的第一数据已存储在数据库中,则无需进行本步骤。
步骤208:在第二数据定义文件中增加至少一个索引字段。
若在创建完索引后,根据需求,还需再增加新的索引,则需要先通过本步骤在第二数据定义文件中增加索引字段。
步骤209:根据映射关系,将增加的索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建增加的索引字段对应的索引。
通过该步骤,可将增加的索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,从而可增加新的索引,以便查询时,可查询增加的索引。该增加的索引可存储到搜索服务器中,以便于用户查询。
综上,本发明实施例二的索引创建方法,通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引;通过这种方式建立的索引,当需要增加索引时,如果该索引对应的第一数据已存在于数据库中,则可通过在第二数据定义文件中增加该索引的记录,通过第一数据定义文件和第二数据定义文件之间的映射关系,可将索引对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,以便创建索引;如果数据库中没有待创建的索引对应的第一数据,则需在该数据库中,增加待创建的索引对应的第一数据;该方法无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
实施例三
本发明实施例三提供了一种索引创建方法。如图3所示,该方法包括如下的具体步骤:
步骤301:在数据库中建立第一数据定义文件。
该数据库例如可以是Hbase数据库。第一数据定义文件用于定义数据库中存储的第一数据的数据格式。通过第一数据定义文件限定了第一数据的数据格式,从而可使存入数据库中的第一数据的数据格式统一。
步骤302:将至少一个第一数据从原始数据格式转化为第一数据定义文件定义的数据格式,并存储到数据库中。
该第一数据可以是通过接口从外部服务器等获得的。一般的,该第一数据为一类对象的统称。例如,第一数据可以包括:姓名、性别、年龄等等。第一数据的原始数据格式可能有多种,为了便于统一管理,需要将第一数据从原始数据格式转化为第一数据定义文件定义的数据格式。
步骤303:在搜索服务器中建立第二数据定义文件。
第二数据定义文件用于定义搜索服务器中存储的索引的数据格式。通过第二数据定义文件限定了索引的数据格式,从而可使存入搜索服务器中的索引的数据格式统一。
此外,该第二数据定义文件可以为搜索服务器和搜索服务器的查询接口共用的文件。由于现有技术中还建立有搜索服务器的查询接口使用的查询的数据定义文件,该定义文件中定义了索引字段,从而使得用户能够进行该索引字段的查询。因此,现有技术中需要修改索引字段时,不仅需要修改创建索引的代码,还需要修改查询接口使用的查询的数据定义文件。而本发明实施例的第二数据定义文件中记录有索引字段,因此,将该第二数据定义文件也作为查询接口的定义文件,从而使得创建索引和查询接口的定义文件统一为一份。当需要修改索引时,只需要修改该第二数据定义文件,降低了开发的难度,避免了数据不统一的问题。
优选的,第一数据定义文件和第二数据定义文件的类型相同,以便更易建立两者的映射关系。一般的,现有技术中查询接口使用的查询的数据定义文件为protobuf文件。因此,更优选的,第一数据定义文件和第二数据定义文件均选用protobuf文件。
步骤304:建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系。
具体的,该映射关系可通过预设规则建立。该预设规则可由用户设置。该规则可以是:若第一数据定义文件中的定义的字段名与第二数据定义文件中的定义的字段名相同,则该相同字段名之间可建立映射关系。例如,第一数据定义文件中定义了ID,而第二数据定义文件中未定义ID,则ID字段名不会建立映射关系,ID字段名包含的第一数据无法从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式。通过建立该映射关系,才能将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,从而可在搜索服务器中创建索引。
步骤305:在第二数据定义文件中记录至少一个索引字段。
其中,索引字段选自第一数据。例如,第一数据包括:姓名、性别、年龄,则索引字段选自这些第一数据。只有记录在第二数据定义文件中的索引字段才能创建为索引。
步骤306:根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引。
通过该步骤,可将第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,以便创建索引。用户进行查询服务时,只能按照该索引查询。该创建的索引存储到搜索服务器中,以便于用户查询。
步骤307:将创建的索引删除。
若根据查询需求,已创建好的索引中有不再需要的索引时,可通过本步骤将该索引删除。
步骤308:在第二数据定义文件中删除与索引对应的索引字段。
由于创建好的索引对应的索引字段都会记录在第二数据定义文件中,因此,需要将第二数据定义文件中的索引字段也删除,从而最终达到删除不需要的索引的目的。
综上,本发明第三实施例的创建索引的方法,通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引;通过这种方式建立的索引,如果需要删除其中的至少一个索引,则通过在第二数据定义文件中删除该索引字段的记录来实现,无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
实施例四
本发明实施例四提供一种索引创建装置。如图4所示,该装置包括如下具体的模块:
第一建立模块401,用于建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系。
其中,第一数据定义文件用于定义数据库中存储的第一数据的数据格式,第二数据定义文件用于定义搜索服务器中存储的索引的数据格式。
优选的,第一数据定义文件和第二数据定义文件的类型相同。第二数据定义文件为搜索服务器和搜索服务器的查询接口共用的文件。第一数据定义文件和第二数据定义文件均为protobuf文件。
记录模块402,用于在第二数据定义文件中记录至少一个索引字段。
其中,索引字段选自第一数据。
第一创建模块403,用于根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引。
综上,本发明实施例四的索引创建装置,通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引;通过这种装置创建的索引,由于映射关系,在需要修改索引时,只需要修改第二数据定义文件,无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
实施例五
本发明实施例五提供一种索引创建装置。如图5所示,该装置包括如下具体的模块:第一建立模块501、记录模块502、第一创建模块503。上述的模块与实施例四中的相同的模块功能相同,在此不再赘述。
优选的,该装置还包括:
第二建立模块504,用于建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系的步骤之前,在数据库中建立第一数据定义文件。
第一存储模块505,用于将至少一个第一数据从原始数据格式转化为第一数据定义文件定义的数据格式,并存储到数据库中。
第三建立模块506,用于在搜索服务器中建立第二数据定义文件。
增加模块507,用于根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引的步骤之后,在第二数据定义文件中增加至少一个索引字段。
第二创建模块508,用于根据映射关系,将增加的索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建增加的索引字段对应的索引。
第二存储模块509,用于若增加的索引字段对应的第一数据未存储在数据库中,则在第二数据定义文件中增加至少一个索引字段的步骤之前,将增加的索引字段对应的第一数据从原始数据格式转化为第一数据定义文件定义的数据格式,并存储到数据库中。
第一删除模块510,用于根据映射关系,将索引字段对应的第一数据从第一数据定义文件定义的数据格式转化为第二数据定义文件定义的数据格式,创建索引的步骤之后,将创建的索引删除。
第二删除模块511,用于在第二数据定义文件中删除与索引对应的索引字段。
综上,本发明实施例五的索引创建装置,通过建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,使得根据该映射关系,可将索引字段对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,从而将第一数据创建为索引;通过这种装置建立的索引,当需要增加索引时,如果该索引对应的第一数据已存在于数据库中,则可通过在第二数据定义文件中增加该索引的记录,通过第一数据定义文件和第二数据定义文件之间的映射关系,可将索引对应的第一数据的数据格式转化为第二数据定义文件定义(即索引)的数据格式,以便创建索引;如果数据库中没有待创建的索引对应的第一数据,则需在该数据库中,增加待创建的索引对应的第一数据;同样的,如果需要删除其中的至少一个索引,则通过在第二数据定义文件中删除该索引字段的记录来实现;该装置无需修改创建索引的代码,极大降低开发复杂度,灵活性更强。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种索引创建方法和装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (12)

1.一种索引创建方法,其特征在于,包括:
建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,其中,所述第一数据定义文件用于定义所述数据库中存储的第一数据的数据格式,所述第二数据定义文件用于定义所述搜索服务器中存储的索引的数据格式;
在所述第二数据定义文件中记录至少一个索引字段,其中,所述索引字段选自所述第一数据;
根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引。
2.根据权利要求1所述的方法,其特征在于,所述建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系的步骤之前,所述方法还包括:
在所述数据库中建立所述第一数据定义文件;
将至少一个所述第一数据从原始数据格式转化为所述第一数据定义文件定义的数据格式,并存储到所述数据库中;
在所述搜索服务器中建立所述第二数据定义文件。
3.根据权利要求1所述的方法,其特征在于,所述根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引的步骤之后,所述方法还包括:
在所述第二数据定义文件中增加至少一个索引字段;
根据所述映射关系,将增加的所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建增加的所述索引字段对应的索引。
4.根据权利要求3所述的方法,其特征在于,若增加的所述索引字段对应的第一数据未存储在所述数据库中,则所述在所述第二数据定义文件中增加至少一个索引字段的步骤之前,所述方法还包括:
将增加的所述索引字段对应的第一数据从原始数据格式转化为所述第一数据定义文件定义的数据格式,并存储到所述数据库中。
5.根据权利要求1所述的方法,其特征在于,所述根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引的步骤之后,所述方法还包括:
将创建的所述索引删除;
在所述第二数据定义文件中删除与所述索引对应的所述索引字段。
6.根据权利要求1所述的方法,其特征在于:所述第二数据定义文件为所述搜索服务器和所述搜索服务器的查询接口共用的文件。
7.一种索引创建装置,其特征在于,包括:
第一建立模块,用于建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系,其中,所述第一数据定义文件用于定义所述数据库中存储的第一数据的数据格式,所述第二数据定义文件用于定义所述搜索服务器中存储的索引的数据格式;
记录模块,用于在所述第二数据定义文件中记录至少一个索引字段,其中,所述索引字段选自所述第一数据;
第一创建模块,用于根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引。
8.根据权利要求7所述的装置,其特征在于,还包括:
第二建立模块,用于所述建立数据库中的第一数据定义文件和搜索服务器中的第二数据定义文件之间的映射关系的步骤之前,在所述数据库中建立所述第一数据定义文件;
第一存储模块,用于将至少一个所述第一数据从原始数据格式转化为所述第一数据定义文件定义的数据格式,并存储到所述数据库中;
第三建立模块,用于在所述搜索服务器中建立所述第二数据定义文件。
9.根据权利要求7所述的装置,其特征在于,还包括:
增加模块,用于所述根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引的步骤之后,在所述第二数据定义文件中增加至少一个索引字段;
第二创建模块,用于根据所述映射关系,将增加的所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据文件定义的数据格式,创建增加的所述索引字段对应的索引。
10.根据权利要求9所述的装置,其特征在于,还包括:
第二存储模块,用于若增加的所述索引字段对应的第一数据未存储在所述数据库中,则所述在所述第二数据定义文件中增加至少一个索引字段的步骤之前,将增加的所述索引字段对应的第一数据从原始数据格式转化为所述第一数据定义文件定义的数据格式,并存储到所述数据库中。
11.根据权利要求7所述的装置,其特征在于,还包括:
第一删除模块,用于所述根据所述映射关系,将所述索引字段对应的第一数据从所述第一数据定义文件定义的数据格式转化为所述第二数据定义文件定义的数据格式,创建所述索引的步骤之后,将创建的所述索引删除;
第二删除模块,用于在所述第二数据定义文件中删除与所述索引对应的所述索引字段。
12.根据权利要求7所述的装置,其特征在于:所述第二数据定义文件为所述搜索服务器和所述搜索服务器的查询接口共用的文件。
CN201710538204.4A 2017-07-04 2017-07-04 一种索引创建方法和装置 Active CN107463618B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710538204.4A CN107463618B (zh) 2017-07-04 2017-07-04 一种索引创建方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710538204.4A CN107463618B (zh) 2017-07-04 2017-07-04 一种索引创建方法和装置

Publications (2)

Publication Number Publication Date
CN107463618A true CN107463618A (zh) 2017-12-12
CN107463618B CN107463618B (zh) 2020-06-30

Family

ID=60546630

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710538204.4A Active CN107463618B (zh) 2017-07-04 2017-07-04 一种索引创建方法和装置

Country Status (1)

Country Link
CN (1) CN107463618B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110309151A (zh) * 2019-06-18 2019-10-08 精硕科技(北京)股份有限公司 一种索引建立方法、装置及计算机可读存储介质
CN110990406A (zh) * 2019-11-28 2020-04-10 中国建设银行股份有限公司 一种模糊查询方法、装置、设备和介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101656720A (zh) * 2009-08-12 2010-02-24 北京握奇数据系统有限公司 对信息系统中访问对象信息统一维护的方法及装置
CN101667183A (zh) * 2008-09-02 2010-03-10 浙江大学 一种基于定制的索引建立方法、装置和系统
CN102110102A (zh) * 2009-12-29 2011-06-29 北大方正集团有限公司 数据处理方法及装置、文件识别方法及工具
CN103235820A (zh) * 2013-04-27 2013-08-07 北京搜狐新媒体信息技术有限公司 一种集群系统中数据存储方法与装置
CN105279213A (zh) * 2015-03-13 2016-01-27 中国移动通信集团广东有限公司 一种日志数据库检索装置及检索方法
US10430433B2 (en) * 2015-09-25 2019-10-01 Mongodb, Inc. Systems and methods for data conversion and comparison

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101667183A (zh) * 2008-09-02 2010-03-10 浙江大学 一种基于定制的索引建立方法、装置和系统
CN101656720A (zh) * 2009-08-12 2010-02-24 北京握奇数据系统有限公司 对信息系统中访问对象信息统一维护的方法及装置
CN102110102A (zh) * 2009-12-29 2011-06-29 北大方正集团有限公司 数据处理方法及装置、文件识别方法及工具
CN103235820A (zh) * 2013-04-27 2013-08-07 北京搜狐新媒体信息技术有限公司 一种集群系统中数据存储方法与装置
CN105279213A (zh) * 2015-03-13 2016-01-27 中国移动通信集团广东有限公司 一种日志数据库检索装置及检索方法
US10430433B2 (en) * 2015-09-25 2019-10-01 Mongodb, Inc. Systems and methods for data conversion and comparison

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
刘勇: "《基于GPU的内存数据库索引技术研究》", 《中国博士学位论文全文数据库 信息科技辑》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110309151A (zh) * 2019-06-18 2019-10-08 精硕科技(北京)股份有限公司 一种索引建立方法、装置及计算机可读存储介质
CN110990406A (zh) * 2019-11-28 2020-04-10 中国建设银行股份有限公司 一种模糊查询方法、装置、设备和介质
CN110990406B (zh) * 2019-11-28 2023-07-14 中国建设银行股份有限公司 一种模糊查询方法、装置、设备和介质

Also Published As

Publication number Publication date
CN107463618B (zh) 2020-06-30

Similar Documents

Publication Publication Date Title
CN109783555B (zh) 表单模板存储方法、装置、存储介质及电子设备
AU2005239366B2 (en) Partial query caching
CN104123288B (zh) 一种数据查询方法及装置
CN108446313B (zh) 一种数据格式转换方法和装置
CN110704398A (zh) 从MySQL到Oracle的数据库迁移方法、装置及计算机设备
CN103995854A (zh) 一种设备跨版本升级方法和装置
US8768913B2 (en) Multi-source searching in a data driven application
US20210165773A1 (en) On-demand, dynamic and optimized indexing in natural language processing
CN106095698A (zh) 面向对象的缓存写入、读取方法及装置
CN109815238A (zh) 用严格平衡二叉树实现数据库的动态添加方法及装置
CN105760361A (zh) 一种语言模型建立方法及装置
CN114090695A (zh) 分布式数据库的查询优化的方法和装置
CN107463618A (zh) 一种索引创建方法和装置
CN113407514A (zh) 一种数据库迁移的方法、装置、设备及可读介质
CN113704248B (zh) 一种基于外置索引的区块链查询优化方法
CN114238379A (zh) 基于sql生成器的报表查询方法和系统
CN114443015A (zh) 一种基于数据库元数据的增删改查服务接口生成方法
CN110263104A (zh) Json字符串处理方法及装置
KR101955376B1 (ko) 비공유 아키텍처 기반의 분산 스트림 처리 엔진에서 관계형 질의를 처리하는 방법, 이를 수행하기 위한 기록 매체 및 장치
CN113157904A (zh) 基于dfa算法的敏感词过滤方法及系统
US8880503B2 (en) Value-based positioning for outer join queries
CN104268264A (zh) 一种检索条件建立装置及检索装置
CN106339454A (zh) 查询命令转化方法及装置
CN113672639B (zh) 多类型数据库表结构对比方法、系统、设备及存储介质
CN112307061A (zh) 用于查询数据的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant