CN107239517A - 基于Hbase数据库的多条件搜索方法及装置 - Google Patents

基于Hbase数据库的多条件搜索方法及装置 Download PDF

Info

Publication number
CN107239517A
CN107239517A CN201710370179.3A CN201710370179A CN107239517A CN 107239517 A CN107239517 A CN 107239517A CN 201710370179 A CN201710370179 A CN 201710370179A CN 107239517 A CN107239517 A CN 107239517A
Authority
CN
China
Prior art keywords
search
key
value pair
many condition
multiple search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710370179.3A
Other languages
English (en)
Other versions
CN107239517B (zh
Inventor
刘占春
刘金财
王涛
齐博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China United Network Communications Group Co Ltd
Original Assignee
China United Network Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China United Network Communications Group Co Ltd filed Critical China United Network Communications Group Co Ltd
Priority to CN201710370179.3A priority Critical patent/CN107239517B/zh
Publication of CN107239517A publication Critical patent/CN107239517A/zh
Application granted granted Critical
Publication of CN107239517B publication Critical patent/CN107239517B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2228Indexing structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471Distributed queries

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种基于Hbase数据库的多条件搜索方法及装置,该方法包括:接收用户通过终端设备输入的多个搜索字段;判断是否存在与多个搜索字段对应的多条件组合键值对关系;若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合;根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。能够通过分布式搜索引擎进行一级索引,并通过任一字段的键值对关系在Hbase数据库中进行二级索引,提升了整个多条件组合搜索的效率,并且减少了多条件组合搜索的成本。

Description

基于Hbase数据库的多条件搜索方法及装置
技术领域
本发明实施例涉及大数据处理技术领域,尤其涉及一种基于Hbase数据库的多条件搜索方法及装置。
背景技术
随着互联网和大数据技术的发展,传统的关系数据库已无法满足大数据的存储和使用需求,因此非关系型数据库HBase应运而生。该Hbase数据库具有海量数据的存储和线性扩展能力,所以非常适用于大数据的存储和使用需求。
现有的HBase数据库,通过建立键值对关系进行数据的搜索,对于没有键值对关系的多条件组合搜索,需要全表扫描,使对数据的搜索效率低下。为了提高多条件组合搜索的效率,需要事先建立各种多条件组合键值对关系,如果组合查询条件发生变化,需要重新设计和生成对应的多条件组合键值对关系,使多条件组合搜索的成本较高,并且搜索效率较低。
发明内容
本发明实施例提供一种基于Hbase数据库的多条件搜索方法及装置,解决了现有技术中的基于HBase数据库的多条件组合的搜索方法使多条件组合搜索的成本较高,并且搜索效率较低的技术问题。
本发明实施例提供一种基于Hbase数据库的多条件搜索方法,包括:
接收用户通过终端设备输入的多个搜索字段;
判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
本发明实施例提供一种基于Hbase数据库的多条件搜索装置,包括:
接收模块,用于接收用户通过终端设备输入的多个搜索字段;
判断模块,用于判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
分布式引擎一级搜索模块,用于若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
Hbase数据库二级搜索模块,用于根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
本发明实施例提供一种基于Hbase数据库的多条件搜索方法及装置,通过接收用户通过终端设备输入的多个搜索字段;判断是否存在与多个搜索字段对应的多条件组合键值对关系;若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合;根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。能够通过分布式搜索引擎进行一级索引,并通过任一字段的键值对关系在Hbase数据库中进行二级索引,将多条件组合搜索方法采用两级索引的方式进行搜索,由于每一级索引均能提高搜索效率,进而提升了整个多条件组合搜索的效率,并且不依赖于多条件组合键值对关系进行的搜索,所以减少了多条件组合搜索的成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明基于Hbase数据库的多条件搜索方法实施例一的流程图;
图2为本发明基于Hbase数据库的多条件搜索方法实施例二的流程图;
图3为本发明基于Hbase数据库的多条件搜索装置实施例一的结构示意图;
图4为本发明基于Hbase数据库的多条件搜索装置实施例二的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
图1为本发明基于Hbase数据库的多条件搜索方法实施例一的流程图,如图1所示,则本实施例提供的基于Hbase数据库的多条件搜索方法的执行主体为基于Hbase数据库的多条件搜索装置,该基于Hbase数据库的多条件搜索装置可集成在计算机或服务器中,则本实施例提供的基于Hbase数据库的多条件搜索方法包括以下几个步骤。
步骤101,接收用户通过终端设备输入的多个搜索字段。
具体地,本实施例中,用户通过终端设备的鼠标和键盘输入多个搜索字段。其中,在多个搜索字段中存在具有键值对关系的搜索字段,该多个搜索字段可具有对应的多条件组合键值对关系,也可不具有对应的多条件组合键值对关系,本实施例中对此不做限定。
其中,在两两搜索字段之间可输入分隔符,以区分每一个搜索字段,对分隔符的种类不做限定,如可以为空格、逗号、顿号等。
步骤102,判断是否存在与多个搜索字段对应的多条件组合键值对关系。
具体地,本实施例中,可根据预先存储的所有的多条件组合键值对关系,判断是否存在与多个搜索字段相匹配的多条件组合键值对关系。
步骤103,若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合。
具体地,本实施例中,若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索。由于在分布式搜索引擎中预先建立了预设的可能参与搜索的列族,所以根据多个搜索字段在预设的可能参与搜索的列族中进行搜索,输出满足多个搜索字段的记录集合。
其中,预设的可能参与搜索的列族是Hbase数据库中对应的完整数据的部分数据。
本实施例中,满足多个搜索字段的记录集合中的每个记录均为符合多个搜索字段的搜索结果。但在该搜索结果中不是对满足多个搜索字段的完整数据。
本实施例中,通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合是多条件搜索的一级索引结果,由于分布式搜索引擎具有搜索速度快的特点,所以通过一级索引能够快速地获取满足多个搜索字段的记录集合。
步骤104,根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。
具体地,本实施例中,由于在Hbase数据库中存储了关于多个搜索字段的完整数据,并且在多个搜索字段中存在至少一个搜索字段对应的键值对关系,所以根据记录集合的每个记录中的任一字段的键值对关系能够从Hbase数据库中搜索到关于该字段的完整数据,该完整数据可满足其他搜索字段的要求。
本实施例中,对根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据是对多条件搜索的二级索引结果。
本实施例提供的基于Hbase数据库的多条件搜索方法,通过接收用户通过终端设备输入的多个搜索字段;判断是否存在与多个搜索字段对应的多条件组合键值对关系;若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合;根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。能够通过分布式搜索引擎进行一级索引,并通过任一字段的键值对关系在Hbase数据库中进行二级索引,将多条件组合搜索方法采用两级索引的方式进行搜索,由于每一级索引均能提高搜索效率,进而提升了整个多条件组合搜索的效率,并且不依赖于多条件组合键值对关系进行的搜索,所以减少了多条件组合搜索的成本。
图2为本发明基于Hbase数据库的多条件搜索方法实施例二的流程图,如图2所示,本实施例提供的基于Hbase数据库的多条件搜索方法,是在本发明基于Hbase数据库的多条件搜索方法实施例一的基础上,还包括了另一种进行多条件组合搜索的步骤,则本实施例提供的基于Hbase数据库的多条件搜索方法包括以下步骤。
步骤201,接收用户通过终端设备输入的多个搜索字段。
本实施例中,步骤201的实现方式与本发明基于Hbase数据库的多条件搜索方法实施例一中的步骤101的实现方式相同,在此不再一一赘述。
步骤202,判断是否存在与多个搜索字段对应的多条件组合键值对关系,若否,则执行步骤203,否则执行步骤205。
进一步地,本实施例中,判断是否存在与多个搜索字段对应的多条件组合键值对关系,若不存在,则采用方案一的方式进行多条件组合的二级搜索,若存在,则采用方案二的方式进行多条件组合的二级搜索。
其中,方案一的方式为:首先采用分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合,其为方案一的一级索引;然后根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据,其为方案一的二级索引。
方案二的方式为:首先根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果,其为方案二的一级索引,然后根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据,其为方案二的二级索引。
步骤203,通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合。
进一步地,在步骤203之前,判断分布式搜索引擎中是否建立了预设的可能参与搜索的列族,若否,则在分布式搜索引擎中建立预设的可能参与搜索的列族。
其中,预设的可能参与搜索的列族是Hbase数据库中对应的完整数据的部分数据。
本实施例中,预先在分布式搜索引擎中建立预设的可能参与搜索的列族,通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合,由于采用了分布式搜索引擎从完整数据的部分数据中进行搜索,所以能够更加快速地进行一级索引。
步骤204,根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。
本实施例中,步骤204的实现方式与本发明基于Hbase数据库的多条件搜索方法实施例一中的步骤104的实现方式相同,在此不再一一赘述。
执行完步骤204后,执行步骤207。
步骤205,根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果。
进一步地,本实施例中,根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果之前,判断是否预先将键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域,若否,则将键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域。
本实施例中,将键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域,能够根据键值对关系更加快速地查找到对应的完整数据。
进一步地,本实施例中,若存在与多个搜索字段对应的多条件组合键值对关系,则说明多个搜索字段对应的多条件组合键值对关系为常用的键值对关系,预先进行了建立。所以根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果,其为方案二的一级索引。本实施例中,只输出包括搜索首字段的搜索结果能够加快搜索结果的输出速度。
其中,输出的包括搜索首字段的搜索结果为与搜索首字段相关的内容,该搜索结果也满足其他搜索字段的内容,只是未输出与其他搜索字段相关的内容。
需要说明的是,本实施例中存在搜索首字段对应的键值对关系。
步骤206,根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据。
进一步地,本实施例中,由于存在搜索首字段对应的键值对关系,所以根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据。其为方案二的二级索引。
本实施例中,方案二的多条件搜索方法相较于方案一,虽然在Hbase数据库中完成二级索引的搜索速度相对较慢,但能够减少分布式搜索引擎中建立预设的可能参与搜索的列族的步骤,减少了数据冗余,并且减少了设备间的数据传输和交互。
步骤207,从完整数据中查找需获取的信息。
其中,需获取的信息为未建立键值对关系的信息。
具体地,在获取到完整数据后,能够在完整数据中查找到未建立键值对关系的信息,无需对未建立键值对关系的信息的直接搜索。
本实施例提供的基于Hbase数据库的多条件搜索方法,通过接收用户通过终端设备输入的多个搜索字段,判断是否存在与多个搜索字段对应的多条件组合键值对关系,若否,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合,根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据,否则根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果,根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据。能够根据是否存在与多个搜索字段对应的多条件组合键值对关系进行两种多条件搜索方案的选择,并且两种进行多条件搜索的方案均为二级索引的方案,提升了整个多条件组合搜索的效率。并且对于方案二,只依赖于常用的多条件组合键值对关系,无需重新设计和生成对应的键值组合关系,也减少了多条件组合搜索的成本。而且方案二在方案一的基础上,减少了数据冗余,并且减少了设备间的数据传输和交互。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
图3为本发明基于Hbase数据库的多条件搜索装置实施例一的结构示意图,如图3所示,本实施例提供的基于Hbase数据库的多条件搜索装置包括:接收模块31,判断模块32,分布式引擎一级搜索模块33,Hbase数据库二级搜索模块34。
其中,接收模块31,用于接收用户通过终端设备输入的多个搜索字段。判断模块32,用于判断是否存在与多个搜索字段对应的多条件组合键值对关系。分布式引擎一级搜索模块33,用于若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合。Hbase数据库二级搜索模块34,用于根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。
本实施例提供的基于Hbase数据库的多条件搜索装置可以执行图1所示方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
图4为本发明基于Hbase数据库的多条件搜索装置实施例二的结构示意图,如图4所示,本实施例提供的基于Hbase数据库的多条件搜索装置本发明基于Hbase数据库的多条件搜索装置实施例一的基础上,进一步地,还包括:建立模块41,Hbase数据库一级搜索模块42,存储模块43,查找模块44。
进一步地,建立模块41,用于在分布式搜索引擎中建立预设的可能参与搜索的列族;其中,预设的可能参与搜索的列族是Hbase数据库中对应的完整数据的部分数据。
进一步地,Hbase数据库一级搜索模块42,用于若存在与多个搜索字段对应的多条件组合键值对关系,则根据多条件组合键值对关系,对与多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果。Hbase数据库二级搜索模块34,还用于根据包括搜索首字段的搜索结果对应的键值对关系,从Hbase数据库中读取对应的完整数据。
进一步地,存储模块43,用于将键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域。
进一步地,查找模块44,用于从完整数据中查找需获取的信息;其中,需获取的信息为未建立键值对关系的信息。
本实施例提供的基于Hbase数据库的多条件搜索装置可以执行图2所示方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于Hbase数据库的多条件搜索方法,其特征在于,包括:
接收用户通过终端设备输入的多个搜索字段;
判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
2.根据权利要求1所述的方法,其特征在于,所述通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合之前,还包括:
在所述分布式搜索引擎中建立预设的可能参与搜索的列族;
其中,所述预设的可能参与搜索的列族是所述Hbase数据库中对应的完整数据的部分数据。
3.根据权利要求1所述的方法,其特征在于,若存在与所述多个搜索字段对应的多条件组合键值对关系,则还包括:
根据所述多条件组合键值对关系,对与所述多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果;
根据所述包括搜索首字段的搜索结果对应的键值对关系,从所述Hbase数据库中读取对应的完整数据。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述接收用户通过终端设备输入的多个搜索字段之前,还包括:
将所述键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域。
5.根据权利要求4所述的方法,其特征在于,所述从所述Hbase数据库中读取对应的完整数据之后,还包括:
从所述完整数据中查找需获取的信息;
其中,所述需获取的信息为未建立键值对关系的信息。
6.一种基于Hbase数据库的多条件搜索装置,其特征在于,包括:
接收模块,用于接收用户通过终端设备输入的多个搜索字段;
判断模块,用于判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
分布式引擎一级搜索模块,用于若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
Hbase数据库二级搜索模块,用于根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
7.根据权利要求6所述的装置,其特征在于,还包括:
建立模块,用于在所述分布式搜索引擎中建立预设的可能参与搜索的列族;其中,所述预设的可能参与搜索的列族是所述Hbase数据库中对应的完整数据的部分数据。
8.根据权利要求6所述的装置,其特征在于,还包括:
Hbase数据库一级搜索模块,用于若存在与所述多个搜索字段对应的多条件组合键值对关系,则根据所述多条件组合键值对关系,对与所述多个搜索字段相关的数据进行搜索,并输出包括搜索首字段的搜索结果;
所述Hbase数据库二级搜索模块,还用于根据所述包括搜索首字段的搜索结果对应的键值对关系,从所述Hbase数据库中读取对应的完整数据。
9.根据权利要求6-8中任一项所述的装置,其特征在于,还包括:
存储模块,用于将所述键值对关系和对应的完整数据存储在Hbase数据库服务器的同一存储块的不同区域。
10.根据权利要求9所述的装置,其特征在于,还包括:
查找模块,用于从所述完整数据中查找需获取的信息;其中,所述需获取的信息为未建立键值对关系的信息。
CN201710370179.3A 2017-05-23 2017-05-23 基于Hbase数据库的多条件搜索方法及装置 Active CN107239517B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710370179.3A CN107239517B (zh) 2017-05-23 2017-05-23 基于Hbase数据库的多条件搜索方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710370179.3A CN107239517B (zh) 2017-05-23 2017-05-23 基于Hbase数据库的多条件搜索方法及装置

Publications (2)

Publication Number Publication Date
CN107239517A true CN107239517A (zh) 2017-10-10
CN107239517B CN107239517B (zh) 2020-09-29

Family

ID=59985909

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710370179.3A Active CN107239517B (zh) 2017-05-23 2017-05-23 基于Hbase数据库的多条件搜索方法及装置

Country Status (1)

Country Link
CN (1) CN107239517B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112685445A (zh) * 2020-12-29 2021-04-20 杭州旷云金智科技有限公司 数据查询方法及装置、存储介质及电子设备

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100161565A1 (en) * 2008-12-18 2010-06-24 Electronics And Telecommunications Research Institute Cluster data management system and method for data restoration using shared redo log in cluster data management system
CN102663097A (zh) * 2012-04-10 2012-09-12 农业部信息中心 一种基于Hadoop+Hbase的农业时序数据组织方法
CN103324764A (zh) * 2013-07-22 2013-09-25 苏州灵巴巴网络科技有限公司 一种多条件任意关键字多字段模糊查询方法的Web实现
CN103488702A (zh) * 2013-09-06 2014-01-01 云南电力试验研究院(集团)有限公司电力研究院 基于SorlCloud非结构化数据检索方法和系统
CN103646073A (zh) * 2013-12-11 2014-03-19 浪潮电子信息产业股份有限公司 一种基于HBase表的条件查询优化方法
CN104102710A (zh) * 2014-07-15 2014-10-15 浪潮(北京)电子信息产业有限公司 一种海量数据查询方法
CN104317966A (zh) * 2014-11-18 2015-01-28 国家电网公司 一种用于电力大数据快速组合查询的动态索引方法
CN104537101A (zh) * 2015-01-12 2015-04-22 杏树林信息技术(北京)有限公司 医学信息搜索引擎系统和搜索方法
CN104573022A (zh) * 2015-01-12 2015-04-29 浪潮软件股份有限公司 一种HBase的数据查询方法及装置
CN104731974A (zh) * 2015-04-13 2015-06-24 上海新炬网络信息技术有限公司 基于大数据流式计算的动态页面加载方法
CN104778278A (zh) * 2015-04-30 2015-07-15 亚信科技(南京)有限公司 一种基于solr的搜索方法及搜索应用服务器AUS
CN104850640A (zh) * 2015-05-26 2015-08-19 华北电力大学(保定) 一种基于HBase的电网设备状态监测数据存储和查询方法及系统
CN105095458A (zh) * 2015-07-29 2015-11-25 南威软件股份有限公司 一种基于时间特征支持复杂条件的大数据检索方法
CN105975585A (zh) * 2016-05-05 2016-09-28 云神科技投资股份有限公司 一种用于电力大数据快速查询方法
CN106326429A (zh) * 2016-08-25 2017-01-11 武汉光谷信息技术股份有限公司 一种基于solr的Hbase秒级查询方案
CN106484694A (zh) * 2015-08-25 2017-03-08 杭州华为数字技术有限公司 基于分布式数据库的全文搜索方法及系统
CN106528674A (zh) * 2016-10-31 2017-03-22 厦门服云信息科技有限公司 基于Hbase行健的高性能查询方法和装置
CN106682139A (zh) * 2016-12-19 2017-05-17 深圳盒子支付信息技术有限公司 一种基于Solr实现HBase多条件查询的方法及系统

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100161565A1 (en) * 2008-12-18 2010-06-24 Electronics And Telecommunications Research Institute Cluster data management system and method for data restoration using shared redo log in cluster data management system
CN102663097A (zh) * 2012-04-10 2012-09-12 农业部信息中心 一种基于Hadoop+Hbase的农业时序数据组织方法
CN103324764A (zh) * 2013-07-22 2013-09-25 苏州灵巴巴网络科技有限公司 一种多条件任意关键字多字段模糊查询方法的Web实现
CN103488702A (zh) * 2013-09-06 2014-01-01 云南电力试验研究院(集团)有限公司电力研究院 基于SorlCloud非结构化数据检索方法和系统
CN103646073A (zh) * 2013-12-11 2014-03-19 浪潮电子信息产业股份有限公司 一种基于HBase表的条件查询优化方法
CN104102710A (zh) * 2014-07-15 2014-10-15 浪潮(北京)电子信息产业有限公司 一种海量数据查询方法
CN104317966A (zh) * 2014-11-18 2015-01-28 国家电网公司 一种用于电力大数据快速组合查询的动态索引方法
CN104573022A (zh) * 2015-01-12 2015-04-29 浪潮软件股份有限公司 一种HBase的数据查询方法及装置
CN104537101A (zh) * 2015-01-12 2015-04-22 杏树林信息技术(北京)有限公司 医学信息搜索引擎系统和搜索方法
CN104731974A (zh) * 2015-04-13 2015-06-24 上海新炬网络信息技术有限公司 基于大数据流式计算的动态页面加载方法
CN104778278A (zh) * 2015-04-30 2015-07-15 亚信科技(南京)有限公司 一种基于solr的搜索方法及搜索应用服务器AUS
CN104850640A (zh) * 2015-05-26 2015-08-19 华北电力大学(保定) 一种基于HBase的电网设备状态监测数据存储和查询方法及系统
CN105095458A (zh) * 2015-07-29 2015-11-25 南威软件股份有限公司 一种基于时间特征支持复杂条件的大数据检索方法
CN106484694A (zh) * 2015-08-25 2017-03-08 杭州华为数字技术有限公司 基于分布式数据库的全文搜索方法及系统
CN105975585A (zh) * 2016-05-05 2016-09-28 云神科技投资股份有限公司 一种用于电力大数据快速查询方法
CN106326429A (zh) * 2016-08-25 2017-01-11 武汉光谷信息技术股份有限公司 一种基于solr的Hbase秒级查询方案
CN106528674A (zh) * 2016-10-31 2017-03-22 厦门服云信息科技有限公司 基于Hbase行健的高性能查询方法和装置
CN106682139A (zh) * 2016-12-19 2017-05-17 深圳盒子支付信息技术有限公司 一种基于Solr实现HBase多条件查询的方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112685445A (zh) * 2020-12-29 2021-04-20 杭州旷云金智科技有限公司 数据查询方法及装置、存储介质及电子设备

Also Published As

Publication number Publication date
CN107239517B (zh) 2020-09-29

Similar Documents

Publication Publication Date Title
US8326783B2 (en) Method and system for optimizing configuration classification of software
US8694488B1 (en) Identifying sibling queries
CN102831122B (zh) 工作流表的数据保存方法、查询方法及装置
US11442694B1 (en) Merging database tables by classifying comparison signatures
CN106033416A (zh) 一种字符串处理方法及装置
CN103309869B (zh) 数据对象的展示关键词推荐方法及系统
CN105279089B (zh) 一种获取页面元素的方法及装置
CN103885966A (zh) 电子商务交易平台中的问答交互方法和系统
US20210263903A1 (en) Multi-level conflict-free entity clusters
CN104484478B (zh) 一种关联聚类数据瘦身方法及系统
JP6418431B2 (ja) 効率的な1対1結合のための方法
CN103678513B (zh) 一种交互式的检索式生成方法及系统
CN105653546B (zh) 一种目标主题的检索方法和系统
CN106326462A (zh) 一种视频索引分级方法及装置
US10216792B2 (en) Automated join detection
CN105787004A (zh) 一种文本分类方法及装置
CN106997340A (zh) 词库的生成以及利用词库的文档分类方法及装置
CN107239517A (zh) 基于Hbase数据库的多条件搜索方法及装置
US20130007023A1 (en) System and Method for Consolidating Search Engine Results
CN116662327A (zh) 一种用于数据库的数据融合清理方法
CN110032664A (zh) 一种快速建立比特币区块链全节点地址索引的方法
CN104915408B (zh) 一种社交化搜索结果展示的方法及装置
Li Glowworm Swarm Optimization Algorithm‐and K‐Prototypes Algorithm‐Based Metadata Tree Clustering
CN106572394B (zh) 一种影视数据导航方法
CN110532391A (zh) 一种文本词性标注的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant