CN103617232A - 一种针对HBase表的分页查询方法 - Google Patents
一种针对HBase表的分页查询方法 Download PDFInfo
- Publication number
- CN103617232A CN103617232A CN201310611079.7A CN201310611079A CN103617232A CN 103617232 A CN103617232 A CN 103617232A CN 201310611079 A CN201310611079 A CN 201310611079A CN 103617232 A CN103617232 A CN 103617232A
- Authority
- CN
- China
- Prior art keywords
- data
- page
- concordance list
- hbase table
- row
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种针对Hbase数据库的分页查询方法,包括:1)对Hbase表的每行数据进行顺序编号,从而每行数据具有序号;2)将该行数据的序号与键RowKey对应顺序地存储至一索引表;3)分页查询时,根据所查询的页码和每页的数据行数,确定序号范围;以及4)从所述索引表,根据所述序号范围,获得要查询的键RowKey的集合,根据所述集合中的键RowKey来查询所述Hbase表。本发明实现了HBase表数据的分页查询功能,解决了页面跳转的效率低下的问题。
Description
技术领域
本发明涉及数据库表领域,更具体地,涉及一种针对HBase表的分页查询方法。
背景技术
Hbase是一个分布式的、面向列的开源数据库,HBase以表的形式存储数据,表有行和列组成,列划分为若干个列族(Column family)。可以将Hbase想象为一个很大的图(Map),里面可以存储数亿条的key value键值对。Hbase表结构如下表所示:
其中列族可以有1到多个,每个列族下可以有1到多个列。
Rowkey是用来检索Hbase的主键。Rowkey可以是任意字符串(最大长度是64KB,实际应用中长度一般为10-100bytes)。存储时,数据按照Rowkey的字典序(byte order)排序存储。当前,访问Hbase中的行,只有三种方式:1、通过单个Rowkey访问;2、通过Rowkey的范围;3、全表扫描。
HBase表的特点包括:大,一个表可以有上亿行,上百万列;面向列,面向列(族)的存储和权限控制,列(族)独立检索。
在一些Hbase的应用场景下,需要用到分页查询数据,即将HBase表中的数据取出来,按页显示,并且要实现从某一页到指定页的跳转,以及上下页的翻转。但是当前只能按照key来取value,虽然可以通过key的范围来查询数据,可是在分页查询的时候并不知道有哪些key在数据表中。
因此,当前针对Hbase表的分页查询方法是非常低效的。
发明内容
针对现有技术的问题,本发明提出一种针对HBase表的分页查询方法,所述方法包括:1)对Hbase表的每行数据进行顺序编号,从而每行数据具有序号;2)将该行数据的序号与键RowKey对应顺序地存储至一索引表;3)分页查询时,根据所查询的页码和每页的数据行数,确定序号范围;以及4)从所述索引表,根据所述序号范围,获得要查询的键RowKey的集合,根据所述集合中的键RowKey来查询所述Hbase表。
有利地,在步骤2)中,所述索引表的序号是原子递增的。
有利地,在步骤2)中,在所述索引表中,所述序号为该索引表的键,所述键RowKey为该序号所对应的值。
有利地,所述索引表为Hbase表,所述索引表的第一行记录中的键值为0,该第一行记录的列值为所述索引表的记录条数。
有利地,所述针对Hbase表的分页查询方法,还包括:5)当所述Hbase表中新增一行数据时,所述索引表的第一行记录中的列值原子递增;6)在所述索引表中增加一条新记录,该新记录的键为原子递增后的序号,该新记录的列值为所述数据表中的新增数据的RowKey。
有利地,在步骤3),所述序号范围由起始行startRow和结束行endRow确定,
startRow=(pageIndex-1)*pageSize+1;
endRow=pageIndex*pageSize;
其中,pageIndex为要查询的页码,pageSize为每页的数据行数。
有利地,所述针对Hbase表的分页查询方法,还包括:7)在查询完一页后,根据新页码重新设置pageIndex,从而计算新页码的起始行startRow和结束行endRow,而进行分页查询。本发明实现了HBase表数据的分页查询功能,原HBase中未实现分页查询功能。
本发明解决了页面跳转的效率低下的问题,即从某页跳转到指定页,其效率和从上一页跳转到下一页的效率无差别。
本发明解决了查询hbase表中的数据总条数过慢的效率问题,以及解决了查询总页数的效率问题,从而提高了数据统计的效率。
附图说明
图1为本发明的方法的一个实施例的流程图;
图2为图1所示的方法的示意图;
图3为本发明的方法的又一实施例的示意图;
图4为本发明的方法的效果示意图。
具体实施方式
在一个实施例中,假设当前Hbase数据库中有一张表Data,其数据量为5000万行。表Data的主键为RowKey。
先对表Data的每行数据作索引,即为每行数据顺序编上序号。
然后,将此序号和对应的记录的键(RowKey)存放在一张索引表Index中。所述序号作为索引表Index的键,该键的值为表Data中的该行数据的键RowKey。所述序号为原子递增的。优选地,索引表Index为Hbase表。
如图2所示,左侧为表Data,其中包括8行数据,每行数据具有其Rowkey值及其列值。右侧为本发明创建的表Data的索引表Index。索引表Index也对应具有8条记录。索引表Index的键为原子递增的编号,列值为表Data中的RowKey。
如果现在需要查表Data的第8页的数据,其中设定每页10行数据。那么该第8页对应的序号范围为71-80。根据该序号范围,到索引表Index表中查询编号为71到80的记录,那么就获得了10个键,而这10个键正是表Data中第8页的10行数据的10个RowKey。然后,通过这10个键再到表Data中去查询需要的数据。如此实现了对Hbase表的分页查询。
更一般地,在进行分页查询时,首先计算起始行startRow和结束行endRow。
startRow=(pageIndex-1)*pageSize+1;
endRow=pageIndex*pageSize。
然后,根据startRow和endRow从索引表Index中获得实际的RowKey(即表Data的该页数据的RowKey值)。最后,根据该RowKey值查询表Data,实现对表Data的分页查询。
本发明还可方便地实现多页的查询,也就是页码的跳转。针对的需求是要查询Hbase表的多页。无论这查询的页面是连续的还是不连续的,例如查询第8-10页的数据。或者例如查询第1、4、7页的数据。都可在查询完一页后,重新设置pageIndex而实现页码的跳转,检索出数据。
更进一步,当表Data中插入一行数据时,需要在所述索引表中也顺序插入一条新的记录,所述新的记录的键值为所述表Data中插入的该行数据的RowKey。
优选地,索引表Index中的第一条记录的键为0,列值为该索引表的当前总记录数。这可以在O(1)时间复杂度内查询到一张表有多少行数据量。以及计算出分页时此表中的数据总共有多少页。
如图3所示,在图2所示的表Data中插入一行数据时,该数据的RowKey为K9,列值为V9。索引表Index的第一条记录中的列值原子递增,更新为9。对应地,在索引表Index中增加一条新记录,该记录的键为序号原子递增,为9,其列值为该Data表中的新增行数据的RowKey“K9”。
本发明的方法实现了对HBase的分页查询,实现了页面的上下页翻转,以及指定页面的跳转,并且可以轻易的获取得到表中的数据量。其分页查询的效率时间复杂度为O(1),查询表的总数据量的时间复杂度为O(1)。
如果使用原生的HBase的scan方式进行分页查询,当查询第10页的数据时,需要把10页之前的数据也查出来并且丢弃,这个时间复杂度是根据数据量的多少线性递增的。用scan或者HBase的Coprocessor去查询数据表的总数据量也是线性递增的。可见,其效率低下。
对scan方式的一个改进是,scan后记录该页面的起始rowKey和终止rowKey,然后查询下一页的时候将终止rowKey作为下一页起始rowKey去查询页面大小的数据。但是这不能支持指定页面的跳转:即如果想从第1也跳转到第5页,这种方法就不能支持,因为只有第1页的start key和end key,不能确定第5页的start key。
所以用原生的HBase方式去做分页查询和查询数据量和本发明的方法相比,本发明提供的方法更加高效,其比较图如图4所示。可以看出,本发明的耗时随着数据量的增加,耗时基本没有变化。而通过现有技术的scan方式,耗时随着数据量的增加基本上呈线性递增。
Claims (7)
1.一种针对Hbase表的分页查询方法,其特征在于,包括:
1)对Hbase表的每行数据进行顺序编号,从而每行数据具有序号;
2)将该行数据的序号与键RowKey对应顺序地存储至一索引表;
3)分页查询时,根据所查询的页码和每页的数据行数,确定序号范围;以及
4)从所述索引表,根据所述序号范围,获得要查询的键RowKey的集合,根据所述集合中的键RowKey来查询所述Hbase表。
2.根据权利要求1所述的针对Hbase表的分页查询方法,其特征在于,在步骤2)中,所述索引表的序号是原子递增的。
3.根据权利要求1所述的针对Hbase表的分页查询方法,其特征在于,在步骤2)中,在所述索引表中,所述序号为该索引表的键,所述键RowKey为该序号所对应的值。
4.根据权利要求3所述的针对Hbase表的分页查询方法,其特征在于,所述索引表为Hbase表,所述索引表的第一行记录中的键值为0,该第一行记录的列值为所述索引表的记录条数。
5.根据权利要求4所述的针对Hbase表的分页查询方法,其特征在于,还包括:
5)当所述Hbase表中新增一行数据时,所述索引表的第一行记录中的列值原子递增;
6)在所述索引表中增加一条新记录,该新记录的键为原子递增后的序号,该新记录的列值为所述数据表中的新增数据的RowKey。
6.根据权利要求1所述的针对Hbase表的分页查询方法,其特征在于,在步骤3),所述序号范围由起始行startRow和结束行endRow确定,
startRow=(pageIndex-1)*pageSize+1;
endRow=pageIndex*pageSize;
其中,pageIndex为要查询的页码,pageSize为每页的数据行数。
7.根据权利要求6所述的针对Hbase表的分页查询方法,其特征在于,还包括:
7)在查询完一页后,根据新页码重新设置pageIndex,从而计算新页码的起始行startRow和结束行endRow,而进行分页查询。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310611079.7A CN103617232B (zh) | 2013-11-26 | 2013-11-26 | 一种针对HBase表的分页查询方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310611079.7A CN103617232B (zh) | 2013-11-26 | 2013-11-26 | 一种针对HBase表的分页查询方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103617232A true CN103617232A (zh) | 2014-03-05 |
CN103617232B CN103617232B (zh) | 2018-03-30 |
Family
ID=50167935
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310611079.7A Active CN103617232B (zh) | 2013-11-26 | 2013-11-26 | 一种针对HBase表的分页查询方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103617232B (zh) |
Cited By (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104092702A (zh) * | 2014-07-22 | 2014-10-08 | 北京京东尚科信息技术有限公司 | 一种分布式系统的网络安全验证方法和系统 |
CN104123340A (zh) * | 2014-06-25 | 2014-10-29 | 世纪禾光科技发展(北京)有限公司 | 一种数据库分表分页查询方法及系统 |
CN104361049A (zh) * | 2014-10-29 | 2015-02-18 | 中国建设银行股份有限公司 | 一种快速展现数据库数据的方法和系统 |
CN104850627A (zh) * | 2015-05-21 | 2015-08-19 | 北京京东尚科信息技术有限公司 | 进行分页展示的方法及装置 |
CN105045932A (zh) * | 2015-09-02 | 2015-11-11 | 南京邮电大学 | 一种基于降序存储的数据分页查询方法 |
CN105354256A (zh) * | 2015-10-22 | 2016-02-24 | 浪潮电子信息产业股份有限公司 | 一种数据分页查询的方法及装置 |
WO2016074370A1 (zh) * | 2014-11-12 | 2016-05-19 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
CN105843956A (zh) * | 2016-04-14 | 2016-08-10 | 北京搜狐新媒体信息技术有限公司 | 一种分页查询方法及系统 |
CN105989076A (zh) * | 2015-02-10 | 2016-10-05 | 腾讯科技(深圳)有限公司 | 一种数据统计方法以及装置 |
CN106126731A (zh) * | 2016-07-01 | 2016-11-16 | 百势软件(北京)有限公司 | 一种获取Elasticsearch分页数据的方法及装置 |
CN106326309A (zh) * | 2015-07-03 | 2017-01-11 | 阿里巴巴集团控股有限公司 | 一种数据查询方法和装置 |
CN106445927A (zh) * | 2015-08-04 | 2017-02-22 | 北京京东金融科技控股有限公司 | 数据分页查询方法及装置 |
CN106528573A (zh) * | 2015-09-14 | 2017-03-22 | 北京国双科技有限公司 | HBase数据库的数据查询方法和装置 |
CN106874400A (zh) * | 2017-01-16 | 2017-06-20 | 努比亚技术有限公司 | 一种数据处理方法及服务器 |
CN107103032A (zh) * | 2017-03-21 | 2017-08-29 | 中国科学院计算机网络信息中心 | 一种分布式环境下避免全局排序的海量数据分页查询方法 |
CN107463677A (zh) * | 2017-08-04 | 2017-12-12 | 网易(杭州)网络有限公司 | 图表绘制方法、系统、介质和计算设备 |
CN107943981A (zh) * | 2017-11-30 | 2018-04-20 | 努比亚技术有限公司 | HBase行分页方法、服务器及计算机可读存储介质 |
CN108052521A (zh) * | 2017-11-01 | 2018-05-18 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108090086A (zh) * | 2016-11-21 | 2018-05-29 | 迈普通信技术股份有限公司 | 分页查询方法及装置 |
CN108228663A (zh) * | 2016-12-21 | 2018-06-29 | 杭州海康威视数字技术股份有限公司 | 一种分页检索方法及装置 |
CN108874897A (zh) * | 2018-05-23 | 2018-11-23 | 新华三大数据技术有限公司 | 数据查询方法及装置 |
CN109241447A (zh) * | 2018-10-29 | 2019-01-18 | 金蝶软件(中国)有限公司 | 一种查询单据数据的方法、终端以及服务器 |
CN109241050A (zh) * | 2018-07-10 | 2019-01-18 | 阿里巴巴集团控股有限公司 | 一种数据查询方法、装置及系统、电子设备 |
CN109460404A (zh) * | 2018-09-03 | 2019-03-12 | 中新网络信息安全股份有限公司 | 一种基于redis的高效Hbase分页查询方法 |
CN110765158A (zh) * | 2019-10-31 | 2020-02-07 | 北京明略软件系统有限公司 | 分页查询方法、系统和装置 |
CN110825742A (zh) * | 2019-10-31 | 2020-02-21 | 北京东方通科技股份有限公司 | 一种数据分页检索的方法、装置、电子设备及存储介质 |
CN110955680A (zh) * | 2019-10-10 | 2020-04-03 | 珠海格力电器股份有限公司 | 一种基于HBase的数据分页查询方法 |
CN110990394A (zh) * | 2018-09-28 | 2020-04-10 | 杭州海康威视数字技术股份有限公司 | 分布式面向列数据库表的行数统计方法、装置和存储介质 |
CN111259062A (zh) * | 2020-01-15 | 2020-06-09 | 山东汇贸电子口岸有限公司 | 一种能够保证分布式数据库全表查询语句结果集顺序的方法和装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533406A (zh) * | 2009-04-10 | 2009-09-16 | 北京锐安科技有限公司 | 一种海量数据查询方法 |
CN101950297A (zh) * | 2010-09-10 | 2011-01-19 | 北京大学 | 一种海量语义数据的存储和查询方法及装置 |
CN102521405A (zh) * | 2011-12-26 | 2012-06-27 | 中国科学院计算技术研究所 | 支持高速加载的海量结构化数据存储、查询方法和系统 |
-
2013
- 2013-11-26 CN CN201310611079.7A patent/CN103617232B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533406A (zh) * | 2009-04-10 | 2009-09-16 | 北京锐安科技有限公司 | 一种海量数据查询方法 |
CN101950297A (zh) * | 2010-09-10 | 2011-01-19 | 北京大学 | 一种海量语义数据的存储和查询方法及装置 |
CN102521405A (zh) * | 2011-12-26 | 2012-06-27 | 中国科学院计算技术研究所 | 支持高速加载的海量结构化数据存储、查询方法和系统 |
Non-Patent Citations (1)
Title |
---|
曾雪: "海量数据的快速查询算法研究", 《中国优秀硕士学位论文全文数据库》 * |
Cited By (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104123340A (zh) * | 2014-06-25 | 2014-10-29 | 世纪禾光科技发展(北京)有限公司 | 一种数据库分表分页查询方法及系统 |
CN104123340B (zh) * | 2014-06-25 | 2018-04-20 | 世纪禾光科技发展(北京)有限公司 | 一种数据库分表分页查询方法及系统 |
CN104092702A (zh) * | 2014-07-22 | 2014-10-08 | 北京京东尚科信息技术有限公司 | 一种分布式系统的网络安全验证方法和系统 |
CN104092702B (zh) * | 2014-07-22 | 2017-05-31 | 北京京东尚科信息技术有限公司 | 一种分布式系统的网络安全验证方法和系统 |
CN104361049A (zh) * | 2014-10-29 | 2015-02-18 | 中国建设银行股份有限公司 | 一种快速展现数据库数据的方法和系统 |
CN107977396B (zh) * | 2014-11-12 | 2021-07-20 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
WO2016074370A1 (zh) * | 2014-11-12 | 2016-05-19 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
CN105900093A (zh) * | 2014-11-12 | 2016-08-24 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
AU2015316450B2 (en) * | 2014-11-12 | 2016-11-03 | Huawei Cloud Computing Technologies Co., Ltd. | Method for updating data table of KeyValue database and apparatus for updating table data |
US10467192B2 (en) | 2014-11-12 | 2019-11-05 | Hauwei Technologies Co.,Ltd. | Method and apparatus for updating data table in keyvalue database |
CN107977396A (zh) * | 2014-11-12 | 2018-05-01 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
CN105900093B (zh) * | 2014-11-12 | 2018-02-02 | 华为技术有限公司 | 一种KeyValue数据库的数据表的更新方法与表数据更新装置 |
CN105989076B (zh) * | 2015-02-10 | 2019-05-07 | 腾讯科技(深圳)有限公司 | 一种数据统计方法以及装置 |
CN105989076A (zh) * | 2015-02-10 | 2016-10-05 | 腾讯科技(深圳)有限公司 | 一种数据统计方法以及装置 |
CN104850627B (zh) * | 2015-05-21 | 2018-06-15 | 北京京东尚科信息技术有限公司 | 进行分页展示的方法及装置 |
CN104850627A (zh) * | 2015-05-21 | 2015-08-19 | 北京京东尚科信息技术有限公司 | 进行分页展示的方法及装置 |
CN106326309A (zh) * | 2015-07-03 | 2017-01-11 | 阿里巴巴集团控股有限公司 | 一种数据查询方法和装置 |
CN106326309B (zh) * | 2015-07-03 | 2020-02-21 | 阿里巴巴集团控股有限公司 | 一种数据查询方法和装置 |
CN106445927A (zh) * | 2015-08-04 | 2017-02-22 | 北京京东金融科技控股有限公司 | 数据分页查询方法及装置 |
CN105045932B (zh) * | 2015-09-02 | 2018-11-13 | 南京邮电大学 | 一种基于降序存储的数据分页查询方法 |
CN105045932A (zh) * | 2015-09-02 | 2015-11-11 | 南京邮电大学 | 一种基于降序存储的数据分页查询方法 |
CN106528573B (zh) * | 2015-09-14 | 2019-08-20 | 北京国双科技有限公司 | HBase数据库的数据查询方法和装置 |
CN106528573A (zh) * | 2015-09-14 | 2017-03-22 | 北京国双科技有限公司 | HBase数据库的数据查询方法和装置 |
CN105354256A (zh) * | 2015-10-22 | 2016-02-24 | 浪潮电子信息产业股份有限公司 | 一种数据分页查询的方法及装置 |
CN105843956A (zh) * | 2016-04-14 | 2016-08-10 | 北京搜狐新媒体信息技术有限公司 | 一种分页查询方法及系统 |
CN106126731B (zh) * | 2016-07-01 | 2020-02-14 | 百势软件(北京)有限公司 | 一种获取Elasticsearch分页数据的方法及装置 |
CN106126731A (zh) * | 2016-07-01 | 2016-11-16 | 百势软件(北京)有限公司 | 一种获取Elasticsearch分页数据的方法及装置 |
CN108090086A (zh) * | 2016-11-21 | 2018-05-29 | 迈普通信技术股份有限公司 | 分页查询方法及装置 |
CN108228663A (zh) * | 2016-12-21 | 2018-06-29 | 杭州海康威视数字技术股份有限公司 | 一种分页检索方法及装置 |
CN106874400A (zh) * | 2017-01-16 | 2017-06-20 | 努比亚技术有限公司 | 一种数据处理方法及服务器 |
CN107103032B (zh) * | 2017-03-21 | 2020-02-28 | 中国科学院计算机网络信息中心 | 一种分布式环境下避免全局排序的海量数据分页查询方法 |
CN107103032A (zh) * | 2017-03-21 | 2017-08-29 | 中国科学院计算机网络信息中心 | 一种分布式环境下避免全局排序的海量数据分页查询方法 |
CN107463677A (zh) * | 2017-08-04 | 2017-12-12 | 网易(杭州)网络有限公司 | 图表绘制方法、系统、介质和计算设备 |
CN108052521A (zh) * | 2017-11-01 | 2018-05-18 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN108052521B (zh) * | 2017-11-01 | 2022-04-22 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
WO2019085117A1 (zh) * | 2017-11-01 | 2019-05-09 | 平安科技(深圳)有限公司 | 协调数据显示方法、应用服务器及存储介质 |
CN107943981A (zh) * | 2017-11-30 | 2018-04-20 | 努比亚技术有限公司 | HBase行分页方法、服务器及计算机可读存储介质 |
CN108874897B (zh) * | 2018-05-23 | 2019-09-13 | 新华三大数据技术有限公司 | 数据查询方法及装置 |
CN108874897A (zh) * | 2018-05-23 | 2018-11-23 | 新华三大数据技术有限公司 | 数据查询方法及装置 |
CN109241050A (zh) * | 2018-07-10 | 2019-01-18 | 阿里巴巴集团控股有限公司 | 一种数据查询方法、装置及系统、电子设备 |
CN109460404A (zh) * | 2018-09-03 | 2019-03-12 | 中新网络信息安全股份有限公司 | 一种基于redis的高效Hbase分页查询方法 |
CN110990394A (zh) * | 2018-09-28 | 2020-04-10 | 杭州海康威视数字技术股份有限公司 | 分布式面向列数据库表的行数统计方法、装置和存储介质 |
CN110990394B (zh) * | 2018-09-28 | 2023-10-20 | 杭州海康威视数字技术股份有限公司 | 分布式面向列数据库表的行数统计方法、装置和存储介质 |
CN109241447A (zh) * | 2018-10-29 | 2019-01-18 | 金蝶软件(中国)有限公司 | 一种查询单据数据的方法、终端以及服务器 |
CN110955680A (zh) * | 2019-10-10 | 2020-04-03 | 珠海格力电器股份有限公司 | 一种基于HBase的数据分页查询方法 |
CN110765158A (zh) * | 2019-10-31 | 2020-02-07 | 北京明略软件系统有限公司 | 分页查询方法、系统和装置 |
CN110825742A (zh) * | 2019-10-31 | 2020-02-21 | 北京东方通科技股份有限公司 | 一种数据分页检索的方法、装置、电子设备及存储介质 |
CN111259062A (zh) * | 2020-01-15 | 2020-06-09 | 山东汇贸电子口岸有限公司 | 一种能够保证分布式数据库全表查询语句结果集顺序的方法和装置 |
CN111259062B (zh) * | 2020-01-15 | 2023-08-01 | 山东省电子口岸有限公司 | 一种能够保证分布式数据库全表查询语句结果集顺序的方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN103617232B (zh) | 2018-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103617232A (zh) | 一种针对HBase表的分页查询方法 | |
CN102890722B (zh) | 应用于时序历史数据库的索引方法 | |
CN102867071B (zh) | 一种网管海量历史数据管理方法 | |
CN102446184B (zh) | 一种基于时间序列的工业数据存储及索引方法 | |
CN103488704B (zh) | 一种数据存储方法及装置 | |
CN103488709A (zh) | 一种索引建立方法及系统、检索方法及系统 | |
CN103914483B (zh) | 文件存储方法、装置及文件读取方法、装置 | |
CN103678491A (zh) | 一种基于Hadoop中小文件优化和倒排索引的方法 | |
CN105117417A (zh) | 一种读优化的内存数据库Trie树索引方法 | |
CN103412889A (zh) | 智能电表的数据存储和查询方法及其系统 | |
CN106250523A (zh) | 一种分布式列存储系统索引的方法 | |
CN103049473A (zh) | 一种数据查询方法及装置 | |
CN103488727B (zh) | 基于周期对数的二维时序数据存储和查询方法 | |
CN102682108A (zh) | 一种行列混合的数据库存储方法 | |
CN106021357B (zh) | 基于分布式的大数据分页查询方法及系统 | |
CN112527836B (zh) | 一种基于t-box平台的大数据查询方法 | |
CN101493340B (zh) | 一种车辆导航系统中兴趣点信息的快速检索方法 | |
WO2023143095A1 (en) | Method and system for data query | |
CN104408128B (zh) | 一种基于b+树异步更新索引的读优化方法 | |
CN104331432A (zh) | 一种适用于截面访问模式的电网海量时序数据存取方法 | |
CN104090954B (zh) | 只读表的连接方法和只读表的连接系统 | |
CN103500165A (zh) | 一种结合聚类和双key值的高维向量检索方法 | |
CN101551820A (zh) | 兴趣点属性的索引数据库的生成方法和装置 | |
CN109213751B (zh) | 一种基于Spark平台的Oracle数据库并行迁移方法 | |
CN103853772B (zh) | 一种高效倒排索引组织方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |