CN107451146A - 利用多级缓存读取数据的方法和缓存数据的多级缓存装置 - Google Patents

利用多级缓存读取数据的方法和缓存数据的多级缓存装置 Download PDF

Info

Publication number
CN107451146A
CN107451146A CN201610374876.1A CN201610374876A CN107451146A CN 107451146 A CN107451146 A CN 107451146A CN 201610374876 A CN201610374876 A CN 201610374876A CN 107451146 A CN107451146 A CN 107451146A
Authority
CN
China
Prior art keywords
data
caching
read
level
buffer area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610374876.1A
Other languages
English (en)
Inventor
雷强
王彦明
刘业辉
袁建军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201610374876.1A priority Critical patent/CN107451146A/zh
Publication of CN107451146A publication Critical patent/CN107451146A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471—Distributed queries

Abstract

本发明提供一种利用多级缓存读取数据的方法和缓存数据的多级缓存装置，能够降低数据丢失的风险，缩短获取缓存数据的时间，减少计算过程中处理数据的时间，增加程序的吞吐量。本发明的利用多级缓存读取数据的方法，所述多级缓存包括N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数，其特征在于，所述方法包括：按照优先级由高到低的顺序，从该N个缓存区依次尝试读取所需数据；当在一缓存区成功读取到该数据时，返回该数据并且把数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。

Description

利用多级缓存读取数据的方法和缓存数据的多级缓存装置
技术领域
本发明涉及计算机和计算机软件技术领域，特别地涉及一种利用多级缓存读取数据的方法和缓存数据的多级缓存装置。
背景技术
在Storm流式计算的过程中，后续的计算需要依赖历史的计算结果，比如我们在计算网站的实时PV(page view的缩写，即页面浏览量)值时，每次PV值的计算都需要依赖历史的PV值，这个时候历史的计算结果(即：中间结果)就需要缓存下来，现有的方法是将计算结果直接缓存在单一数据库里，例如：Redis、HBase等。当需要用到缓存的中间结果进行计算时，直接从数据库中进行读取。
以中间结果缓存在Redis中为例(参考图1)，从数据库中直接读取缓存数据可按照以下步骤执行：
步骤S1：读取缓存，开始读取缓存数据；
步骤S2：从Redis中读取保存的缓存值，读取成功则直接返回缓存值，读取失败则返回空值；
步骤S3：将返回值存入缓存结果值。
以中间结果缓存在HBase中为例(参考图2)，从数据库中直接读取缓存数据可按照以下步骤执行：
步骤S1：读取缓存，开始读取缓存数据；
步骤S2：从HBase中读取保存的缓存值，读取成功则直接返回缓存值，读取失败则返回空值；
步骤S3：将返回值存入缓存结果值。
然而，在使用过程中发现，将中间结果缓存在Redis或HBase等单一数据库中，在读取缓存数据时，会存在以下的问题：
1、Redis、HBase都是单数据库存储，单数据库存储可能会有缓存数据丢失的风险、以及存在数据库连接不上获取不到缓存数据的情况；
2、Redis、HBase都需要通过网络获取存储的缓存值，通过网络获取存储的缓存值依赖于网络状况，受限较多，且在线获取缓存时间长。
发明内容
有鉴于此，本发明提供一种利用多级缓存读取数据的方法和缓存数据的多级缓存装置，能够降低数据丢失的风险，缩短获取缓存数据的时间，减少计算过程中处理数据的时间，增加程序的吞吐量。
为实现上述目的，根据本发明的一个方面，提供了一种利用多级缓存读取数据的方法。
一种利用多级缓存读取数据的方法，所述多级缓存包括N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数，所述方法包括：按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所需数据；当在一缓存区成功读取到该数据时，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
可选地，还包括：当从所有N个缓存区都没有成功读取到所述数据，则返回空值。
可选地，N＝3，所述N级缓存包括第一级缓存、第二级缓存和第三级缓存，且所述第一级缓存的优先级最高，所述第三级缓存的优先级最低。
可选地，所述第一级缓存为本地内存缓存。
可选地，所述第二级缓存为基于键/值对方式存储数据的数据库。
可选地，所述第三级缓存为可持久化存储数据的数据库。
可选地，所述第二级缓存为Redis数据库或Memcached数据库。
可选地，所述第三级缓存为HBase数据库、MySQL数据库或ElasticSearch。
根据本发明的另一方面，提供了一种缓存数据的多级缓存装置。
一种缓存数据的多级缓存装置，包括：N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数；缓存读取和同步模块，当读取所需数据时，该缓存读取和同步模块按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所述数据，并且当在一缓存区成功读取到该数据时，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
根据本发明的技术方案，通过使用多级缓存技术对数据进行缓存和读取，保障了数据的准确性，避免了由于某个数据库连接不上而无法获取缓存数据的问题，使数据丢失的风险得到了控制；且增加了第一级缓存，将数据存储在本地内存的CacheBuilder对象里，可使获取缓存的时间大大缩短，从而减少了整个计算过程处理数据的时间，加快了缓存的读取速度，增加了程序的吞吐量。
附图说明
附图用于更好地理解本发明，不构成对本发明的不当限定。其中：
图1是现有技术中从Redis中读取缓存数据的流程图；
图2是现有技术中从HBase中读取缓存数据的流程图；
图3是根据本发明实施例的利用多级缓存读取数据的方法的主要步骤示意图；
图4是本发明实施例的利用多级缓存读取数据的流程图；
图5是根据本发明实施例的缓存数据的多级缓存装置的主要模块示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
图3是根据本发明实施例的利用多级缓存读取数据的方法的主要步骤示意图。本发明的利用多级缓存读取数据的方法，其中，所述多级缓存包括N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数。如图3所示，本发明的利用多级缓存读取数据的方法主要包括如下的步骤S31和步骤S32。
步骤S31：按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所需数据；
步骤S32：当在一缓存区成功读取到该数据，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
本发明的利用多级缓存读取数据的方法还包括：当从所有N个缓存区都没有成功读取到所述数据，则返回空值。
根据本发明的实施例，其中，N＝3，所述N级缓存包括第一级缓存、第二级缓存和第三级缓存，且所述第一级缓存的优先级最高，所述第三级缓存的优先级最低。
其中，所述第一级缓存为本地内存缓存。所述第二级缓存为基于键/值对方式存储数据的数据库。所述第三级缓存为可持久化存储数据的数据库。
根据本发明的实施例，所述第二级缓存为Redis数据库或Memcached数据库。所述第三级缓存为HBase数据库、MySQL数据库或ElasticSearch。
图4是本发明实施例的利用多级缓存读取数据的流程图。本发明主要是采用三级缓存技术，减少缓存数据读取过程中的开销，以便快速读取到缓存，减少处理单条数据的时间，从而增加整个程序的吞吐量，提高程序的处理效率；三级缓存技术同时也能保障数据的准确性，避免单数据库存储的丢数、无法连接的问题。
以实时处理系统Storm为例，Storm的Spout组件从数据源获取到一条数据，按照一定的规则流入到Bolt组件，数据的计算逻辑在Bolt组件里实现，在数据的计算逻辑中需要用到缓存的数据。当需要用到缓存的数据的时候，开始按照三级缓存技术读取缓存的数据。本发明实施例的利用多级缓存读取数据的具体流程如图4所示。
首先，从第一级缓存中读取需要的缓存数据，例如：从本地内存的CacheBuilder对象中读取缓存数据(步骤S41)。由于本地内存读取速度快，所以将本地内存设置为第一级缓存，但同时由于本地内存大小的限制，本地内存缓存的数据有限。
如果从本地内存中可以成功读取到需要的缓存数据，则直接返回读取到的缓存数据(步骤S46)；如果从本地内存中未能读取到需要的缓存数据，亦即从第一级缓存未能读取到需要的缓存数据，则需要从第二级缓存中读取需要的缓存数据，例如：从Redis数据库中读取需要的缓存数据(步骤S42)。
将Redis作为第二级缓存，主要基于Redis是一个高性能的Key-Value内存数据库，读取速度快。同样地，也可以Memcached等具有相同或相似特性的数据库作为第二级缓存，可达成同样的效果。
如果从Redis中可以成功读取到需要的缓存数据，则将该缓存数据同步更新至第一级缓存本地内存中(步骤S43)，以便再次查找时可以更为快速方便地读取到该数据，并直接返回读取到的缓存数据(步骤S46)；如果从Redis中未能读取到需要的缓存数据，亦即从第二级缓存未能读取到需要的缓存数据，则需要从第三级缓存中读取需要的缓存数据，例如：从HBase数据库中读取需要的缓存数据(步骤S44)。
将HBase作为第三级缓存，主要基于HBase可持久化存储数据到硬盘，不易丢失，且HBase的读取性能高，能满足需求。同样地，也可以MySQL、ElasticSearch等具有相同或相似特性的数据库作为第三级缓存，可达成同样的效果。
如果从HBase中可以成功读取到需要的缓存数据，则将该缓存数据同步更新至第一级缓存本地内存和第二级缓存Redis中(步骤S45)，以便再次查找时可以更为快速方便地读取到该数据，以及直接返回读取到的缓存数据(步骤S46)；如果从HBase中未能读取到需要的缓存数据，亦即从第三级缓存未能读取到需要的缓存数据，则说明从所有级别的缓存中均未找到所需的缓存数据，该数据未被保存，此时，将返回空值(步骤S47)。
最后返回结果(步骤S48)，将获取到的返回值(包括：读取到的缓存数据或者空值)存入缓存结果变量，以便进行后续的逻辑计算。
对于其他缓存数据的读取过程，均可按照上述的步骤S41至步骤S48来执行。
图5是根据本发明实施例的缓存数据的多级缓存装置的主要模块示意图。如图5所示，本发明的缓存数据的多级缓存装置50主要包括：N个缓存区51，以及缓存读取和同步模块52。
其中，所述N个缓存区51具有不同的优先级，N是大于1的整数；缓存读取和同步模块52，当读取所需数据时，该缓存读取和同步模块52按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所述数据，并且当在一缓存区成功读取到该数据，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
根据本发明实施例的技术方案，通过使用多级缓存技术对数据进行缓存和读取，保障了数据的准确性，避免了由于某个数据库连接不上而无法获取缓存数据的问题，使数据丢失的风险得到了控制；且增加了第一级缓存，将数据存储在本地内存的CacheBuilder对象里，可使获取缓存的时间大大缩短，从而减少了整个计算过程处理数据的时间，加快了缓存的读取速度，增加了程序的吞吐量。
上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (9)

1.一种利用多级缓存读取数据的方法，所述多级缓存包括N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数，其特征在于，所述方法包括：
按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所需数据；
当在一缓存区成功读取到该数据时，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
2.根据权利要求1所述的方法，其特征在于，还包括：
当从所有N个缓存区都没有成功读取到所述数据，则返回空值。
3.根据权利要求1所述的方法，其特征在于，N＝3，所述N级缓存包括第一级缓存、第二级缓存和第三级缓存，且所述第一级缓存的优先级最高，所述第三级缓存的优先级最低。
4.根据权利要求3所述的方法，其特征在于，
所述第一级缓存为本地内存缓存。
5.根据权利要求3所述的方法，其特征在于，
所述第二级缓存为基于键/值对方式存储数据的数据库。
6.根据权利要求3所述的方法，其特征在于，
所述第三级缓存为可持久化存储数据的数据库。
7.根据权利要求5所述的方法，其特征在于，
所述第二级缓存为Redis数据库或Memcached数据库。
8.根据权利要求6所述的方法，其特征在于，
所述第三级缓存为HBase数据库、MySQL数据库或ElasticSearch。
9.一种缓存数据的多级缓存装置，其特征在于，包括：
N个缓存区，所述N个缓存区具有不同的优先级，N是大于1的整数；
缓存读取和同步模块，当读取所需数据时，该缓存读取和同步模块按照优先级由高到低的顺序，从所述N个缓存区依次尝试读取所述数据，并且当在一缓存区成功读取到该数据时，返回该数据并且把所述数据同步缓存至较之读取到该数据的缓存区优先级更高的各缓存区。
CN201610374876.1A 2016-05-31 2016-05-31 利用多级缓存读取数据的方法和缓存数据的多级缓存装置 Pending CN107451146A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610374876.1A CN107451146A (zh) 2016-05-31 2016-05-31 利用多级缓存读取数据的方法和缓存数据的多级缓存装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610374876.1A CN107451146A (zh) 2016-05-31 2016-05-31 利用多级缓存读取数据的方法和缓存数据的多级缓存装置

Publications (1)

Publication Number Publication Date
CN107451146A true CN107451146A (zh) 2017-12-08

Family

ID=60485785

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610374876.1A Pending CN107451146A (zh) 2016-05-31 2016-05-31 利用多级缓存读取数据的方法和缓存数据的多级缓存装置

Country Status (1)

Country Link
CN (1) CN107451146A (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108829837A (zh) * 2018-06-19 2018-11-16 北京五八信息技术有限公司 一种信息查询方法、装置、设备及计算机可读存储介质
CN108875036A (zh) * 2018-06-26 2018-11-23 北京永安信通科技股份有限公司 页面数据缓存方法、装置、页面缓存数据结构和电子设备
CN109617943A (zh) * 2018-10-22 2019-04-12 平安科技（深圳）有限公司 数据缓存方法、装置及存储介质、计算机设备
CN109873858A (zh) * 2018-12-27 2019-06-11 中科曙光南京研究院有限公司 一种业务数据分布式监控方法和分布式监控集群
CN109947668A (zh) * 2017-12-21 2019-06-28 北京京东尚科信息技术有限公司 存储数据的方法和装置
CN110083549A (zh) * 2019-04-01 2019-08-02 福建天泉教育科技有限公司 一种缓存读写的方法及终端
CN110119338A (zh) * 2019-04-30 2019-08-13 广州微算互联信息技术有限公司 一种游戏监控参数的获取方法、系统和存储介质
CN110851474A (zh) * 2018-07-26 2020-02-28 深圳市优必选科技有限公司 数据查询方法、数据库中间件、数据查询设备及存储介质
CN110955682A (zh) * 2019-11-22 2020-04-03 北京金山云网络技术有限公司 缓存数据的删除、数据缓存及缓存数据的读取方法及装置
CN111352958A (zh) * 2020-02-28 2020-06-30 广东科徕尼智能科技有限公司 一种数据路由读写方法、设备及存储介质
CN111767339A (zh) * 2020-05-11 2020-10-13 北京奇艺世纪科技有限公司 一种数据同步方法、装置、电子设备及存储介质
CN111915763A (zh) * 2020-07-24 2020-11-10 东风汽车有限公司 一种汽车高级驾驶辅助功能异常信息采集方法及电子设备
CN112084163A (zh) * 2020-09-04 2020-12-15 珠海大横琴科技发展有限公司 一种数据写入方法、装置及计算机设备
CN112540933A (zh) * 2020-11-26 2021-03-23 华云数据控股集团有限公司 缓存读写方法、装置及电子设备
CN112559560A (zh) * 2019-09-10 2021-03-26 北京京东振世信息技术有限公司 元数据读取方法及装置、更新方法及装置、存储装置
CN112667847A (zh) * 2019-10-16 2021-04-16 北京奇艺世纪科技有限公司 数据缓存方法、数据缓存装置和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130013729A1 (en) * 2011-07-07 2013-01-10 International Business Machines Corporation Multi-level adaptive caching within asset-based web systems
CN104753966A (zh) * 2013-12-25 2015-07-01 明博教育科技有限公司 一种基于服务器和客户端缓存的资源文件查询方法及系统
CN105549905A (zh) * 2015-12-09 2016-05-04 上海理工大学 一种多虚拟机访问分布式对象存储系统的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130013729A1 (en) * 2011-07-07 2013-01-10 International Business Machines Corporation Multi-level adaptive caching within asset-based web systems
CN104753966A (zh) * 2013-12-25 2015-07-01 明博教育科技有限公司 一种基于服务器和客户端缓存的资源文件查询方法及系统
CN105549905A (zh) * 2015-12-09 2016-05-04 上海理工大学 一种多虚拟机访问分布式对象存储系统的方法

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109947668A (zh) * 2017-12-21 2019-06-28 北京京东尚科信息技术有限公司 存储数据的方法和装置
CN108829837A (zh) * 2018-06-19 2018-11-16 北京五八信息技术有限公司 一种信息查询方法、装置、设备及计算机可读存储介质
CN108875036B (zh) * 2018-06-26 2021-03-16 北京永安信通科技有限公司 页面数据缓存方法、装置和电子设备
CN108875036A (zh) * 2018-06-26 2018-11-23 北京永安信通科技股份有限公司 页面数据缓存方法、装置、页面缓存数据结构和电子设备
CN110851474A (zh) * 2018-07-26 2020-02-28 深圳市优必选科技有限公司 数据查询方法、数据库中间件、数据查询设备及存储介质
CN109617943A (zh) * 2018-10-22 2019-04-12 平安科技（深圳）有限公司 数据缓存方法、装置及存储介质、计算机设备
CN109617943B (zh) * 2018-10-22 2022-08-12 平安科技（深圳）有限公司 数据缓存方法、装置及存储介质、计算机设备
CN109873858A (zh) * 2018-12-27 2019-06-11 中科曙光南京研究院有限公司 一种业务数据分布式监控方法和分布式监控集群
CN109873858B (zh) * 2018-12-27 2021-03-30 中科曙光南京研究院有限公司 一种业务数据分布式监控方法和分布式监控集群
CN110083549A (zh) * 2019-04-01 2019-08-02 福建天泉教育科技有限公司 一种缓存读写的方法及终端
CN110083549B (zh) * 2019-04-01 2021-10-01 福建天泉教育科技有限公司 一种缓存读写的方法及终端
CN110119338A (zh) * 2019-04-30 2019-08-13 广州微算互联信息技术有限公司 一种游戏监控参数的获取方法、系统和存储介质
CN112559560A (zh) * 2019-09-10 2021-03-26 北京京东振世信息技术有限公司 元数据读取方法及装置、更新方法及装置、存储装置
CN112667847A (zh) * 2019-10-16 2021-04-16 北京奇艺世纪科技有限公司 数据缓存方法、数据缓存装置和电子设备
CN110955682A (zh) * 2019-11-22 2020-04-03 北京金山云网络技术有限公司 缓存数据的删除、数据缓存及缓存数据的读取方法及装置
CN111352958A (zh) * 2020-02-28 2020-06-30 广东科徕尼智能科技有限公司 一种数据路由读写方法、设备及存储介质
CN111767339A (zh) * 2020-05-11 2020-10-13 北京奇艺世纪科技有限公司 一种数据同步方法、装置、电子设备及存储介质
CN111767339B (zh) * 2020-05-11 2023-06-30 北京奇艺世纪科技有限公司 一种数据同步方法、装置、电子设备及存储介质
CN111915763A (zh) * 2020-07-24 2020-11-10 东风汽车有限公司 一种汽车高级驾驶辅助功能异常信息采集方法及电子设备
CN112084163A (zh) * 2020-09-04 2020-12-15 珠海大横琴科技发展有限公司 一种数据写入方法、装置及计算机设备
CN112540933A (zh) * 2020-11-26 2021-03-23 华云数据控股集团有限公司 缓存读写方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN107451146A (zh) 利用多级缓存读取数据的方法和缓存数据的多级缓存装置
CN105718455B (zh) 一种数据查询方法及装置
US9672235B2 (en) Method and system for dynamically partitioning very large database indices on write-once tables
CN101866359B (zh) 一种机群文件系统中的小文件存储和访问方法
CN101221538B (zh) 实现对缓存中数据快速查找的系统和方法
CN102521405A (zh) 支持高速加载的海量结构化数据存储、查询方法和系统
CN102521406A (zh) 海量结构化数据复杂查询任务的分布式查询方法和系统
CN107766529B (zh) 一种用于污水处理行业的海量数据存储方法
CN107273542A (zh) 高并发数据同步方法及系统
CN105718561A (zh) 一种特定分布式数据存储文件结构去冗余构造方法及系统
CN106682184B (zh) 一种基于日志合并树结构的轻量级合并方法
CN104572505A (zh) 一种保证海量数据缓存最终一致性的系统及方法
CN105589908A (zh) 用于事务集合的关联规则计算方法
CN101277252A (zh) 多分支Trie树的遍历方法
CN101236564A (zh) 一种海量数据高性能读取显示方法
CN105359142A (zh) 哈希连接方法、装置和数据库管理系统
CN102170678A (zh) 一种峰值搜索方法及装置
CN104572872A (zh) 一种基于极值的数据去重分块方法
KR101955376B1 (ko) 비공유 아키텍처 기반의 분산 스트림 처리 엔진에서 관계형 질의를 처리하는 방법, 이를 수행하기 위한 기록 매체 및 장치
Lai et al. A two-directional BigData sorting architecture on FPGAs
CN110209742B (zh) 一种基于区块链依据数据重要性分类存储系统及方法
CN104112024A (zh) 数据库的高性能查询方法和装置
CN111382158B (zh) 一种采用两级哈希表结构实现并行连接的方法及系统
CN116578609A (zh) 一种基于倒排索引的分布式搜索方法及装置
US9619539B2 (en) Automated document replication in a distributed computing system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171208

RJ01 Rejection of invention patent application after publication