CN110083763A - 数据查询方法及装置 - Google Patents

数据查询方法及装置 Download PDF

Info

Publication number
CN110083763A
CN110083763A CN201910282149.6A CN201910282149A CN110083763A CN 110083763 A CN110083763 A CN 110083763A CN 201910282149 A CN201910282149 A CN 201910282149A CN 110083763 A CN110083763 A CN 110083763A
Authority
CN
China
Prior art keywords
data
page
paging
cached
system cache
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910282149.6A
Other languages
English (en)
Inventor
吴业凯
吴峰
黄涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Wheel Internet Service Co Ltd
Original Assignee
Shanghai Wheel Internet Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Wheel Internet Service Co Ltd filed Critical Shanghai Wheel Internet Service Co Ltd
Priority to CN201910282149.6A priority Critical patent/CN110083763A/zh
Publication of CN110083763A publication Critical patent/CN110083763A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9574—Browsing optimisation, e.g. caching or content distillation of access to content, e.g. by caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例公开一种数据查询方法及装置，其中方法包括如下步骤：基于数据获取请求在系统缓存中查找当前页面对应的当页数据，若未检测到当页数据，在总缓存数据中进行分页处理得到当页数据，将分页处理对应的分页信息和当页数据对应存储至系统缓存中。采用本发明，通过设置上述缓存策略，可以提高数据查询的效率。

Description

数据查询方法及装置
技术领域
本发明涉及信息数据查询技术领域，尤其涉及一种数据查询方法及装置。
背景技术
随着人们生活水平的不断提高，为方便出行越来越多的人选择考取驾驶证，各种驾考软件顺势产生。学员可以通过驾考软件的终端应用选择驾校和教练，当日访问量较高时，需要排队从数据库读取数据，排队时间会随着访问量的增大而增加，影响了数据查询的效率。
发明内容
本发明实施例提供一种数据查询方法及装置，通过设置相关缓存策略，可以提高数据查询的效率。
本发明实施例第一方面提供了一种数据查询方法，可包括：
基于数据获取请求在系统缓存中查找当前页面对应的当页数据；
若未检测到当页数据，在总缓存数据中进行分页处理得到当页数据；
将分页处理对应的分页信息和当页数据对应存储至系统缓存中。
进一步的，上述方法还包括：
输出显示当页数据。
进一步的，上述方法还包括：
检测系统缓存的综合排序列表中是否存在总缓存数据。
进一步的，上述方法还包括：
若未检测到总缓存数据，基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据；
将新缓存数据作为总缓存数据存储至系统缓存中。
进一步的，上述方法还包括：
基于预设时间间隔删除系统缓存中的分页缓存数据，分页缓存数据包括分页信息和对应的当页数据。
本发明实施例第二方面提供了一种数据查询装置，可包括：
数据查找模块，用于基于数据获取请求在系统缓存中查找当前页面对应的当页数据；
分页处理模块，用于若未检测到当页数据，在总缓存数据中进行分页处理得到当页数据；
数据存储模块，用于将分页处理对应的分页信息和当页数据对应存储至系统缓存中。
进一步的，上述装置还包括：
页面展示模块，用于输出显示当页数据。
进一步的，上述装置还包括：
数据检测模块，用于检测系统缓存的综合排序列表中是否存在总缓存数据。
进一步的，上述装置还包括：
数据读取模块，用于若未检测到总缓存数据，基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据。
进一步的，上述数据存储模块，还用于将新缓存数据作为总缓存数据存储至系统缓存中。
进一步的，上述装置还包括：
数据删除模块，用于基于预设时间间隔删除系统缓存中的分页缓存数据，分页缓存数据包括分页信息和对应的当页数据。
在本发明实施例中，当获取到针对当前页面的数据获取请求时，先在系统缓存中查找当前页面对应的当页数据，若未检测到，再检测是否有总缓存数据，若有，则在总缓存数据中进行分页处理得到当页数据，最后将分页处理对应的分页信息和当页数据对应存储至系统缓存中。通过设置上述缓存策略，提高了数据的查询效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1是本发明实施例提供的一种数据查询方法的流程示意图；
图2是本发明实施例提供的另一种数据查询方法的流程示意图；
图3是本发明实施例提供的一种数据查询装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
本发明实施例提供的数据查询方法可以应用于在日访问量较大的驾考应用中查询教练信息的应用场景中。
本发明实施例涉及的数据查询装置可以是智能手机、平板电脑以及移动互联网设备(MID)等能够下载安装终端应用的终端设备。
下面将结合附图1和附图2，对本发明实施例提供的数据查询方法进行详细介绍。
请参见图1，为本发明实施例提供了一种数据查询方法的流程示意图。如图1所示，本发明实施例的所述方法可以包括以下步骤S101-步骤S103。
S101，基于数据获取请求在系统缓存中查找当前页面对应的当页数据。
具体的，上述装置可以基于学员输入的数据获取请求在系统缓存中查找当前页面对应的当页数据，可以理解的是，上述当页数据可以是在当前页面显示的数据。若查找到了当页数据，上述装置可以直接输出显示该数据。
S102，若未检测到当页数据，在总缓存数据中进行分页处理得到当页数据。
需要说明的是，若上述装置在系统缓存中未检测到当页数据，可以检测系统缓存的综合排序列表中是否存在总缓存数据。总缓存数据可以是上述装置提前缓存的多条缓存数据，不仅包括当页数据，还可以包括当页数据之后的其他页面数据。上述综合排序列表可以是系统缓存中存储缓存数据的列表。
可以理解的是，若上述装置检测到总缓存数据，可以在总缓存数据中进行分页处理得到当页数据，上述分页处理的过程是在总缓存数据中划分出当页数据的过程。可选的，分页处理过程中产生的中间过程数据可以称为分页信息。
S103，将分页处理对应的分页信息和当页数据对应存储至系统缓存中。
具体的，上述装置可以将分页处理对应的分页信息和当页数据对应存储至系统缓存中，之后可以输出展示分页数据。可以理解的是，经过上述存储之后，若后续再请求当页数据时，可以保证系统中存在该数据。
在可选实施例中，若上述装置未检测到总缓存数据，可以基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据。可以理解的是，上述全文搜索引擎可以是驾考应用的搜索引擎，上述数据存储服务器可以是基于Lucene的搜索服务器ElasticSearch。需要说明的是，上述综合排序列表默认最多可以展示N条数据，则上述预设数据的新缓存数据可以是N条，例如，N为400。进一步的，上述装置可以将新缓存数据作为总缓存数据存储至系统缓存中，保证上述综合排序列表中有总缓存数据。
可以理解的是，系统缓存中可能丢失了总缓存数据，但之前分页的分页信息可能还保留在系统中，需要定期删除，避免占用内存，也避免乱入新缓存数据，造成数据出错。可选的，在读取新缓存数据后，上述装置可以基于预设时间间隔删除系统缓存中的分页缓存数据，该分页缓存数据可以包括上述分页信息和对应的当页数据，上述预设时间间隔可以是2min，即上述装置可以保证每2min进行一次数据检索，提高查询效率。
在本发明实施例中，当获取到针对当前页面的数据获取请求时，先在系统缓存中查找当前页面对应的当页数据，若未检测到，再检测是否有总缓存数据，若有，则在总缓存数据中进行分页处理得到当页数据，最后将分页处理对应的分页信息和当页数据对应存储至系统缓存中。通过设置上述缓存策略，提高了数据的查询效率。
在本发明实施例的一种具体实现方式中，上述数据查询方法可以如图2所示，包括：
S201，开始。
S202，系统缓存中是否存在当前页面对应的当页数据。
可以理解的是，当系统缓存中存在当前页面对应的当页数据时，可以转入执行步骤S203，输出展示当页数据。否则，转入执行步骤S204在系统缓存的综合排序列表中查找是否存在总缓存数据。
S203，输出展示当页数据。
S204，系统缓存的综合排序列表中是否存在总缓存数据。
可以理解的是，当检测到存在总缓存数据时可以转入执行步骤S207，对总缓存数据进行分页处理得到当页数据，否则，转入执行步骤S205，从服务器读取新缓存数据。
S205，从数据存储服务器中读取预设数量的新缓存数据。
S206，基于预设时间间隔删除系统缓存中的分页缓存数据。
S207，分页处理得到当页数据。
S208，将分页处理对应的分页信息和当页数据对应存储至系统缓存。
需要说明的是，上述实施例中的详细的实现过程可以参见上述方法实施例中的具体描述，此处不再赘述。
在本发明实施例中，当获取到针对当前页面的数据获取请求时，先在系统缓存中查找当前页面对应的当页数据，若未检测到，再检测是否有总缓存数据，若有，则在总缓存数据中进行分页处理得到当页数据，最后将分页处理对应的分页信息和当页数据对应存储至系统缓存中。通过设置上述缓存策略，提高了数据的查询效率。
需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
下面将结合附图3，对本发明实施例提供的数据查询装置进行详细介绍。需要说明的是，附图3所示的数据查询装置，用于执行本发明图1和图2所示实施例的方法，为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明图1和图2所示的实施例。
请参见图3，为本发明实施例提供了一种数据查询装置的结构示意图。如图3所示，本发明实施例的数据查询装置10可以包括：数据查找模块101、分页处理模块102、数据存储模块103、页面展示模块104、数据检测模块105、数据读取模块106和数据删除模块107。
数据查找模块101，用于基于数据获取请求在系统缓存中查找当前页面对应的当页数据。
具体实现中，数据查找模块101可以基于学员输入的数据获取请求在系统缓存中查找当前页面对应的当页数据，可以理解的是，上述当页数据可以是在当前页面显示的数据。若查找到了当页数据，页面展示模块104可以直接输出显示该数据。
分页处理模块102，用于若未检测到当页数据，在总缓存数据中进行分页处理得到当页数据。
需要说明的是，若数据查找模块101在系统缓存中未检测到当页数据，数据检测模块105可以检测系统缓存的综合排序列表中是否存在总缓存数据。总缓存数据可以是上述装置10提前缓存的多条缓存数据，不仅包括当页数据，还可以包括当页数据之后的其他页面数据。上述综合排序列表可以是系统缓存中存储缓存数据的列表。
可以理解的是，若数据检测模块105检测到总缓存数据，分页处理模块102可以在总缓存数据中进行分页处理得到当页数据，上述分页处理的过程是在总缓存数据中划分出当页数据的过程。可选的，分页处理过程中产生的中间过程数据可以称为分页信息。
数据存储模块103，用于将分页处理对应的分页信息和当页数据对应存储至系统缓存中。
具体实现中，数据存储模块103可以将分页处理对应的分页信息和当页数据对应存储至系统缓存中，之后页面展示模块104可以输出展示分页数据。可以理解的是，经过上述存储之后，若后续再请求当页数据时，可以保证系统中存在该数据。
在可选实施例中，若数据检测模块105未检测到总缓存数据，数据读取模块106可以基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据。可以理解的是，上述全文搜索引擎可以是驾考应用的搜索引擎，上述数据存储服务器可以是基于Lucene的搜索服务器ElasticSearch。需要说明的是，上述综合排序列表默认最多可以展示N条数据，则上述预设数据的新缓存数据可以是N条，例如，N为400。进一步的，数据存储模块103可以将新缓存数据作为总缓存数据存储至系统缓存中，保证上述综合排序列表中有总缓存数据。
可以理解的是，系统缓存中可能丢失了总缓存数据，但之前分页的分页信息可能还保留在系统中，需要定期删除，避免占用内存，也避免乱入新缓存数据，造成数据出错。可选的，在读取新缓存数据后，数据删除模块107可以基于预设时间间隔删除系统缓存中的分页缓存数据，该分页缓存数据可以包括上述分页信息和对应的当页数据，上述预设时间间隔可以是2min，即上述装置10可以保证每2min进行一次数据检索，提高查询效率。
在本发明实施例中，当获取到针对当前页面的数据获取请求时，先在系统缓存中查找当前页面对应的当页数据，若未检测到，再检测是否有总缓存数据，若有，则在总缓存数据中进行分页处理得到当页数据，最后将分页处理对应的分页信息和当页数据对应存储至系统缓存中。通过设置上述缓存策略，提高了数据的查询效率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范围。

Claims (10)

1.一种数据查询方法，其特征在于，包括：
基于数据获取请求在系统缓存中查找当前页面对应的当页数据；
若未检测到所述当页数据，在总缓存数据中进行分页处理得到所述当页数据；
将所述分页处理对应的分页信息和所述当页数据对应存储至所述系统缓存中。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
输出显示所述当页数据。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
检测所述系统缓存的综合排序列表中是否存在总缓存数据。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
若未检测到所述总缓存数据，基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据；
将所述新缓存数据作为总缓存数据存储至所述系统缓存中。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
基于预设时间间隔删除所述系统缓存中的分页缓存数据，所述分页缓存数据包括所述分页信息和对应的当页数据。
6.一种数据查询装置，其特征在于，包括：
数据查找模块，用于基于数据获取请求在系统缓存中查找当前页面对应的当页数据；
分页处理模块，用于若未检测到所述当页数据，在总缓存数据中进行分页处理得到所述当页数据；
数据存储模块，用于将所述分页处理对应的分页信息和所述当页数据对应存储至所述系统缓存中。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：
页面展示模块，用于输出显示所述当页数据。
8.根据权利要求6所述的装置，其特征在于，所述装置还包括：
数据检测模块，用于检测所述系统缓存的综合排序列表中是否存在总缓存数据。
9.根据权利要求8所述的装置，其特征在于，所述装置还包括：
数据读取模块，用于若未检测到所述总缓存数据，基于全文搜索引擎从数据存储服务器中读取预设数量的新缓存数据；
数据存储模块，还用于将所述新缓存数据作为总缓存数据存储至所述系统缓存中。
10.根据权利要求6所述的装置，其特征在于，所述装置还包括：
数据删除模块，用于基于预设时间间隔删除所述系统缓存中的分页缓存数据，所述分页缓存数据包括所述分页信息和对应的当页数据。
CN201910282149.6A 2019-04-09 2019-04-09 数据查询方法及装置 Pending CN110083763A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910282149.6A CN110083763A (zh) 2019-04-09 2019-04-09 数据查询方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910282149.6A CN110083763A (zh) 2019-04-09 2019-04-09 数据查询方法及装置

Publications (1)

Publication Number Publication Date
CN110083763A true CN110083763A (zh) 2019-08-02

Family

ID=67414551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910282149.6A Pending CN110083763A (zh) 2019-04-09 2019-04-09 数据查询方法及装置

Country Status (1)

Country Link
CN (1) CN110083763A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400619A (zh) * 2020-03-11 2020-07-10 上海东普信息科技有限公司 物流轨迹数据推送方法、装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101699440A (zh) * 2009-11-24 2010-04-28 中国电信股份有限公司 按业务检索的方法及系统
CN102880685A (zh) * 2012-09-13 2013-01-16 北京航空航天大学 一种时间密集大数据量的b/s分区间分页查询方法
CN103425708A (zh) * 2012-05-25 2013-12-04 金蝶软件（中国）有限公司 一种优化的web分页查询方法及装置
CN106934057A (zh) * 2017-03-22 2017-07-07 福建中金在线信息科技有限公司 一种分页缓存数据的更新方法和装置
CN109313642A (zh) * 2018-09-07 2019-02-05 威富通科技有限公司 账单信息缓存方法、账单信息查询方法和终端设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101699440A (zh) * 2009-11-24 2010-04-28 中国电信股份有限公司 按业务检索的方法及系统
CN103425708A (zh) * 2012-05-25 2013-12-04 金蝶软件（中国）有限公司 一种优化的web分页查询方法及装置
CN102880685A (zh) * 2012-09-13 2013-01-16 北京航空航天大学 一种时间密集大数据量的b/s分区间分页查询方法
CN106934057A (zh) * 2017-03-22 2017-07-07 福建中金在线信息科技有限公司 一种分页缓存数据的更新方法和装置
CN109313642A (zh) * 2018-09-07 2019-02-05 威富通科技有限公司 账单信息缓存方法、账单信息查询方法和终端设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111400619A (zh) * 2020-03-11 2020-07-10 上海东普信息科技有限公司 物流轨迹数据推送方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
US8255386B1 (en) Selection of documents to place in search index
US10191856B2 (en) Method of managing web browser cache size using logical relationships and clustering
US20090157617A1 (en) Methods for enhancing digital search query techniques based on task-oriented user activity
CN106055704B (zh) 一种图像检索与匹配方法及系统
US11567681B2 (en) Method and system for synchronizing requests related to key-value storage having different portions
CN101136027B (zh) 用于数据库索引、搜索和数据检索的系统和方法
US7945543B2 (en) Method and system for deferred maintenance of database indexes
CN104361042A (zh) 一种信息检索方法及装置
US9971828B2 (en) Document tagging and retrieval using per-subject dictionaries including subject-determining-power scores for entries
CN108090153A (zh) 一种搜索方法、装置、电子设备及存储介质
CN111680063B (zh) Elasticsearch分页查询数据的方法及装置
CN111522905A (zh) 一种基于数据库的文档搜索方法和装置
CN104636502A (zh) 一种查询系统的数据加速查询方法
CN110399348A (zh) 文件重删方法、装置、系统及计算机可读存储介质
US11748357B2 (en) Method and system for searching a key-value storage
CN111046041A (zh) 数据处理方法和装置、存储介质及处理器
US20150106376A1 (en) Document tagging and retrieval using entity specifiers
CN107180043A (zh) 分页实现方法和分页系统
CN107391555B (zh) 一种面向Spark-Sql检索的元数据实时更新方法
CN110083763A (zh) 数据查询方法及装置
CN109815388A (zh) 一种基于遗传算法的智能聚焦爬虫系统
CN106909623B (zh) 一种支持高效海量数据分析和检索的数据装置及数据存储方法
CN102129454A (zh) 一种基于云存储的百科数据处理方法及系统
CN107590233A (zh) 一种文件管理方法及装置
CN105740374B (zh) 基于分布式内存的三维平台数据模糊查询方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190802

RJ01 Rejection of invention patent application after publication