CN112231317B - 数据的查询方法、装置、电子装置和存储介质 - Google Patents
数据的查询方法、装置、电子装置和存储介质 Download PDFInfo
- Publication number
- CN112231317B CN112231317B CN202011025443.8A CN202011025443A CN112231317B CN 112231317 B CN112231317 B CN 112231317B CN 202011025443 A CN202011025443 A CN 202011025443A CN 112231317 B CN112231317 B CN 112231317B
- Authority
- CN
- China
- Prior art keywords
- data
- backup database
- preset
- time period
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000004590 computer program Methods 0.000 claims description 15
- 238000012216 screening Methods 0.000 claims description 12
- 238000005516 engineering process Methods 0.000 abstract description 3
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 108010001267 Protein Subunits Proteins 0.000 description 1
- JAQPGQYDZJZOIN-LQDWTQKMSA-N benzylpenicillin benethamine Chemical compound C=1C=CC=CC=1C[NH2+]CCC1=CC=CC=C1.N([C@H]1[C@H]2SC([C@@H](N2C1=O)C([O-])=O)(C)C)C(=O)CC1=CC=CC=C1 JAQPGQYDZJZOIN-LQDWTQKMSA-N 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种数据的查询方法、装置、电子装置和存储介质。其中,该数据的查询方法包括:获取用户输入的数据查询消息;确定备份数据库中数据的第一预设存储结构信息;根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句;根据第一索引语句,从备份数据库中查询目标数据;在从备份数据库中查询到目标数据的情况下,显示目标数据。通过本申请,解决了相关技术中数据查询效率低的问题,提高了数据查询效率。
Description
技术领域
本申请涉及数据处理领域,特别是涉及数据的查询方法、装置、电子装置和存储介质。
背景技术
当今处于大数据时代,对海量数据进行快速可视化,对各个单位的信息管理和分析都有着重大的意义。不同单位对相似信息或者同一单位对不同信息的管控要求可能存在一定差异。
在相关技术中,针对海量数据的快速可视化,大部分是通过添加数据库索引来提高查询效率。然而,在研究过程中发现,相关技术中通过添加数据库索引来提高查询效率的方式,并不是所有的索引对查询都有效,会存在索引的选择不恰当,而导致数据查询效率低。
目前针对相关技术中数据查询效率低的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种数据的查询方法、装置、电子装置和存储介质,以至少解决相关技术中数据查询效率低的问题。
第一方面,本申请实施例提供了一种数据的查询方法,包括:
获取用户输入的数据查询消息;
确定备份数据库中数据的第一预设存储结构信息;
根据所述第一预设存储结构信息和所述数据查询消息,生成与所述备份数据库对应的第一索引语句;
根据所述第一索引语句,从所述备份数据库中查询目标数据;
在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据。
在其中一些实施例中,确定备份数据库中数据的存储结构信息之前,所述方法还包括:
从历史数据库中筛选出第一预设时间段内的第一数据集合;
将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中。
在其中一些实施例中,将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中之后,所述方法还包括:
检测所述历史数据库中是否存储有在所述第一预设时间段之后的数据;
在检测到所述历史数据库中存储有在所述第一预设时间段之后的数据的情况下,将在所述第一预设时间段之后的数据存储至所述备份数据库中。
在其中一些实施例中,将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中之后,所述方法还包括:
检测所述备份数据库中的各个数据中是否存在大于第一预设存储时间的数据;
在检测所述备份数据库中的各个数据中存在大于第一预设存储时间的数据情况下,删除所述大于第一预设存储时间的数据。
在其中一些实施例中,将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中之后,所述方法还包括:
检测所述备份数据库中各个数据的存储时间是否均大于第二预设存储时间;
在检测到所述备份数据库中各个数据的存储时间均大于所述第二预设存储时间的情况下,从历史数据库中筛选出第二预设时间段内的第二数据集合,其中,所述第二预设时间段为所述第一预设时间段的下一个时间段,且所述第二预设时间段的时间长度与所述第一预设时间段的时间长度相同;
将所述第二数据集合存储至所述备份数据库中,并从所述备份数据库中删除所述第一数据集合。
在其中一些实施例中,根据所述索引语句,从所述备份数据库中查询目标数据之后,所述方法还包括:
在从所述备份数据库中未查询到目标数据的情况下,确定历史数据库中数据的第二预设存储结构信息;
根据所述第二预设存储结构信息和所述数据查询消息,生成与所述历史数据库对应的第二索引语句;
根据所述第二索引语句,从所述历史数据库中查询目标数据;
在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据。
在其中一些实施例中,根据所述第一索引语句,从所述备份数据库中查询目标数据之前,所述方法还包括:
对所述第一索引语句进行优化。
第二方面,本申请实施例还提供了一种数据的查询装置,包括:
获取模块,用于获取用户输入的数据查询消息;
第一确定模块,用于确定备份数据库中数据的第一预设存储结构信息;
第一生成模块,用于根据所述第一预设存储结构信息和所述数据查询消息,生成与所述备份数据库对应的第一索引语句;
第一查询模块,用于根据所述第一索引语句,从所述备份数据库中查询目标数据;
第一显示模块,用于在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据。
第三方面,本申请实施例提供了一种电子装置,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述的数据的查询方法。
第四方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面所述的数据的查询方法。
相比于相关技术,本申请实施例提供的数据的查询方法、装置、电子装置和存储介质,通过获取用户输入的数据查询消息;确定备份数据库中数据的第一预设存储结构信息;根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句;根据第一索引语句,从备份数据库中查询目标数据;在从备份数据库中查询到目标数据的情况下,显示目标数据的方式,解决了相关技术中数据查询效率低的问题,提高了数据查询效率。
本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是本申请实施例的数据的查询方法的终端的硬件结构框图;
图2是根据本申请实施例的数据的查询方法的流程图;
图3是根据本申请优选实施例的数据的查询方法的流程图;
图4是根据本申请实施例的数据的查询装置的结构框图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请提供的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,还可以理解的是,虽然这种开发过程中所作出的努力可能是复杂并且冗长的,然而对于与本申请公开的内容相关的本领域的普通技术人员而言,在本申请揭露的技术内容的基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本申请公开的内容不充分。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是,本申请所描述的实施例在不冲突的情况下,可以与其它实施例相结合。
除非另作定义,本申请所涉及的技术术语或者科学术语应当为本申请所属技术领域内具有一般技能的人士所理解的通常意义。本申请所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制,可表示单数或复数。本申请所涉及的术语“包括”、“包含”、“具有”以及它们任何变形,意图在于覆盖不排他的包含;例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可以还包括没有列出的步骤或单元,或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电气的连接,不管是直接的还是间接的。本申请所涉及的“多个”是指大于或者等于两个。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。本申请所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象,不代表针对对象的特定排序。
本实施例提供的方法实施例可以在终端、计算机或者类似的运算装置中执行。以运行在终端上为例,图1是本申请实施例的数据的查询方法的终端的硬件结构框图。如图1所示,终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104,可选地,上述终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述终端的结构造成限定。例如,终端还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的数据的查询方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括终端的通信供应商提供的无线网络。在一个实例中,传输设备106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输设备106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
本实施例提供了一种数据的查询方法,图2是根据本申请实施例的数据的查询方法的流程图,如图2所示,该流程包括如下步骤:
步骤S201,获取用户输入的数据查询消息。
在本步骤中,获取用户输入的数据查询方式可以是:通过获取用户终端发送的数据查询消息,也可以是用户在输入界面输入的数据查询消息。其中,数据查询消息可以是用户根据实际的需要或者实际的应用场景输入的。
步骤S202,确定备份数据库中数据的第一预设存储结构信息。
在本步骤中,在将数据存入到备份数据库时,可以根据用户输入的第一预设存储结构信息进行存储,通过该方式,以便于步骤S202中确定备份数据库中数据的第一预设存储结构信息,以及便于步骤S203中根据该第一预设存储结构信息生成对应的备份数据库的索引语句。
需要说明的是,每个数据均有对应的预设存储结构信息,且不同的数据可以设置有不同的预设存结构信息,可以根据用户的实际需要进行设定。
步骤S202中的备份数据库的生成可以通过以下方式:
方式A,在其中一些实施例中,从历史数据库中筛选出第一预设时间段内的第一数据集合;将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中。通过该方式,以便于用户查看第一预设时间段内的第一数据集合,可以避免从存储有海量数据中的历史数据库中进行数据查询,而导致查询效率低的问题,提高了数据查询效率。
需要说明的是,该第一预设时间段可以由用户设定。
方式B,在其中一些实施例中,也可以通过获取用户输入的关键词信息,根据该关键词信息从历史数据库中筛选出第一数据集合;然后再将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中。通过该方式,以便于用户查看用户感兴趣的关键词对应的第一数据集合,可以避免从存储有海量数据中的历史数据库中进行数据查询,而导致查询效率低的问题,提高了数据查询效率。
需要说明的是,该关键词信息可以根据用户平时查询数据所使用的词来确定,例如,将最近一个月所使用的某个词的次数大于预设次数,则将该大于预设次数的词作为关键词;也可以是用户直接在用户交互界面中输入的关键词来确定。
基于通过方式A生成来备份数据库的生成方式,为了保证备份数据库中的数据的时效性,可以通过以下方式来实现。
方式1,在其中一些实施例中,在将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中之后,还可以检测历史数据库中是否存储有在第一预设时间段之后的数据;在检测到历史数据库中存储有在第一预设时间段之后的数据的情况下,将在第一预设时间段之后的数据存储至备份数据库中。通过该方式,以实现对备份数据库中的数据的实时更新,保证备份数据库中的数据的时效性。
基于上述方式1,在对备份数据库中的数据进行实时更新同时,为了避免备份数据库中的数据过多,而造成数据查询效率低的问题,在其中一些实施例中,将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中之后,还可以检测备份数据库中的各个数据中是否存在大于第一预设存储时间的数据;在检测备份数据库中的各个数据中存在大于第一预设存储时间的数据情况下,删除大于第一预设存储时间的数据。通过该方式,实现了对备份数据库中大于第一预设存储时间的数据进行删除,避免了备份数据库中的数据过多,而造成数据查询效率低的问题,提高了数据查询效率。
同时,基于上述实施例,还可以实现对备份数据库中的数据的自动实时更新以及删除,无需人工参与,以及确保了备份数据库中数据的时效性。
方式2,在其中一些实施例中,在将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中之后,还可以检测备份数据库中各个数据的存储时间是否均大于第二预设存储时间;在检测到备份数据库中各个数据的存储时间均大于第二预设存储时间的情况下,从历史数据库中筛选出第二预设时间段内的第二数据集合,其中,第二预设时间段为第一预设时间段的下一个时间段,且第二预设时间段的时间长度与第一预设时间段的时间长度相同;将第二数据集合存储至备份数据库中,并从备份数据库中删除第一数据集合。通过上述方式,实现了对备份数据库中数据的自动更新以及删除,避免了人工参与。
需要说明的是,第二预设存储时间的时间长度可以与第一预设时间段的时间长度或第二预设时间段的时间长度相同。
下面以示例性实施例对方式2进行描述和说明。例如,假设用户感兴趣的是近六个月的数据,则可以根据用户的实际需要将第一预设时间段、第二预设时间段以及第二预设存储时间的时间长度均设置为六个月,且其起始时间为2019年1月,则备份数据库中的第一数据集合中的数据包括2019年1月至2019年6月的数据,而当在检测到备份数据库中各个数据的存储时间均大于第二预设存储时间(即为六个月)的情况下,从历史数据库中筛选出第二预设时间段(即2019年7月至2019年12月)内的第二数据集合,并将该第二数据集合存储于备份数据库中,以及删除备份数据库中的第一数据集合,以实现对备份数据库中的数据的自动删除和备份。
需要说明的是,历史数据库中的数据也可以根据用户的设定进行定时删除,例如可以设置为删除三年前的数据。
步骤S203,根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句。
在本步骤中,可以根据第一预设存储结构信息,确实与备份数据库对应的多个索引语句;从多个索引语句中筛选出与数据查询消息对应的第一索引语句。通过该方式,以实现对索引语句的优化,使得索引语句更合适,以便于提高查询效率。
下面以示例性实施例对步骤S203进行描述和说明:
比如:备份数据库中有一份A大学的学生信息表,其中预设存储结构信息可以包括学号、姓名、性别、年级、院系、班级、所跟导师,还有一份教师信息表,其预设存储结构信息可以包括工号、姓名、性别、院系、职称、所带学生。
假设A大学中的学生总人数是12万,男生8万,女生4万,大一、大二、大三、大四各有3万人,且各个学院的人数也不同;而A大学的老师总人数是3千,男老师2千,女老师1千,且各个学院的老师人数也不同。
此时如果用户想查询大一计算机学院的某男生,则可以根据用户输入的数据查询消息以及预设存储结构信息,可以将年级列为索引,并生成对应的索引语句,可以一下子从12万个查询目标中缩减到3万,而如果把性别当索引,只能从12万缩减到8万,显然选年级当索引更合适,同理如果想查询某老师带了哪些学生(具体信息需要从学生信息中获取),那么此时根据老师所在院系进行索引比对年级进行索引更有效。
通过上述方式,步骤S203通过根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句的方式,可以使得生成索引的语句更合适,以便提高用户查询效率。
需要说明的是,第一索引语句的语句格式可以是SQL查询语句,也可以其他能够实现本申请实施例的查询语句,本申请不做限定。
步骤S204,根据第一索引语句,从备份数据库中查询目标数据。
在其中一些实施例中,为了提高查询效率,在步骤S204之前,还可以对第一索引语句进行优化。
在本实施例中,优化方式可以是以下方式:考虑在WHERE及ORDER BY涉及的列上建立索引;尽量避免使用!=或<>、IS NULL或IS NOT NULL、IN、NOT IN等操作符;能够用BETWEEN的就不要用IN等。本实施例不做限定,也可以其他能够优化第一索引语句的方式。
步骤S205,在从备份数据库中查询到目标数据的情况下,显示目标数据。
在本步骤中,可以将目标数据进行可视化,通过对目标数据的可视化,可以增强目标数据的显示效果,方便用户以更加直观的方式查看数据,进而发现数据中隐藏的价值。
需要说明的是,可视化的数据也可以是备份数据库中整个数据或历史数据库中的整个数据,甚至还可以是备份数据库或历史数据库中用户关注的数据,通过该方式,用户不止可以查看备份数据库中当前有效时间的数据信息,还能查看历史数据库中的历史数据的信息。
基于步骤S201至步骤S205,通过根据数据查询消息以及第一预设存储结构信息生成与备份数据库对应的第一索引语句,并从备份数据库中查询与数据查询消息对应的目标的方式,使得数据库的索引更合适,同时通过备份数据库,大大减少了数据查询时间,解决了相关技术中数据查询效率低的问题,提高了数据查询效率。
在其中一些实施例中,在从备份数据库中未查询到目标数据的情况下,还确定历史数据库中数据的第二预设存储结构信息;根据第二预设存储结构信息和数据查询消息,生成与历史数据库对应的第二索引语句;根据第二索引语句,从历史数据库中查询目标数据;在从备份数据库中查询到目标数据的情况下,显示目标数据。通过该方式,避免了在备份数据库中为查询到目标数据的情况下,而导致用户无法获取目标数据的问题,实现对目标数据的查询。
在本实施例中,为了避免历史数据库出现过多用户不关心的数据,用户可以设置将历史数据库中三年前的数据进行删除。
需要说明的是,上述实施例中,备份数据库中删除的数据在历史数据库中仍然可以查询到。
基于上述实施例,本申请实施例实现了快速便捷的管控分析数据所包含的有效信息(即备份数据库中的数据),同时基于实际保留部分历史数据(即根据用户的实际需要,选择性的删除历史数据库中的数据)。
且本申请实施例提供的数据的查询方法,在部署完成后,不需要人工操作,自主运行;备份数据库中的数据会自动定时备份与删除,用户不止可以查看当前有效时间的数据信息,还能查看历史数据的信息。且结合用户的实际需要并进行优化索引语句后进行查询,查到目标数据的时间大大减少了,且实现对目标数据的可视化速度也提升了。
下面通过优选实施例对本申请实施例进行描述和说明。
图3是根据本申请优选实施例的数据的查询方法的流程图。如图3所示,该优选流程步骤包括:
步骤S301,从历史数据库中筛选出第一预设时间段内的第一数据集合。
步骤S302,将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中。
步骤S303,获取用户输入的数据查询消息。
步骤S304,确定备份数据库中数据的第一预设存储结构信息。
步骤S305,根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句。
步骤S306,根据第一索引语句,从备份数据库中查询目标数据。
步骤S307,在从备份数据库中查询到目标数据的情况下,显示目标数据。
在一些实施例中,该优选的数据的查询方法可以包括以下两个阶段:
阶段一,准备阶段:理解实际应用场景的现实需求,明确备份数据的时间节点及历史数据保留的时间长度,将海量数据做好适宜的定时备份与删除;综合数据信息在数据库中的存储结构与逻辑(该存储结构和逻辑可以是上述实施例中的预设存储结构信息),考虑mysql查询语句的优化,选取恰当的索引(索引可以是单索引或联合索引)。
需要说明的是,实际应用场景的现实需求可以是用户根据自身的实际需要,设定相关的第一预设时间段、第二预设时间段,以及第三预设时间段,第三预设时间段为表示历史数据库中数据的存储时间段。
阶段二,操作阶段:基于准备阶段,自动备份历史数据至备份数据库中,在查询基数中仅保留有效时间内的数据;优化mysql查询语句;结合查询语句,生成与备份数据库对应的索引语句,用来查询目标数据;最后对目标数据进行可视化。
需要说明的是,查询基数即备份数据库中的数据基数。
本实施例还提供了一种数据的查询装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本申请实施例的数据的查询装置的结构框图,如图4所示,该装置包括:
获取模块41,用于获取用户输入的数据查询消息;
第一确定模块42,耦合至获取模块41,用于确定备份数据库中数据的第一预设存储结构信息;
第一生成模块43,耦合至第一确定模块42,用于根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句;
第一查询模块44,耦合至第一生成模块43,用于根据第一索引语句,从备份数据库中查询目标数据;
第一显示模块45,耦合至第一查询模块44,用于在从备份数据库中查询到目标数据的情况下,显示目标数据。
在其中一些实施例中,该装置还包括:第一筛选模块,用于从历史数据库中筛选出第一预设时间段内的第一数据集合;第一存储模块,用于将第一数据集合中的数据按照第一预设存储结构信息存储至备份数据库中。
在其中一些实施例中,该装置还包括:第一检测模块,用于检测历史数据库中是否存储有在第一预设时间段之后的数据;第二存储模块,用于在检测到历史数据库中存储有在第一预设时间段之后的数据的情况下,将在第一预设时间段之后的数据存储至备份数据库中。
在其中一些实施例中,该装置还包括:第二检测模块,用于检测备份数据库中的各个数据中是否存在大于第一预设存储时间的数据;删除模块,用于在检测备份数据库中的各个数据中存在大于第一预设存储时间的数据情况下,删除大于第一预设存储时间的数据。
在其中一些实施例中,该装置还包括:第三检测模块,用于检测备份数据库中各个数据的存储时间是否均大于第二预设存储时间;第二筛选模块,用于在检测到备份数据库中各个数据的存储时间均大于第二预设存储时间的情况下,从历史数据库中筛选出第二预设时间段内的第二数据集合,其中,第二预设时间段为第一预设时间段的下一个时间段,且第二预设时间段的时间长度与第一预设时间段的时间长度相同;第三存储模块,用于将第二数据集合存储至备份数据库中,并从备份数据库中删除第一数据集合。
在其中一些实施例中,该装置还包括:第二确定模块,用于在从备份数据库中未查询到目标数据的情况下,确定历史数据库中数据的第二预设存储结构信息;第二生成模块,用于根据第二预设存储结构信息和数据查询消息,生成与历史数据库对应的第二索引语句;第二查询模块,用于根据第二索引语句,从历史数据库中查询目标数据;第二显示模块,用于在从备份数据库中查询到目标数据的情况下,显示目标数据。
在其中一些实施例中,该装置还包括:优化模块,用于对第一索引语句进行优化。
需要说明的是,上述各个模块可以是功能模块也可以是程序模块,既可以通过软件来实现,也可以通过硬件来实现。对于通过硬件来实现的模块而言,上述各个模块可以位于同一处理器中;或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
本实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
步骤S201,获取用户输入的数据查询消息。
步骤S202,确定备份数据库中数据的第一预设存储结构信息。
步骤S203,根据第一预设存储结构信息和数据查询消息,生成与备份数据库对应的第一索引语句。
步骤S204,根据第一索引语句,从备份数据库中查询目标数据。
步骤S205,在从备份数据库中查询到目标数据的情况下,显示目标数据。
需要说明的是,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
另外,结合上述实施例中的数据的查询方法,本申请实施例可提供一种存储介质来实现。该存储介质上存储有计算机程序;该计算机程序被处理器执行时实现上述实施例中的任意一种数据的查询方法。
本领域的技术人员应该明白,以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (8)
1.一种数据的查询方法,其特征在于,包括:
获取用户输入的数据查询消息;
确定备份数据库中数据的第一预设存储结构信息;
根据所述第一预设存储结构信息和所述数据查询消息,生成与所述备份数据库对应的第一索引语句;
根据所述第一索引语句,从所述备份数据库中查询目标数据;
在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据;
确定备份数据库中数据的第一预设存储结构信息之前还包括:
从历史数据库中筛选出第一预设时间段内的第一数据集合;将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中;
在检测到所述备份数据库中各个数据的存储时间均大于第二预设存储时间的情况下,从历史数据库中筛选出第二预设时间段内的第二数据集合;所述第二预设时间段为所述第一预设时间段的下一个时间段,且所述第二预设时间段的时间长度与所述第一预设时间段的时间长度相同;将所述第二数据集合存储至所述备份数据库中,并从所述备份数据库中删除所述第一数据集合。
2.根据权利要求1所述的数据的查询方法,其特征在于,将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中之后,所述方法还包括:
检测所述历史数据库中是否存储有在所述第一预设时间段之后的数据;
在检测到所述历史数据库中存储有在所述第一预设时间段之后的数据的情况下,将在所述第一预设时间段之后的数据存储至所述备份数据库中。
3.根据权利要求2所述的数据的查询方法,其特征在于,将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中之后,所述方法还包括:
检测所述备份数据库中的各个数据中是否存在大于第一预设存储时间的数据;
在检测所述备份数据库中的各个数据中存在大于第一预设存储时间的数据情况下,删除所述大于第一预设存储时间的数据。
4.根据权利要求1所述的数据的查询方法,其特征在于,根据所述索引语句,从所述备份数据库中查询目标数据之后,所述方法还包括:
在从所述备份数据库中未查询到目标数据的情况下,确定历史数据库中数据的第二预设存储结构信息;
根据所述第二预设存储结构信息和所述数据查询消息,生成与所述历史数据库对应的第二索引语句;
根据所述第二索引语句,从所述历史数据库中查询目标数据;
在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据。
5.根据权利要求1所述的数据的查询方法,其特征在于,根据所述第一索引语句,从所述备份数据库中查询目标数据之前,所述方法还包括:
对所述第一索引语句进行优化。
6.一种数据的查询装置,其特征在于,包括:
获取模块,用于获取用户输入的数据查询消息;
第一确定模块,用于确定备份数据库中数据的第一预设存储结构信息;
第一生成模块,用于根据所述第一预设存储结构信息和所述数据查询消息,生成与所述备份数据库对应的第一索引语句;
第一查询模块,用于根据所述第一索引语句,从所述备份数据库中查询目标数据;
第一显示模块,用于在从所述备份数据库中查询到目标数据的情况下,显示所述目标数据;
所述第一确定模块,还用于从历史数据库中筛选出第一预设时间段内的第一数据集合;将所述第一数据集合中的数据按照所述第一预设存储结构信息存储至所述备份数据库中;在检测到所述备份数据库中各个数据的存储时间均大于第二预设存储时间的情况下,从历史数据库中筛选出第二预设时间段内的第二数据集合;所述第二预设时间段为所述第一预设时间段的下一个时间段,且所述第二预设时间段的时间长度与所述第一预设时间段的时间长度相同;将所述第二数据集合存储至所述备份数据库中,并从所述备份数据库中删除所述第一数据集合。
7.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至5中任一项所述的数据的查询方法。
8.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行权利要求1至5中任一项所述的数据的查询方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011025443.8A CN112231317B (zh) | 2020-09-25 | 2020-09-25 | 数据的查询方法、装置、电子装置和存储介质 |
PCT/CN2021/086798 WO2022062368A1 (zh) | 2020-09-25 | 2021-04-13 | 数据的查询方法、装置、电子装置和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011025443.8A CN112231317B (zh) | 2020-09-25 | 2020-09-25 | 数据的查询方法、装置、电子装置和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112231317A CN112231317A (zh) | 2021-01-15 |
CN112231317B true CN112231317B (zh) | 2023-05-09 |
Family
ID=74108654
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011025443.8A Active CN112231317B (zh) | 2020-09-25 | 2020-09-25 | 数据的查询方法、装置、电子装置和存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN112231317B (zh) |
WO (1) | WO2022062368A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112231317B (zh) * | 2020-09-25 | 2023-05-09 | 浙江三维通信科技有限公司 | 数据的查询方法、装置、电子装置和存储介质 |
CN113343023A (zh) * | 2021-06-01 | 2021-09-03 | 广州欢网科技有限责任公司 | 快速查询时段内频道排名的方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108241717A (zh) * | 2016-12-27 | 2018-07-03 | 中国移动通信集团公司 | 一种数据处理方法、装置及系统 |
CN110019218A (zh) * | 2017-12-08 | 2019-07-16 | 阿里巴巴集团控股有限公司 | 数据存储与查询方法及设备 |
CN110322688A (zh) * | 2019-05-20 | 2019-10-11 | 华为技术有限公司 | 一种数据处理的方法、数据查询的方法及相关设备 |
CN111159227A (zh) * | 2019-12-20 | 2020-05-15 | 中国建设银行股份有限公司 | 数据查询方法、装置、设备及存储介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104268286A (zh) * | 2014-10-21 | 2015-01-07 | 北京国双科技有限公司 | 一种查询热数据的方法 |
CN107741937B (zh) * | 2016-09-13 | 2020-04-28 | 腾讯科技(深圳)有限公司 | 一种数据查询方法及装置 |
US10691684B2 (en) * | 2016-11-01 | 2020-06-23 | BloomReach, Inc. | Structured search queries |
US10204124B1 (en) * | 2017-12-20 | 2019-02-12 | Merck Sharp & Dohme Corp. | Database indexing and processing |
CN108197289B (zh) * | 2018-01-18 | 2021-09-14 | 吉浦斯信息咨询(深圳)有限公司 | 一种数据存储结构、数据存储查询方法、终端及介质 |
CN110413631B (zh) * | 2018-04-25 | 2022-06-10 | 中移(苏州)软件技术有限公司 | 一种数据查询方法及装置 |
CN112231317B (zh) * | 2020-09-25 | 2023-05-09 | 浙江三维通信科技有限公司 | 数据的查询方法、装置、电子装置和存储介质 |
-
2020
- 2020-09-25 CN CN202011025443.8A patent/CN112231317B/zh active Active
-
2021
- 2021-04-13 WO PCT/CN2021/086798 patent/WO2022062368A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108241717A (zh) * | 2016-12-27 | 2018-07-03 | 中国移动通信集团公司 | 一种数据处理方法、装置及系统 |
CN110019218A (zh) * | 2017-12-08 | 2019-07-16 | 阿里巴巴集团控股有限公司 | 数据存储与查询方法及设备 |
CN110322688A (zh) * | 2019-05-20 | 2019-10-11 | 华为技术有限公司 | 一种数据处理的方法、数据查询的方法及相关设备 |
CN111159227A (zh) * | 2019-12-20 | 2020-05-15 | 中国建设银行股份有限公司 | 数据查询方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
WO2022062368A1 (zh) | 2022-03-31 |
CN112231317A (zh) | 2021-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112231317B (zh) | 数据的查询方法、装置、电子装置和存储介质 | |
CN107885873B (zh) | 用于输出信息的方法和装置 | |
CN113590776B (zh) | 基于知识图谱的文本处理方法、装置、电子设备及介质 | |
CN102902763B (zh) | 关联、检索信息处理数据和处理信息任务的方法及装置 | |
CN108897874B (zh) | 用于处理数据的方法和装置 | |
CN111125269B (zh) | 一种数据管理方法、血缘关系显示方法和相关装置 | |
US10268655B2 (en) | Method, device, server and storage medium of searching a group based on social network | |
Cornelissen et al. | A structured approach to the strategies analysis phase of cognitive work analysis | |
JP6637968B2 (ja) | ガイド付きデータ探索 | |
CN114049927A (zh) | 疾病数据处理方法、装置、电子设备及可读介质 | |
CN112053269B (zh) | 一种学情诊断方法、装置、设备及存储介质 | |
CN114385620A (zh) | 数据处理方法、装置、设备及可读存储介质 | |
CN114265981A (zh) | 推荐词确定方法、装置、设备及存储介质 | |
CN107451280B (zh) | 数据打通方法、装置及电子设备 | |
CN116450890A (zh) | 图数据处理方法、装置、系统、电子设备及存储介质 | |
CN112818431B (zh) | 一种全过程工程咨询方法及系统 | |
CN113779269A (zh) | 电网负荷数据的展示方法、装置、电子设备及存储介质 | |
JP5980723B2 (ja) | 緊急時ノウハウ参照支援方法、緊急時ノウハウ参照支援装置、及び緊急時ノウハウ参照支援プログラム | |
CN116226082A (zh) | 数据库模型的生成方法、装置、存储介质及电子设备 | |
CN111897894A (zh) | Poi检索热度确定方法、装置、设备及存储介质 | |
CN112860725A (zh) | Sql自动生成方法和装置、存储介质及电子设备 | |
CN112989769A (zh) | 一种基于表单引擎构建多数据源表单的方法、装置及平台 | |
CN116932488B (zh) | 基于知识图谱的课件生成方法、装置、系统和存储介质 | |
Farooq et al. | Smartphone based interface for epidemic surveillance system | |
CN109189984B (zh) | 用于显示信息的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |