CN114741392A - 数据查询方法、装置、电子设备及存储介质 - Google Patents

数据查询方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114741392A
CN114741392A CN202210390564.5A CN202210390564A CN114741392A CN 114741392 A CN114741392 A CN 114741392A CN 202210390564 A CN202210390564 A CN 202210390564A CN 114741392 A CN114741392 A CN 114741392A
Authority
CN
China
Prior art keywords
query
target
data
fields
meta
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210390564.5A
Other languages
English (en)
Inventor
贺玉英
姜磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202210390564.5A priority Critical patent/CN114741392A/zh
Publication of CN114741392A publication Critical patent/CN114741392A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • G06F16/24558Binary matching operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26Visual data mining; Browsing structured data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种数据查询方法、装置、电子设备及存储介质,该方法包括:响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。本公开实施例,通过确定目标数据表,可以缩小数据查询的范围,进而提升数据查询的效率。

Description

数据查询方法、装置、电子设备及存储介质
技术领域
本公开涉及计算机技术领域,具体而言,涉及一种数据查询方法、数据查询装置、电子设备以及计算机可读存储介质。
背景技术
在数据分析的过程中,经常需要对多种类别数据进行同时分析,因此,为了便于数据的管理和分析,通常采用数据表的形式对数据进行存储。然而,由于数据表中的数据体量较大,进而会对数据查询的效率产生影响,导致用户查询数据的时间成本较高。
发明内容
本公开实施例至少提供一种数据查询方法、数据查询装置、电子设备以及计算机可读存储介质,可以缩小数据查询的范围,进而提升数据查询的效率。
本公开实施例提供了一种数据查询方法,包括:
响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;
基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;
基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
本公开实施例中,基于查询配置信息,从预设的元信息库中确定目标字段,并基于目标字段生成目标数据表,也即,元信息库中的数据较多,通过从元信息库中确定需要分析的字段形成目标数据表,然后基于目标数据表进行数据查询,这样,对于元信息库中的无需进行分析的字段则无需进行查询,如此,可以缩小数据查询的范围,有利于节约查询时间,进而提升数据查询的效率。
此外,还可以响应于用户的查询请求,获取查询配置信息,也即,无需预先获取用户的查询需求,可以实现对用户的查询请求的动态识别,有利于提高数据查询的实时性。
一种可选的实施方式中,所述目标字段的数量为至少两个,所述元信息库中的多个字段中至少存在部分字段对应不同的数据表,且所述不同的数据表之间存在预设的关联关系;所述基于所述目标字段,生成目标数据表,包括:
确定不同的目标字段分别对应的第一数据表;
基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表。
本公开实施例中,由于元信息库中至少存在部分字段对应不同的数据表,并且不同数据表之间存在预设的关联关系,也即,基于目标字段以及预设的第一数据表之间的关联关系,针对当前的查询任务,可以自动访问到所涉及到的第一数据表,进而实现第一数据表的动态组合,生成目标数据表。
一种可选的实施方式中,所述基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表,包括:
从所述第一数据表中确定第一子表以及第二子表,其中,所述第二子表为所述第一数据表中除所述第一子表之外的其他第一数据表;
根据所述第一子表与所述第二子表之间的关联关系,将所述第二子表中的目标字段与所述第一子表组合,生成所述目标数据表。
本公开实施例中,通过将第二子表中的目标字段与第一子表进行组合,生成目标数据表,也即,无需对第一子表进行目标字段的筛选,有利于节约筛选的时间,如此,可以提升组合的效率。
一种可选的实施方式中,所述基于所述查询配置信息,从预设的元信息库中确定目标字段,包括:
对所述查询标的以及所述筛选条件进行解析,得到解析结果;
基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段。
本公开实施例中,通过对查询标的以及筛选条件进行解析得到的解析结果,从元信息库中确定与解析结果匹配的字段,也即,对对解析结果进行遍历,得到目标字段,可以减少目标字段被遗漏的情况发生,进而提高确定目标字段的准确性。
一种可选的实施方式中,所述对所述查询标的以及所述筛选条件进行解析,得到解析结果,包括:
分别对所述查询标的以及所述筛选条件进行拆解,得到与所述查询标的对应的第一字符串以及与所述筛选条件对应的第二字符串;
所述基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段,包括:
基于所述第一字符串以及所述第二字符串,从所述元信息库中的多个字段中确定所述目标字段。
本公开实施例中,通过对解析结果进行拆解,得到第一字符串以及第二字符串,并基于第一字符串以及第二字符串确定目标字段,也即,通过对解析结果中的字符串进行遍历,得到目标字段,可以提高确定目标字段的准确度。
一种可选的实施方式中,所述响应于用户的查询请求,获取查询配置信息之前,所述方法还包括:
获取多个字段,并基于所述多个字段构建所述元信息库。
本公开实施例中,基于预先获取的多个字段构建元信息库,如此,可以实现实时的响应于查询请求对数据进行查询,并且,在新增字段的情况下,只需要将新的字段存储至元信息库中即可,有利于提升查询的效率。
一种可选的实施方式中,所述方法还包括:
将所述数据查询结果返回并展示。
本公开实施例中,还可以将数据查询结果返回并展示,也即,对数据查询结果进行可视化展示,有利于提升用户的使用体验。
本公开实施例还提供一种数据查询装置,所述装置包括:
获取模块,用于响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;
确定模块,用于基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;
生成模块,用于基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
一种可选的实施方式中,所述目标字段的数量为至少两个,所述元信息库中的多个字段中至少存在部分字段对应不同的数据表,且所述不同的数据表之间存在预设的关联关系;所述生成模块具体用于:
确定不同的目标字段分别对应的第一数据表;
基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表。
一种可选的实施方式中,所述生成模块具体用于:
从所述第一数据表中确定第一子表以及第二子表,其中,所述第二子表为所述第一数据表中除所述第一子表之外的其他第一数据表;
根据所述第一子表与所述第二子表之间的关联关系,将所述第二子表中的目标字段与所述第一子表组合,生成所述目标数据表。
一种可选的实施方式中,所述确定模块具体用于:
对所述查询标的以及所述筛选条件进行解析,得到解析结果;
基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段。
一种可选的实施方式中,所述确定模块具体用于:
分别对所述查询标的以及所述筛选条件进行拆解,得到与所述查询标的对应的第一字符串以及与所述筛选条件对应的第二字符串;
基于所述第一字符串以及所述第二字符串,从所述元信息库中的多个字段中确定所述目标字段。
一种可选的实施方式中,所述装置还包括构建模块,所述构建模块用于:
获取多个字段,并基于所述多个字段构建所述元信息库。
一种可选的实施方式中,所述装置还包括展示模块,所述展示模块用于:
将所述数据查询结果返回并展示。
本公开实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述数据查询方法。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述数据查询方法。
关于上述数据查询装置、电子设备、及计算机可读存储介质的效果描述参见上述数据查询方法的说明,这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种数据查询方法的执行主体的示意图;
图2为本公开实施例所提供的一种数据查询方法的流程图;
图3为本公开实施例所提供的一种配置界面的示意图;
图4为本公开实施例所提供的一种生成目标数据表方法的流程图;
图5为本公开实施例所提供的一种基于目标字段以及第一数据表之间的关联关系生成目标数据表的方法的流程图;
图6为本公开实施例所提供的另一种数据查询方法的流程图;
图7为本公开实施例所提供的一种数据查询装置的结构示意图;
图8为本公开实施例所提供的另一种数据查询装置的结构示意图;
图9为本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
在用户对数据进行分析的过程中,通常会对多种类别以及多个数据同时进行分析,例如,分析数据的过程中需要将需求数据以及关联需求的其他数据同时进行分析,因此,在查询数据时,面临着查询内容较多的问题。在相关技术中,通常通过以下几种方式实现数据的查询。
(1)定制化开发的查询方式。该方式需要预先确定用户所要分析的数据内容,然后根据需要分析的数据内容,定制开发查询代码来查询相关的数据。然而,基于此种查询方式,针对不同的查询需求需要定制不同的查询代码,需要耗费大量的开发成本(例如人力成本和时间成本),其次,由于用户的查询需求是预先确定的,在当前查询的内容超出预先确定的查询范围,则需要对查询代码进行重新开发,如此,会造成大量的开发资源的浪费。
(2)大宽表的查询方式。该方式是将需要分析的相关数据表全部存储至同一张数据表中,然后在该数据表中实现数据查询,也即,即使存在不需要分析的数据表,也会将其整合至同一张数据表中,如此,在查询的过程中,针对不相关的数据也会进行查询,进而影响查询的效率。
(3)自定义的查询方式。该方式也是通过预先确定用户的查询需求,然后将相关的数据表进行关联,生成一张新的数据表,如此,可以基于新的数据表实现用户的查询需求。然而,在用户的查询需求存在变化的情况下,此种方式无法实时的根据用户的需求的变化而做出响应,进而影响查询的效率以及用户的体验。
基于上述研究,本公开实施例提供了一种数据查询方法,该方法包括响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
本公开实施例中,基于查询配置信息,从预设的元信息库中确定目标字段,并基于目标字段生成目标数据表,也即,元信息库中的数据较多,通过从元信息库中确定需要分析的字段形成目标数据表,然后基于目标数据表进行数据查询,这样,对于元信息库中的无需进行分析的字段则无需进行查询,如此,可以缩小数据查询的范围,进而提升数据查询的效率。
此外,还可以响应于用户的查询请求,获取查询配置信息,也即,无需预先获取用户的查询需求,可以实现对用户的查询请求的动态识别,有利于提高数据查询的实时性。
请参阅图1,为本公开实施例所提供的一种数据查询方法的执行主体的示意图,如图1中所示,该方法的执行主体为电子设备100,电子设备100包括服务端10以及终端,其中,服务端10可以是独立的物理服务端,也可以是多个物理服务端构成的服务端集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云存储、大数据和人工智能平台等基础云计算服务的云服务端。在一些实施方式中,该方法还可应用于由终端和服务端10所组成的实施环境中。
终端可以是图1中示出的智能手机20、台式计算机30或者笔记本电脑40等,还可以是图1中未示出的平板电脑、智能音箱、智能手表等,并不限定。
需要说明的是,在一些实施方式中,服务端10可以通过网络50分别与智能手机20、台式计算机30及笔记本电脑40进行通信。网络50可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
可选的,该数据查询方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
请参阅图2,图2为本公开实施例所提供的一种数据查询方法的流程图。如图2所示,本公开实施例提供的一种数据查询方法包括以下S101~S103:
S101,响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件。
其中,所述查询标的是指用户所需要查询的具体内容,筛选条件是指对用户需要查询查询的内容的限定条件。
示例性地,请参见图3,为本公开实施例所提供的一种配置界面的示意图,如图3中所示,配置界面中包括查询标的以及筛选条件的选择框,用户可以分别从菜单栏中确定需要查询的查询标的以及筛选条件,例如,用户可以将“事故总数”拖拽至查询标的选择框中,将“是否保密=0”拖拽至筛选条件的选择框中,如此,即可生成查询请求。
在一些实施方式中,所述配置界面中还可以包括查询维度,其中,查询维度可以是指在不同维度下的查询标的示例性地,针对“事故总数”,可以在查询维度的选择框中选择“事故等级”,其中,“事故等级”中包括多个等级,如此,即可分别查询不同等级下的“事故总数”。示例性地,请再次参见图3,“事故等级”包括P0、P1、P2以及P3四个等级,在选择“事故等级”后,可以分别确定在P0等级下的“事故总数”、在P1等级下的“事故总数”、在P2等级下的“事故总数”以及在P3等级下的“事故总数”。
需要说明的是,本实施方式中的配置界面中的对于查询配置信息的名称均是示意性的,在其他实施方式中,还可以是其他名称。
S102,基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分。
其中,元信息库中包括多个字段,也即,可以预先获取多个字段,并基于多个字段生成元信息库,如此,即可根据查询配置信息,从元信息库中的多个字段中确定出目标字段。其中,所述多个字段中至少存在部分字段对应不同的数据表,且不同的数据表之间存在预设的关联关系。
示例性地,下面以数据表1和数据表2为例,对生成元信息库的过程进行详细说明。
数据表1
id Bug_id level
1 2 P0
2 4 P1
3 5 P2
数据表2
id Num_rd
1 4
2 4
4 5
上述数据表1和数据表2中包括多个字段的详细信息,其中,数据表1和数据表2之间的关联关系可以根据字段进行关联,例如,可以将表1中的bug_id与表2中的id进行关联,如此,即可得到数据表1和数据表2之间的关联关系,进而基于关联关系,将数据表1和数据表2中的多个字段注册至元信息库,可以得到如表3所示的元信息库。
表3
名称 SQL 类型 来源表
ID id 数据表基础字段 表1
BUG ID Bug_id 数据表基础字段 表1
等级 level 数据表基础字段 表1
ID Table2.id 数据表基础字段 表2
RD个数 Num_rd 数据表基础字段 表2
RD总数 Sum(num_rd) 查询标的
如表3中所示,元信息库中的所注册的字段信息是唯一的,例如,数据表1和数据表2中均包括id,因此,在对相同的表信息进行注册时,需要以别名代替,例如,数据表2中的id可以使用Table2.id进行代替。除此之外,表3中还会记录每个字段分别来源于哪个数据表。如此,在构建元信息库后,基于当前元信息库存储的字段,可以实时的响应于查询请求对任一字段进行查询,并且,在数据表中新增一种字段的情况下,若需要查询新的字段,只需要将相关字段存储至元信息库中即可,有利于提升查询的效率。
需要说明的是,表1、2以及表3中的字段内容以及字段数量仅是示意性的,在其他实施方式中,还可以是其他内容以及其他数量,在此不做限定。
在一种可选的实施方式中,由于查询配置信息包括查询标的和筛选条件,因此,在确定目标字段的过程中,可以对查询标的和筛选条件进行解析,得到与查询配置信息对应的解析结果,进而将解析结果与元信息库中的多个字段分别进行匹配,也即对分析结果进行遍历,从而可以确定与解析结果匹配的目标字段。如此,可以减少目标字段被遗漏的情况发生,进而提高确定目标字段的准确性。
具体的,在对查询标的和筛选条件进行解析的过程中,可以分别对查询标的和筛选条件进行拆解,得到与查询标的对应的第一字符串以及与筛选条件对应的第二字符串,然后将每个字符串与元信息库中的多个字段进行匹配,得到与每个字符串匹配的目标字段。如此,可以提高确定目标字段的准确度。
示例性地,查询标的“事故总数”所对应的底层代码逻辑表示为sum(num_rd),可以将其拆解成sum、(、num_rd、)四个字符串,筛选条件“事故等级”所对应的底层代码逻辑表示为level=’P0’,可以将其拆解成level、=、‘、P0、’,然后对字符串进行遍历,最终可以得到与字符串对应的目标字段。
其中,对于“sum”等聚合函数以及标点符号类的字符串能够自动识别,也即,对于此类字符串可以无需进行遍历,从而可以节约大量的匹配时间,有利于提升匹配的效率。
在一些实施方式中,若配置界面中包括查询维度,则在解析的过程中,也需要对查询维度进行解析,其中,对查询维度的解析的具体实施方式可以参照上述对查询标的以及筛选条件的解析描述内容,在此不做赘述。
S103,基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
可以理解,由于目标数据表是经过筛选后得到的,因此,目标数据表的范围相较于元信息库的查询范围是较小的。
本公开实施例中,基于查询配置信息,从预设的元信息库中确定目标字段,并基于目标字段生成目标数据表,也即,元信息库中的数据较多,通过从元信息库中确定需要分析的字段形成目标数据表,然后基于目标数据表进行数据查询,这样,对于元信息库中的无需进行分析的字段则无需进行查询,如此,可以缩小数据查询的范围,进而提升数据查询的效率。
此外,还可以响应于用户的查询请求,获取查询配置信息,也即,无需预先获取用户的查询需求,可以实现对用户的查询请求的动态识别,有利于提高数据查询的实时性。
在一些实施方式中,由于元信息库中的多个字段中至少存在部分字段对应不同的数据表,并且不同的数据表之间存在预设的关联关系,因此,在目标字段为至少两个的情况下,在基于所述目标字段,生成目标数据表时,请参见图4,可以包括以下S1031~S1032:
S1031,确定不同的目标字段分别对应的第一数据表。
S1032,基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表。
其中,不同的目标字段分别对应的第一数据表是指不同的目标字段的来源数据表。
由于在元信息库中,各个字段对应的数据表均是预先注册好的,因此,可以确定出不同的目标字段分别对应的第一数据表。例如,字段num_rd来自数据表2;字段level来自数据表1。
然后,可以基于目标字段分别对应的第一数据表之间的关联关系,将至少两个目标字段组织到一起,也即,可以基于预设关联关系,针对当前的查询请求,可以自动访问到所涉及到的第一数据表,进而实现第一数据表的动态组合,生成查询范围小的、新的数据表,也即目标数据表
可选的,在生成目标数据表时,可以对每个第一数据表进行筛选,也可以针对部分第一数据表进行筛选。若部分第一数据表被筛选,在基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表时,请参见图5,可以包括以下S10321~S10322:
S10321,从所述第一数据表中确定第一子表以及第二子表,其中,所述第二子表为所述第一数据表中除所述第一子表之外的其他第一数据表。
其中,第一子表的数量可以是一个,还可以是多个,在此不做限定。
可以理解,由于第一数据表的数量为至少两个,所以可以从第一数据表中确定第一子表,具体的,在从第一数据表中确定第一子表时,可以将包含目标字段数量较多的第一数据表确定为第一子表,还可以将任一第一数据表确定为第一子表,在此不做限定。
S10322,根据所述第一子表与所述第二子表之间的关联关系,将所述第二子表中的目标字段与所述第一子表组合,生成所述目标数据表。
可以理解,在确定第一子表以及第二子表后,若第一子表中的目标字段的数量较多,对于第一子表可以不进行筛选,只对第二子表进行筛选,然后将第二子表中的目标字段与第一子表进行组合,生成目标数据表。也即,对于目标字段数量较多的第一子表,无需对第一子表进行目标字段的筛选,有利于节约筛选的时间,如此,可以提升组合的效率。
在另一些实施方式中,还可以将每个第一数据表分别进行筛选所得到的目标字段组合,生成目标数据表,如此,可以使得目标数据表内的数据较少,进而使得数据查询的范围较小,有利于提升查询效率。
可以理解,通过上述数据查询方法,可以缩小查询的范围,用户可以基于目标数据表进行查询,得到数据查询结果,并向用户提供查询结果。请参见图6,为本公开实施例所提供的另一种数据查询方法的流程图,与图2中所示的数据查询方法不同的是,所述方法还包括S104:
S104,将所述数据查询结果返回并展示。
可以理解,由于数据查询结果为用户基于目标数据表所查询到的内容,为了便于用户对从数据查询结果进行分析,可以将数据查询结果发送至用户,并对数据查询结果进行展示。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与数据查询方法对应的数据查询装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述数据查询方法相似,因此装置的实施可以参阅方法的实施,重复之处不再赘述。
请参阅图7,为本公开实施例提供的一种数据查询装置的结构示意图,所述数据查询装置700包括:获取模块710、确定模块720以及生成模块730;其中,
获取模块710,用于响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;
确定模块720,用于基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;
生成模块730,用于基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
一种可选的实施方式中,所述目标字段的数量为至少两个,所述元信息库中的多个字段中至少存在部分字段对应不同的数据表,且所述不同的数据表之间存在预设的关联关系;所述生成模块730具体用于:
确定不同的目标字段分别对应的第一数据表;
基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表。
一种可选的实施方式中,所述生成模块730具体用于:
从所述第一数据表中确定第一子表以及第二子表,其中,所述第二子表为所述第一数据表中除所述第一子表之外的其他第一数据表;
根据所述第一子表与所述第二子表之间的关联关系,将所述第二子表中的目标字段与所述第一子表组合,生成所述目标数据表。
一种可选的实施方式中,所述确定模块720具体用于:
对所述查询标的以及所述筛选条件进行解析,得到解析结果;
基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段。
一种可选的实施方式中,所述确定模块720具体用于:
分别对所述查询标的以及所述筛选条件进行拆解,得到与所述查询标的对应的第一字符串以及与所述筛选条件对应的第二字符串;
基于所述第一字符串以及所述第二字符串,从所述元信息库中的多个字段中确定所述目标字段。
请参见图8,为本公开实施例所提供的另一种数据查询装置的示意图,如图8中所示,所述装置还包括构建模块740,所述构建模块740用于:
获取多个字段,并基于所述多个字段构建所述元信息库。
一种可选的实施方式中,所述装置还包括展示模块750,所述展示模块750用于:
将所述数据查询结果返回并展示。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
基于同一技术构思,本公开实施例还提供了一种电子设备。参照图9所示,为本公开实施例提供的电子设备900的结构示意图,包括处理器901、存储器902、和总线903。其中,存储器902用于存储执行指令,包括内存9021和外部存储器9022;这里的内存9021也称内存储器,用于暂时存放处理器901中的运算数据,以及与硬盘等外部存储器9022交换的数据,处理器901通过内存9021与外部存储器9022进行数据交换。
本申请实施例中,存储器902具体用于存储执行本申请方案的应用程序代码,并由处理器901来控制执行。也即,当电子设备900运行时,处理器901与存储器902之间通过总线903通信,使得处理器901执行存储器902中存储的应用程序代码,进而执行前述任一实施例中的方法。
处理器901可能是一种集成电路芯片,具有信号的处理能力。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(NetworkProcessor,NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本公开实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
其中,存储器902可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-Only Memory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备900的具体限定。在本申请另一些实施例中,电子设备900可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的数据查询方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的数据查询方法的步骤,具体可参阅上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和终端的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、终端和方法,可以通过其它的方式实现。以上所描述的终端实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机,服务端,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种数据查询方法,其特征在于,所述方法包括:
响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;
基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;
基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
2.根据权利要求1所述的方法,其特征在于,所述目标字段的数量为至少两个,所述元信息库中的多个字段中至少存在部分字段对应不同的数据表,且所述不同的数据表之间存在预设的关联关系;所述基于所述目标字段,生成目标数据表,包括:
确定不同的目标字段分别对应的第一数据表;
基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表。
3.根据权利要求2所述的方法,其特征在于,所述基于至少两个目标字段以及所述不同的目标字段分别对应的第一数据表之间的关联关系,生成所述目标数据表,包括:
从所述第一数据表中确定第一子表以及第二子表,其中,所述第二子表为所述第一数据表中除所述第一子表之外的其他第一数据表;
根据所述第一子表与所述第二子表之间的关联关系,将所述第二子表中的目标字段与所述第一子表组合,生成所述目标数据表。
4.根据权利要求1所述的方法,其特征在于,所述基于所述查询配置信息,从预设的元信息库中确定目标字段,包括:
对所述查询标的以及所述筛选条件进行解析,得到解析结果;
基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段。
5.根据权利要求4所述的方法,其特征在于,所述对所述查询标的以及所述筛选条件进行解析,得到解析结果,包括:
分别对所述查询标的以及所述筛选条件进行拆解,得到与所述查询标的对应的第一字符串以及与所述筛选条件对应的第二字符串;
所述基于所述解析结果,从所述元信息库中的多个字段中确定与所述解析结果匹配的字段,得到所述目标字段,包括:
基于所述第一字符串以及所述第二字符串,从所述元信息库中的多个字段中确定所述目标字段。
6.根据权利要求1所述的方法,其特征在于,所述响应于用户的查询请求,获取查询配置信息之前,所述方法还包括:
获取多个字段,并基于所述多个字段构建所述元信息库。
7.根据权利要求1-6任一所述的方法,其特征在于,所述方法还包括:
将所述数据查询结果返回并展示。
8.一种数据查询装置,其特征在于,包括:
获取模块,用于响应于用户的查询请求,获取查询配置信息,所述查询配置信息至少包括查询标的以及用于对所述查询标的进行限定的筛选条件;
确定模块,用于基于所述查询配置信息,从预设的元信息库中确定目标字段,所述元信息库包括多个字段,所述目标字段为所述多个字段中的至少部分;
生成模块,用于基于所述目标字段,生成目标数据表,并在所述目标数据表中进行数据查询,得到数据查询结果。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述电子设备运行时,所述处理器与所述存储器之间通过所述总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7任意一项所述的数据查询方法。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7任意一项所述的数据查询方法。
CN202210390564.5A 2022-04-14 2022-04-14 数据查询方法、装置、电子设备及存储介质 Pending CN114741392A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210390564.5A CN114741392A (zh) 2022-04-14 2022-04-14 数据查询方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210390564.5A CN114741392A (zh) 2022-04-14 2022-04-14 数据查询方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114741392A true CN114741392A (zh) 2022-07-12

Family

ID=82281431

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210390564.5A Pending CN114741392A (zh) 2022-04-14 2022-04-14 数据查询方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114741392A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117235190A (zh) * 2023-09-05 2023-12-15 上海异工同智信息科技有限公司 一种数据表生成方法及装置
CN117648338A (zh) * 2024-01-29 2024-03-05 卡奥斯化智物联科技(青岛)有限公司 一种时空数据范围索引过滤优化方法、装置、设备及介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117235190A (zh) * 2023-09-05 2023-12-15 上海异工同智信息科技有限公司 一种数据表生成方法及装置
CN117648338A (zh) * 2024-01-29 2024-03-05 卡奥斯化智物联科技(青岛)有限公司 一种时空数据范围索引过滤优化方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
US9152662B2 (en) Data quality analysis
CN110795455A (zh) 依赖关系解析方法、电子装置、计算机设备及可读存储介质
CN109284323B (zh) 检测数据的管理方法及装置
CN114741392A (zh) 数据查询方法、装置、电子设备及存储介质
CN112052138A (zh) 业务数据质量检测方法、装置、计算机设备及存储介质
CN111506559A (zh) 数据存储方法、装置、电子设备及存储介质
CN111177134A (zh) 适用于海量数据的数据质量分析方法、装置、终端及介质
CN111414410A (zh) 数据处理方法、装置、设备和存储介质
CN114461644A (zh) 一种数据采集方法、装置、电子设备及存储介质
CN115905630A (zh) 一种图数据库查询方法、装置、设备及存储介质
CN116719822B (zh) 一种海量结构化数据的存储方法及系统
CN113553341A (zh) 多维数据分析方法、装置、设备及计算机可读存储介质
CN112069269B (zh) 基于大数据和多维特征的数据溯源方法及大数据云服务器
US11227288B1 (en) Systems and methods for integration of disparate data feeds for unified data monitoring
CN110362540B (zh) 一种数据存储、访客数获取方法及装置
CN110704635B (zh) 一种知识图谱中三元组数据的转换方法及装置
CN113760891A (zh) 一种数据表的生成方法、装置、设备和存储介质
CN111858617A (zh) 用户查找方法和装置、计算机可读存储介质、电子设备
CN111143433A (zh) 一种统计数据仓数据的方法及装置
CN110874365A (zh) 一种信息查询方法及其相关设备
CN116228374A (zh) 物流行业市场单量数据预警方法、装置、设备及存储介质
CN110543426A (zh) 一种软件性能风险检测方法及装置
CN116089490A (zh) 数据分析方法、装置、终端和存储介质
CN114860759A (zh) 一种数据处理方法、装置、设备及可读存储介质
CN111581213B (zh) 信息记录方法、装置、以及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant after: Douyin Vision Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant before: Tiktok vision (Beijing) Co.,Ltd.

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant after: Tiktok vision (Beijing) Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Applicant before: BEIJING BYTEDANCE NETWORK TECHNOLOGY Co.,Ltd.