CN109947788B - 数据查询方法和装置 - Google Patents

数据查询方法和装置 Download PDF

Info

Publication number
CN109947788B
CN109947788B CN201711042305.9A CN201711042305A CN109947788B CN 109947788 B CN109947788 B CN 109947788B CN 201711042305 A CN201711042305 A CN 201711042305A CN 109947788 B CN109947788 B CN 109947788B
Authority
CN
China
Prior art keywords
attribute
splicing
data query
sql
rule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711042305.9A
Other languages
English (en)
Other versions
CN109947788A (zh
Inventor
杨帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201711042305.9A priority Critical patent/CN109947788B/zh
Publication of CN109947788A publication Critical patent/CN109947788A/zh
Application granted granted Critical
Publication of CN109947788B publication Critical patent/CN109947788B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据查询方法和装置,涉及计算机技术领域。其中,该方法包括:接收数据查询任务;根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句;根据所述SQL语句查询数据库中的标签表,以获取查询结果。通过以上步骤,能够在服务端动态地生成SQL语句,不需要在前端嵌入固定的SQL代码,降低了数据查询系统前、后端的耦合度。

Description

数据查询方法和装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据查询方法和装置。
背景技术
在互联网营销逐渐占据主流的时代,明确产品定位、优化用户体验、精准投放广告,以及衡量用户价值等都与确定营销的目标受众密切相关。而能否快速响应选人需求、能否便捷扩展选人模型是衡量选人系统优劣的关键指标。
现有选人系统一般由前端界面和后端表组成。前端界面一般是可供需求方个性化选择属性的配置界面,用以限制查询条件。后端表是一张带有各种属性标签的巨大宽表,具有数据量大、属性繁多等特点。在现有的选人系统中,用于生成查询SQL(结构化查询语言)的代码是由开发人员以硬编码方式嵌入前端。当需求者提交属性选取列表之后,前端会根据需求者选中的属性及属性值生成查询SQL,然后将查询SQL提交至后端。当后端接收到前端的查询SQL时,执行相应的SQL语句,并向前端返回查询结果。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
第一、强耦合。在现有选人系统中,用于生成查询SQL的代码是事先固定嵌入前端的,系统前后端的耦合性极高,不便于数据开发人员修改查询SQL的代码。
第二、高延迟。现有选人系统的后端表是一张巨大宽表,数据量非常大。当用户选择的属性较多时,通过SQL语句查询这样一张巨大宽表,耗时很长,数据库的压力也很大。因此,现有选人系统响应速度很慢,用户体验较差。
发明内容
有鉴于此,本发明实施例提供一种数据查询方法和装置,以能够动态生成SQL语句,降低数据查询系统(比如选人系统)前、后端的耦合度。进一步,本发明实施例的数据查询方法和装置能够提高数据查询系统的响应速度,提高用户体验。
为实现上述目的,根据本发明的一个方面,提供了一种数据查询方法。
本发明的数据查询方法包括:接收数据查询任务;根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句;根据所述SQL语句查询数据库中的标签表,以获取查询结果。
可选地,所述数据查询任务包括:选取的属性及其属性值;所述属性配置表包括:标签表名、属性名、属性类型、拼接逻辑词;所述拼接规则包括:第一拼接规则和第二拼接规则;所述根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句的步骤包括:从所述属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;根据所述属性类型和第一拼接规则将所述选取的属性与其属性值进行拼接,以得到条件;根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句;将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成SQL语句。
可选地,所述第一拼接规则包括:当属性类型为“选择”时,属性与属性值的拼接关键词为“IN”;当属性类型为“范围”时,属性与属性值的拼接关键词为“BETWEEN AND”。
可选地,所述第二拼接规则包括:优先将预设的逻辑为真的条件与所有拼接逻辑词为“AND”的属性的所述条件拼接在一起,以构成由拼接逻辑词“AND”拼接的条件整体;将预设的逻辑为假的条件与所有拼接逻辑词为“OR”的属性的所述条件拼接在一起,以构成由拼接逻辑词“OR”拼接的条件整体;将所述由拼接逻辑词“OR”拼接的条件整体通过拼接关键词“AND”拼接在所述由拼接逻辑词“AND”拼接的条件整体的后面。
可选地,所述根据所述SQL语句查询数据库中的标签表的步骤包括:在与所述数据查询任务对应的SQL语句为多个时,根据所有SQL语句并行地查询数据库中的多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果。
可选地,在所述根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句的步骤之前,所述方法还包括:从所述属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式。
可选地,所述预设的写入规则包括:当属性的属性类型为“选择”时,将该属性对应的属性值写入存储表的“开始值”字段;当属性的属性类型为“范围”时,将该属性的左边界值写入存储表的“开始值”字段,将该属性的右边界值写入存储表的“结束值”字段。
可选地,在所述接收数据查询任务的步骤之前,所述方法还包括:在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性。
为实现上述目的,根据本发明的另一方面,提供了一种数据查询装置。
本发明的数据查询装置包括:接收模块,用于接收数据查询任务;拼装模块,用于根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句;查询模块,用于根据所述SQL语句查询数据库中的标签表,以获取查询结果。
可选地,所述数据查询任务包括:选取的属性及其属性值;所述属性配置表包括:标签表名、属性名、属性类型、拼接逻辑词;所述拼接规则包括:第一拼接规则和第二拼接规则;所述拼装模块根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句包括:所述拼装模块从属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;所述拼装模块根据所述属性类型和第一拼接规则将所述选取的属性与其属性值进行拼接,以得到条件;所述拼装模块根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句;所述拼装模块将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成SQL语句。
可选地,所述查询模块根据所述SQL语句查询数据库中的标签表包括:在与所述数据查询任务对应的SQL语句为多个时,所述查询模块根据所有SQL语句并行地查询数据库中的多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果。
可选地,所述装置还包括:写入模块,用于从所述属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式。
可选地,所述装置还包括:读取模块,用于在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性。
为实现上述目的,根据本发明实施例的再一个方面,提供了一种服务器。
本发明实施例的服务器,包括:一个或多个处理器;以及,存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例的数据查询方法。
为实现上述目的,根据本发明实施例的又一个方面,提供了一种计算机可读介质。
本发明实施例的计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例的数据查询方法。
上述发明中的一个实施例具有如下优点或有益效果:在本发明实施例中,通过在后端预先设置属性配置表和拼接规则,并在接收数据查询任务之后,根据属性配置表以及拼接规则拼装与所述数据查询任务对应的SQL语句,能够动态地生成SQL语句,从而无需在数据查询系统的前端嵌入固定的SQL代码,降低了系统前、后端的耦合性。进一步,通过生成的多个SQL语句并行地查询多张标签表,能够节省查询时间、提高数据查询系统的响应速度,提高用户体验。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明一个实施例的数据查询方法的主要步骤示意图;
图2是根据本发明另一实施例的数据查询方法的主要步骤示意图;
图3是根据本发明一个实施例的数据查询装置的主要模块示意图;
图4是根据本发明另一实施例的数据查询装置的主要模块示意图;
图5是本发明实施例可以应用于其中的示例性系统架构图;
图6是适于用来实现本发明实施例的服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
需要指出的是,在不冲突的情况下,本发明中的实施例以及实施例中的特征可以相互组合。
图1是根据本发明一个实施例的数据查询方法的主要步骤示意图。本发明实施例的数据查询方法可由后端(服务端)执行。如图1所示,本发明实施例的数据查询方法包括:
步骤S101、接收数据查询任务。
具体实施时,使用者可通过前端(终端设备)查询界面选取查询操作所需限制的属性、以及设置属性值。在使用者点击“提交”按钮后,前端将数据查询任务发送至后端。其中,所述数据查询任务包括:选取的属性及其属性值。例如,在为确定广告营销的目标受众时,某一使用者基于选人系统的前端查询界面提交的数据查询任务包括:基础行为模块中的grd_lvl(grade_level的缩写,会员等级)属性、age(年龄)属性和sex(性别)属性,以及购买行为模块中的order_num(下单量)属性和order_amt(下单金额)属性,以及各个属性的属性值。
步骤S102、根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句。
其中,所述属性配置表用于存储前端查询界面所能展示的所有属性的配置信息,可包括:标签表名、属性名、每个属性对应的属性类型、每个属性对应的拼接逻辑词。所述拼接规则包括拼接SQL语句所遵循的所有规则,可包括:对于具有不同属性类型的属性,规定了其与属性值进行拼接所用的拼接关键词;对于具有不同拼接逻辑词的属性构成的条件,规定了各条件进行拼接的规则。
其中,步骤S102的一种可选实施方式包括:根据数据查询任务所包括的属性查询属性配置表,以获取与其对应的属性配置信息;然后,将所述对应的属性配置信息和预设的拼接规则进行关联,以将属性与属性值拼接成条件,再将各条件拼接成WHERE子句;接下来,将所述WHERE子句和SELECT子句、FROM子句进行拼接,以得到用于查询一张标签表的SQL语句。具体实施时,所述数据查询任务对应的SQL语句可能为一个(即只查询一张标签表中的数据),也可能为多个(即查询多张标签表中的数据)。
步骤S103、根据所述SQL语句查询数据库中的标签表,以获取查询结果。
具体实施时,为了提高数据查询速度,可在数据库中存储多张标签表。并且,在与所述数据查询任务对应的SQL语句为多个时,可根据所有SQL语句并行地查询多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果,并将所述综合查询结果返回至数据查询系统的前端(终端设备)。
在本发明实施例中,通过预先设置属性配置表和拼接规则,并在接收数据查询任务之后,根据属性配置表以及拼接规则拼装与所述数据查询任务对应的SQL语句,能够动态地生成SQL语句,从而无需在前端嵌入固定的SQL代码,降低了数据查询系统前、后端的耦合性。进一步,在生成多个SQL语句时,通过并行地查询多张标签表,能够节省查询时间、提高数据查询系统的响应速度,提高用户体验。
图2是根据本发明另一实施例的数据查询方法的主要步骤示意图。本发明实施例的数据查询方法可由服务端执行。如图2所示,本发明实施例的数据查询方法包括:
步骤S201、接收数据查询任务。
其中,所述数据查询任务包括:选取的属性及其属性值。进一步,在步骤S201之前,本发明实施例的数据查询方法还包括:在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性。
其中,所述属性配置表包括:数据查询系统的所有展示模块名、各展示模块对应的标签表名、各展示模块包括的所有属性名。另外,所述属性配置表还包括:各属性的属性类型和各属性的拼接逻辑词、以及各属性的属性含义等字段信息。所述属性类型包括:选择类型、范围类型;所述拼接逻辑词包括:AND、OR。具体实施时,展示模块与标签表的对应关系可以为一对一,也可以为多对一。例如,在为确定广告营销的目标受众时,选人系统的前端查询界面包括:基础行为模块、购买行为模块;数据库包括:标签表lab1、标签表lab2。并且,基础行为模块与标签表lab1对应,购买行为模块与标签表lab2对应。
在本发明实施例中,通过将数据查询系统的所有属性存储于后端的属性配置表中,并在后端接收到前端的属性获取请求时读取属性配置表,便于前端动态地获取待展示的属性,进而根据获取的属性动态地生成前端查询界面,降低了数据查询系统前、后端的耦合度。当开发人员需要修改或删除某个属性时,只需修改后端的属性配置表,无需修改前端代码,使得系统的迭代操作更加便捷,迭代效率得到提高。
步骤S202、从属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式。
其中,所述写入规则包括:当数据查询任务中的一属性的属性类型为“选择”类型时,将该属性对应的属性值写入存储表的“开始值”字段;当一属性的属性类型为“范围”类型时,将该属性的左边界值写入存储表的“开始值”字段,并将该属性的右边界值写入存储表的“结束值”字段。另外,所述写入规则还包括:对于为“范围”类型的属性,若用户未限制该属性的左边界值,则将左边界默认值写入存储表中的“开始值”字段;若用户未限制该属性的右边界值,则将右边界默认值写入存储表中的“结束值”字段。
通过步骤S202得到了用于存储符合SQL拼接要求的属性值的存储表。所述存储表可包括:任务标识、模块名、属性名、开始值、结束值这些字段信息。这样一来,在进行SQL语句拼接时,可以直接使用所述存储表中的属性值,方便进行SQL拼接。示例性的,当数据查询系统为广告营销中的目标用户查询系统时,属性配置表可如表1所示,根据步骤S202得到的存储表可如表2所示。
表1
模块名 标签表名 属性名 属性含义 属性类型 拼接逻辑词
基础行为 lab1 grd_lvl 会员等级 选择 AND
基础行为 lab1 age 年龄 范围 OR
基础行为 lab1 sex 性别 选择 OR
基础行为 lab1 log_date 登录日期 范围 AND
购买行为 lab2 order_num 下单量 范围 AND
购买行为 lab2 order_amt 下单金额 范围 AND
表2
任务标识 模块名 属性名 开始值 结束值
149690 基础行为 grd_lvl 1,2,3
149690 基础行为 age 18 30
149690 基础行为 sex ‘f’
149690 基础行为 log_date date‘2017-01-01’ date‘2017-01-10’
需要指出的是,表1是对属性配置表的示例性说明,表2仅示出了与任务标识为149690的数据查询任务对应的属性值存储信息。在具体实施时,本领域技术人员可根据实际需求对属性配置表、存储表所包括的字段内容做出调整。
步骤S203、从属性配置表中获取与所述选取的属性所对应的标签表名,并基于所述标签表名构建FROM子句。
示例性的,如表1所示,当数据查询任务包括基础行为模块中的属性时,与该模块中的属性对应的标签表名为“lab1”,针对该标签表构建的FROM子句为:FROM lab1。当数据查询任务包括购买行为模块中的属性时,与该模块中的属性对应的标签表名为“lab2”,针对该标签表构建的FROM子句为:FROM lab2。
步骤S204、从所述属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;根据所述属性类型和第一拼接规则将所述选取的属性与其属性值进行拼接,以得到条件。
其中,第一拼接规则包括:当属性类型为“选择”时,用“IN”将属性名与属性值进行拼接,以拼接成一个条件;当属性类型为“范围”时,用“BETWEEN AND”将属性名和属性值进行拼接,拼接成一个条件。
步骤S205、根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句。
其中、第二拼接规则包括:优先将预设的逻辑为真的条件(例如,“1=1”这一条件)与所有拼接逻辑词为“AND”的属性的所述条件拼接在一起,以构成由拼接逻辑词“AND”拼接的条件整体;将预设的逻辑为假的条件(例如,“1=2”这一条件)与所有拼接逻辑词为“OR”的属性的所述条件拼接在一起,以构成由拼接逻辑词“OR”拼接的条件整体;将所述由拼接逻辑词“OR”拼接的条件整体通过拼接关键词“AND”拼接在所述由拼接逻辑词“AND”拼接的条件整体的后面。
步骤S206、将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成SQL语句。
其中,所述SELECT子句可根据数据查询任务的目的确定。例如,当数据查询系统为广告营销中的目标用户查询系统时,数据查询任务的目的是查询目标用户,因此,构建的SELECT子句为:SELECTuser_id。示例性的,当数据查询系统为广告营销中的目标用户查询系统时,通过步骤S203至步骤S206构建的用于查询某一标签表的SQL语句为:
Figure BDA0001450860220000121
步骤S207、在与所述数据查询任务对应的SQL语句为多个时,根据所有SQL语句并行地查询数据库中的多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果。
在该步骤中,根据所有SQL语句的逻辑关系确定各标签表的综合查询结果可包括:若各SQL语句的逻辑关系为“AND”,则可对各标签表的查询结果取交集,并将所述交集作为最终的综合查询结果;若各SQL语句的逻辑关系为“OR”,则可对各标签表的查询结果取并集,并将所述并集作为最终的综合查询结果。
步骤S208、将综合查询结果返回至前端。
在本发明实施例中,通过以上步骤能够动态地生成SQL语句,并根据生成的各SQL语句并行地查询多张标签表,不仅降低了前、后端的耦合性,而且能够节省查询时间、提高数据查询系统的响应速度,提高用户体验。进一步,在接收到前端的属性获取请求时,读取属性配置表,以使前端动态生成包括多个展示模块的前端查询界面,进一步降低了系统前、后端的耦合度。
图3是根据本发明一个实施例的数据查询装置的主要模块示意图。通常,数据查询系统包括:前端(终端设备)、后端(服务端)。本发明实施例的数据查询装置设置在服务端。如图3所示,本发明实施例的数据查询装置300包括:接收模块301、拼装模块302、查询模块303。
接收模块301,用于接收数据查询任务。
具体实施时,使用者可通过前端(终端设备)查询界面选取查询操作所需限制的属性、以及设置属性值。在使用者点击“提交”按钮后,前端将数据查询任务发送至后端。其中,接收模块301接收的所述数据查询任务包括:选取的属性及其属性值。例如,在为确定广告营销的目标受众时,某一使用者基于选人系统的前端查询界面提交的数据查询任务包括:grd_lvl(会员等级)属性、age(年龄)属性和sex(性别)属性,以及各个属性的属性值。
拼装模块302,用于根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句。
其中,所述属性配置表用于存储前端查询界面所能展示的所有属性的配置信息,可包括:标签表名、属性名、每个属性对应的属性类型、每个属性对应的拼接逻辑词。所述拼接规则包括拼接SQL语句所遵循的所有规则,可包括:对于具有不同属性类型的属性,规定了其与属性值进行拼接所用的拼接关键词;对于具有不同拼接逻辑词的属性构成的条件,规定了各条件进行拼接的规则。
其中,拼装模块302拼装SQL语句的一种可选实施方式包括:拼装模块302根据数据查询任务所包括的属性查询属性配置表,以获取与其对应的属性配置信息;然后,拼装模块302将所述对应的属性配置信息和预设的拼接规则进行关联,以将属性与属性值拼接成条件,再将各条件拼接成WHERE子句;接下来,拼装模块302将所述WHERE子句和SELECT子句、FROM子句进行拼接,以得到用于查询一张标签表的SQL语句。具体实施时,拼装模块302生成的与所述数据查询任务对应的SQL语句可能为一个(即只查询一张标签表中的数据),也可能为多个(即查询多张标签表中的数据)。
查询模块303,用于根据所述SQL语句查询数据库中的标签表,以获取查询结果。
具体实施时,为了提高数据查询速度,可在数据库中存储多张标签表。并且,在与所述数据查询任务对应的SQL语句为多个时,查询模块303可根据所有SQL语句并行地查询数据库中的多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果,并将所述综合查询结果返回至前端。
在本发明实施例中,通过接收模块接收数据查询任务,通过拼装模块拼装与所述数据查询任务对应的SQL语句,能够动态地生成SQL语句,从而无需在前端嵌入固定的SQL代码,降低了数据查询系统前、后端的耦合性。进一步,通过查询模块并行地查询多张标签表,能够节省查询时间、提高数据查询系统的响应速度,提高用户体验。
图4是根据本发明另一实施例的数据查询装置的主要模块示意图。本发明实施例的数据查询装置可设置在服务端。如图4所示,本发明实施例的数据查询装置400包括:接收模块401、写入模块402、拼装模块403、查询模块404。
接收模块401,用于接收数据查询任务。其中,所述数据查询任务包括:选取的属性及其属性值。
写入模块402,用于从属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式。
其中,所述属性配置表包括:数据查询系统的所有展示模块名、各展示模块对应的标签表名、各展示模块所包括的所有属性名、各属性的属性类型和拼接逻辑词。所述属性类型包括:选择类型、范围类型;所述拼接逻辑词包括:AND、OR。
其中,写入模块402所依据的所述写入规则包括:当数据查询任务中的一属性的属性类型为“选择”类型时,将该属性对应的属性值写入存储表的“开始值”字段;当一属性的属性类型为“范围”类型时,将该属性的左边界值写入存储表的“开始值”字段,并将该属性的右边界值写入存储表的“结束值”字段。另外,所述写入规则还包括:对于为“范围”类型的属性,若用户未限制该属性的左边界值,则将左边界默认值写入存储表中的“开始值”字段;若用户未限制该属性的右边界值,则将右边界默认值写入存储表中的“结束值”字段。
在本发明实施例中,通过设置写入模块402,得到了用于存储符合SQL拼接要求的属性值的存储表。所述存储表可包括:任务标识、模块名、属性名、开始值、结束值这些字段信息。这样一来,在进行SQL语句拼接时,可以直接使用所述存储表中的属性值,方便进行SQL拼接。
拼装模块403,用于根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句,具体包括:
拼装模块403,用于从属性配置表中获取与所述选取的属性所对应的标签表名,并基于所述标签表名构建FROM子句。
示例性的,如表1所示,当数据查询任务包括基础行为模块中的属性时,与该模块中的属性对应的标签表名为“lab1”,拼装模块403针对该标签表构建的FROM子句为:FROMlab1。当数据查询任务包括购买行为模块中的属性时,与该模块中的属性对应的标签表名为“lab2”,拼装模块403针对该标签表构建的FROM子句为:FROM lab2。
拼装模块403,还用于从所述属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;并根据所述属性类型和第一拼接规则将所述选取的属性与其属性值进行拼接,以得到条件。
其中,拼装模块403所依据的第一拼接规则包括:当属性类型为“选择”时,用“IN”将属性名与属性值进行拼接,以拼接成一个条件;当属性类型为“范围”时,用“BETWEENAND”将属性名和属性值进行拼接,拼接成一个条件。
拼装模块403,还用于根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句。
其中、第二拼接规则包括:优先将预设的逻辑为真的条件(例如,“1=1”这一条件)与所有拼接逻辑词为“AND”的属性的所述条件拼接在一起,以构成由拼接逻辑词“AND”拼接的条件整体;将预设的逻辑为假的条件(例如,“1=2”这一条件)与所有拼接逻辑词为“OR”的属性的所述条件拼接在一起,以构成由拼接逻辑词“OR”拼接的条件整体;将所述由拼接逻辑词“OR”拼接的条件整体通过拼接关键词“AND”拼接在所述由拼接逻辑词“AND”拼接的条件整体的后面。
拼装模块403,还用于将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成SQL语句。
其中,所述SELECT子句可由拼装模块403根据数据查询任务的目的确定。例如,当数据查询系统为广告营销中的目标用户查询系统时,数据查询任务的目的是查询目标用户,因此,拼装模块403构建的SELECT子句为:SELECT user_id。
示例性的,当数据查询系统为广告营销中的目标用户查询系统时,拼装模块403构建的用于查询某一标签表的SQL语句为:
Figure BDA0001450860220000171
查询模块404,用于在与所述数据查询任务对应的SQL语句为多个时,根据所有SQL语句并行地查询数据库中的多张标签表,然后根据所有SQL语句的逻辑关系确定各标签表的综合查询结果。
其中,查询模块404根据所有SQL语句的逻辑关系确定各标签表的综合查询结果可包括:若各SQL语句的逻辑关系为“AND”,则查询模块404可对各标签表的查询结果取交集,并将所述交集作为最终的综合查询结果;若各SQL语句的逻辑关系为“OR”,则查询模块404可对各标签表的查询结果取并集,并将所述并集作为最终的综合查询结果。
进一步,本发明实施例的数据查询装置400还可以包括:读取模块。读取模块,用于在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性。具体实施时,前端查询界面的展示模块与数据库中的标签表的对应关系可以为一对一,也可以为多对一。例如,在为确定广告营销的目标受众时,选人系统的前端查询界面包括:基础行为模块、购买行为模块;数据库包括:标签表lab1、标签表lab2。并且,基础行为模块与标签表lab1对应,购买行为模块与标签表lab2对应。
在本发明实施例中,通过设置读取模块,能够在接收到前端的属性获取请求时,读取属性配置表,以便于前端基于读取结果动态地生成前端查询界面,降低了前、后端的耦合度。当开发人员需要修改或删除某个属性时,只需修改属性配置表,无需修改前端代码,使得系统的迭代操作更加便捷,迭代效率得到提高。
本发明实施例的数据查询装置能够动态地地生成SQL语句,并基于各SQL语句并行地查询数据库中的多张标签表,不仅降低了数据查询系统前、后端的耦合性,而且能够节省查询时间、提高数据查询系统的响应速度,提高用户体验。进一步,本发明实施例的数据查询装置通过读取属性配置表,便于前端动态生成前端查询界面,进一步降低了系统前、后端的耦合度。
图5示出了可以应用本发明实施例的数据查询方法或数据查询装置的示例性系统架构500。
如图5所示,系统架构500可以包括终端设备501、502、503,网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备501、502、503通过网络504与服务器505交互,以接收或发送消息等。终端设备501、502、503上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器505可以是提供各种服务的服务器,例如对用户利用终端设备501、502、503所浏览的选人系统提供支持的后台管理服务器。后台管理服务器可以对接收到的查询请求等数据进行分析等处理,并将处理结果(例如选取的用户信息)反馈给终端设备。
需要说明的是,本发明实施例所提供的数据查询方法一般由服务器505执行,相应地,数据查询装置一般设置于服务器505中。
应该理解,图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图6示出了适于用来实现本发明实施例的服务器的计算机系统600的结构示意图。图6示出的计算机系统仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括接收模块、拼装模块、查询模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,接收模块还可以被描述为“接收数据查询任务的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备执行以下流程:接收数据查询任务;根据属性配置表以及预设的拼接规则拼装与所述数据查询任务对应的SQL语句;根据所述SQL语句查询数据库中的标签表,以获取查询结果。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (9)

1.一种数据查询方法,其特征在于,所述方法包括:
在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性;
接收数据查询任务;所述数据查询任务包括:选取的属性及其属性值;
从所述属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式;确定与所述数据查询任务对应的标签表;根据属性配置表以及预设的拼接规则、所述选取的属性和转换后的符合SQL拼接要求的属性值,拼装与所述数据查询任务对应的各个单表查询SQL语句;
根据与所述数据查询任务对应的各个单表查询SQL语句并行查询数据库中的标签表,以获取查询结果。
2.根据权利要求1所述的方法,其特征在于,所述属性配置表包括:标签表名、属性名、属性类型、拼接逻辑词;所述拼接规则包括:第一拼接规则和第二拼接规则;
所述根据属性配置表以及预设的拼接规则、所述选取的属性和转换后的符合SQL拼接要求的属性值,拼装与所述数据查询任务对应的各个单表查询SQL语句的步骤包括:从所述属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;根据所述属性类型和第一拼接规则将所述选取的属性与其转换后的符合SQL拼接要求的属性值进行拼接,以得到条件;根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句;将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成与所述数据查询任务对应的各个单表查询SQL语句。
3.根据权利要求2所述的方法,其特征在于,所述第一拼接规则包括:当属性类型为“选择”时,属性与属性值的拼接关键词为“IN”;当属性类型为“范围”时,属性与属性值的拼接关键词为“BETWEENAND”。
4.根据权利要求3所述的方法,其特征在于,所述第二拼接规则包括:优先将预设的逻辑为真的条件与所有拼接逻辑词为“AND”的属性的所述条件拼接在一起,以构成由拼接逻辑词“AND”拼接的条件整体;将预设的逻辑为假的条件与所有拼接逻辑词为“OR”的属性的所述条件拼接在一起,以构成由拼接逻辑词“OR”拼接的条件整体;将所述由拼接逻辑词“OR”拼接的条件整体通过拼接关键词“AND”拼接在所述由拼接逻辑词“AND”拼接的条件整体的后面。
5.根据权利要求1所述的方法,其特征在于,所述预设的写入规则包括:
当属性的属性类型为“选择”时,将该属性对应的属性值写入存储表的“开始值”字段;当属性的属性类型为“范围”时,将该属性的左边界值写入存储表的“开始值”字段,将该属性的右边界值写入存储表的“结束值”字段。
6.一种数据查询装置,其特征在于,所述装置包括:
读取模块,用于在接收到前端的属性获取请求时,读取属性配置表,以便于前端根据读取结果动态生成包括多个展示模块的前端查询界面;其中,每个展示模块包括至少一个能够被选取的属性;
接收模块,用于接收数据查询任务;所述数据查询任务包括:选取的属性及其属性值;
写入模块,用于从所述属性配置表中获取与所述选取的属性对应的属性类型,根据所述属性类型和预设的写入规则将所述数据查询任务中的属性值转换成符合SQL拼接要求的存储格式;
拼装模块,用于确定与所述数据查询任务对应的标签表;还用于根据属性配置表以及预设的拼接规则、所述选取的属性和转换后的符合SQL拼接要求的属性值,拼装与所述数据查询任务对应的各个单表查询SQL语句;
查询模块,用于根据与所述数据查询任务对应的各个单表查询SQL语句并行查询数据库中的标签表,以获取查询结果。
7.根据权利要求6所述的装置,其特征在于,所述属性配置表包括:标签表名、属性名、属性类型、拼接逻辑词;所述拼接规则包括:第一拼接规则和第二拼接规则;
所述拼装模块根据属性配置表以及预设的拼接规则、所述选取的属性和转换后的符合SQL拼接要求的属性值,拼装与所述数据查询任务对应的SQL语句包括:所述拼装模块从属性配置表中获取与所述选取的属性对应的属性类型和拼接逻辑词;所述拼装模块根据所述属性类型和第一拼接规则将所述选取的属性与其转换后的符合SQL拼接要求的属性值进行拼接,以得到条件;所述拼装模块根据所述拼接逻辑词和第二拼接规则将所述数据查询任务中对应同一标签表名的所有属性的所述条件进行拼接,以得到WHERE子句;所述拼装模块将SELECT子句、FROM子句和所述WHERE子句进行拼装,以生成SQL语句。
8.一种服务器,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1至5中任一所述的方法。
9.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1至5中任一所述的方法。
CN201711042305.9A 2017-10-30 2017-10-30 数据查询方法和装置 Active CN109947788B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711042305.9A CN109947788B (zh) 2017-10-30 2017-10-30 数据查询方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711042305.9A CN109947788B (zh) 2017-10-30 2017-10-30 数据查询方法和装置

Publications (2)

Publication Number Publication Date
CN109947788A CN109947788A (zh) 2019-06-28
CN109947788B true CN109947788B (zh) 2021-10-15

Family

ID=67004006

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711042305.9A Active CN109947788B (zh) 2017-10-30 2017-10-30 数据查询方法和装置

Country Status (1)

Country Link
CN (1) CN109947788B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110909018A (zh) * 2019-11-12 2020-03-24 深圳前海微众银行股份有限公司 Sql语句生成方法、装置、设备及存储介质
CN111190906B (zh) * 2019-12-31 2023-06-20 全球能源互联网研究院有限公司 一种传感网数据异常检测方法
CN111209307A (zh) * 2020-01-07 2020-05-29 深圳迅策科技有限公司 数据动态归类处理方法、装置、终端设备及存储介质
CN115039090A (zh) * 2020-03-23 2022-09-09 深圳市欢太科技有限公司 数据查询方法、装置、服务器及存储介质
CN111563094A (zh) * 2020-03-31 2020-08-21 北京奇艺世纪科技有限公司 一种数据查询方法及装置、电子设备、计算机可读存储介质
CN111639078A (zh) * 2020-05-25 2020-09-08 北京百度网讯科技有限公司 数据查询方法、装置、电子设备以及可读存储介质
CN111951077B (zh) * 2020-08-13 2024-09-06 中国民航信息网络股份有限公司 一种购票方案的展示方法及系统
CN112015752A (zh) * 2020-08-31 2020-12-01 杭州小电科技股份有限公司 一种数据动态查询的方法、装置、电子设备和存储介质
CN112307068A (zh) * 2020-11-10 2021-02-02 天元大数据信用管理有限公司 一种动态sql查询方法
CN112199577B (zh) * 2020-12-09 2021-04-02 浙江口碑网络技术有限公司 一种数据查询方法、装置及电子设备
CN112632098A (zh) * 2020-12-18 2021-04-09 平安普惠企业管理有限公司 结构化查询语句动态生成方法及相关设备
CN112988781A (zh) * 2021-02-02 2021-06-18 北京金山云网络技术有限公司 数据查询方法、装置、电子设备及计算机可读存储介质
CN113468251A (zh) * 2021-07-14 2021-10-01 中国银行股份有限公司 Db2数据查询结果处理方法及装置
CN113505265B (zh) * 2021-07-27 2024-03-01 北京达佳互联信息技术有限公司 数据的查询方法、装置及电子设备、存储介质、程序产品
CN114416695A (zh) * 2022-01-19 2022-04-29 中国平安人寿保险股份有限公司 数据拼接功能迁移方法、装置、计算机设备及存储介质
CN115357604B (zh) * 2022-10-18 2023-03-07 天聚地合(苏州)科技股份有限公司 一种数据查询方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103093000A (zh) * 2013-02-25 2013-05-08 用友软件股份有限公司 数据库查询建模系统和数据库查询建模方法
CN105205104A (zh) * 2015-08-26 2015-12-30 成都布林特信息技术有限公司 一种云平台数据获取方法
CN107169033A (zh) * 2017-04-17 2017-09-15 东北大学 基于数据模式转换和并行框架的关系数据查询优化方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0002807D0 (en) * 2000-02-09 2000-03-29 Ibm Interaction with query data
US7844587B2 (en) * 2004-07-23 2010-11-30 Oracle International Corporation Web-based user interface for searching metadata-driven relational databases
US8032544B2 (en) * 2008-09-24 2011-10-04 The Boeing Company Methods and apparatus for generating dynamic program files based on input queries that facilitate use of persistent query services
US9177021B2 (en) * 2011-06-09 2015-11-03 International Business Machines Corporation Relational query planning for non-relational data sources
CN105224544A (zh) * 2014-05-30 2016-01-06 北大方正集团有限公司 一种数据库的数据编辑方法及装置
CN105975617A (zh) * 2016-05-20 2016-09-28 北京京东尚科信息技术有限公司 一种多分区表查询处理的方法和装置
CN106775770B (zh) * 2017-01-16 2020-08-11 兴唐通信科技有限公司 基于类信息构建查询语句的查找方法
CN107273525A (zh) * 2017-06-23 2017-10-20 上海携程商务有限公司 函数式查询方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103093000A (zh) * 2013-02-25 2013-05-08 用友软件股份有限公司 数据库查询建模系统和数据库查询建模方法
CN105205104A (zh) * 2015-08-26 2015-12-30 成都布林特信息技术有限公司 一种云平台数据获取方法
CN107169033A (zh) * 2017-04-17 2017-09-15 东北大学 基于数据模式转换和并行框架的关系数据查询优化方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
《Generating SQL/XML query and update statements》;Matthias Nicola;《ACM》;20091102;第1-10页 *
《基于SQL Server的动态多条件查询方案》;俞晓;《电脑编程技巧与维护》;20140630;第1-3页 *

Also Published As

Publication number Publication date
CN109947788A (zh) 2019-06-28

Similar Documents

Publication Publication Date Title
CN109947788B (zh) 数据查询方法和装置
JP6736173B2 (ja) データベースへの自然言語インタフェースのための方法、システム、記録媒体およびコンピュータ・プログラム
CN107172151B (zh) 用于推送信息的方法和装置
JP6334696B2 (ja) ハッシュタグおよびコンテンツ提示
CN111177231A (zh) 报表生成方法和报表生成装置
CN107958385B (zh) 基于买家定义函数的投标
US10102246B2 (en) Natural language consumer segmentation
CN107798622B (zh) 一种识别用户意图的方法和装置
CN109191158B (zh) 用户画像标签数据的处理方法及处理设备
CN110059172B (zh) 基于自然语言理解的推荐答案的方法和装置
WO2015165380A1 (zh) 一种互联网信息通用精准推送方法
CN112905178B (zh) 业务功能页面生成方法、装置、设备及介质
CN113450172B (zh) 一种商品推荐方法和装置
CN107291923B (zh) 信息处理方法和装置
CN110807095A (zh) 一种物品匹配方法和装置
CN111126073B (zh) 语义检索方法和装置
CN113742564A (zh) 目标资源的推送方法和装置
CN110881056A (zh) 用于推送信息的方法和装置
CN109857838B (zh) 用于生成信息的方法和装置
US20200341973A1 (en) Template Search System and Template Search Method
CN111338621A (zh) 显示数据方法、装置、电子设备和计算机可读介质
CN111339124A (zh) 显示数据方法、装置、电子设备和计算机可读介质
CN112860858A (zh) 一种回答问题的方法及装置
CN111723274A (zh) 用于处理信息的方法和装置
CN112784195A (zh) 一种页面数据发布方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant