CN113626689A - 一种大数据查询方法及大数据查询装置 - Google Patents
一种大数据查询方法及大数据查询装置 Download PDFInfo
- Publication number
- CN113626689A CN113626689A CN202110836179.4A CN202110836179A CN113626689A CN 113626689 A CN113626689 A CN 113626689A CN 202110836179 A CN202110836179 A CN 202110836179A CN 113626689 A CN113626689 A CN 113626689A
- Authority
- CN
- China
- Prior art keywords
- data query
- query request
- request information
- target data
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/44—Program or device authentication
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供的一种大数据查询方法及大数据查询装置,涉及大数据技术领域。在本申请中,首先,获取数据查询请求设备发送的目标数据查询请求信息;其次,对目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于验证结果确定是否执行目标数据查询请求信息对应的目标数据查询请求操作,其中,在验证通过时,确定执行目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行目标数据查询请求信息对应的目标数据查询请求操作;然后,若需要执行目标数据查询请求操作,则基于目标数据查询请求信息查询得到对应目标业务数据。基于上述方法,可以改善现有技术中数据查询的安全性不高的问题。
Description
技术领域
本申请涉及大数据技术领域,具体而言,涉及一种大数据查询方法及大数据查询装置。
背景技术
随着数据处理技术的不断发展,使得对海量数据的应用得到了实现。其中,在数据的应用过程中,一般会涉及到数据查询,但是,经发明人研究发现,在现有的数据查询技术中,存在查询的安全性不高的问题。
发明内容
有鉴于此,本申请的目的在于提供一种大数据查询方法及大数据查询装置,以改善现有技术中数据查询的安全性不高的问题。
为实现上述目的,本申请实施例采用如下技术方案:
一种大数据查询方法,应用于大数据处理设备,所述大数据处理设备通信连接有数据查询请求设备,所述大数据查询方法包括:
获取所述数据查询请求设备发送的目标数据查询请求信息,其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备;
对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作,其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作;
若需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据。
在一种可能的实施例中,在上述大数据查询方法中,所述大数据处理设备通信连接有多个数据查询请求设备,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,包括:
获取至少一个所述数据查询请求设备发送的数据查询请求信息,得到至少一条数据查询请求信息;
统计所述至少一条数据查询请求信息的数量,得到对应的第一数量;
确定所述第一数量与预先确定的第一预设阈值之间的大小关系,其中,所述第一预设阈值基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成;
若所述第一数量小于或等于所述第一预设阈值,则将所述第一数量条数据查询请求信息中的每一条数据查询请求信息确定为目标数据查询请求信息,得到所述第一数量条目标数据查询请求信息。
在一种可能的实施例中,在上述大数据查询方法中,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,还包括:
若所述第一数量大于所述第一预设阈值,则确定所述第一数量条数据查询请求信息中的每一条数据查询请求信息的接收时间和发送时间,得到对应的接收时间信息和发送时间信息;
基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理,得到该目标数据查询请求信息对应的融合表征系数;
基于所述融合表征系数之间的大小关系,在所述第一数量条数据查询请求信息中筛选出所述第一预设阈值条数据查询请求信息,作为目标数据查询请求信息,得到所述第一预设阈值条目标数据查询请求信息。
在一种可能的实施例中,在上述大数据查询方法中,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,还包括:
在得到所述第一数量条目标数据查询请求信息之后,确定每一条所述目标数据查询请求信息的接收时间信息和发送时间信息;
基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理,得到该目标数据查询请求信息对应的融合表征系数;
基于所述融合表征系数之间的大小关系,确定所述第一数量条目标数据查询请求信息之间的目标先后顺序关系,其中,所述目标先后顺序关系用于表征基于对应的所述目标数据查询请求信息执行所述对所述目标数据查询请求信息进行验证处理,得到对应的验证结果的步骤的优先级。
在一种可能的实施例中,在上述大数据查询方法中,所述对所述目标数据查询请求信息进行验证处理,得到对应的验证结果的步骤,包括:
基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息;
基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,则确定不对所述目标数据查询请求信息执行目标验证处理;
若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;
若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果。
在一种可能的实施例中,在上述大数据查询方法中,所述若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果的步骤,包括:
获取所述目标数据查询请求信息对应的数据查询请求设备的目标设备身份信息,并基于所述目标设备身份信息获取在历史上所述数据查询请求设备发送的至少一条历史数据查询请求信息;
在所述至少一条历史数据查询请求信息中,基于每一条所述历史数据查询请求信息的接收时间确定一条历史数据查询请求信息,作为第一历史数据查询请求信息;
基于所述第一历史数据查询请求信息对所述目标数据查询请求信息执行执行所述目标验证处理,得到对应的验证结。
在一种可能的实施例中,在上述大数据查询方法中,所述若确定需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据的步骤,包括:
若确定需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息;
基于所述目标数据标识信息确定所述目标数据内容的存储位置,得到对应的目标存储位置信息;
在所述目标存储位置信息对应的目标数据库中查询得到所述目标数据查询请求信息对应的目标业务数据。
在一种可能的实施例中,在上述大数据查询方法中,所述大数据查询方法还包括:
若确定不需要执行所述目标数据查询请求操作,则生成对应的查询失败提示信息,并将所述查询失败提示信息发送给所述数据查询请求设备。
本申请还提供一种大数据查询装置,应用于大数据处理设备,所述大数据处理设备通信连接有数据查询请求设备,所述大数据查询装置包括:
查询请求信息获取模块,用于获取所述数据查询请求设备发送的目标数据查询请求信息,其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备;
查询请求信息验证模块,用于对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作,其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作;
查询请求操作执行模块,用于若需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据。
在一种可能的实施例中,在上述大数据查询装置中,所述查询请求信息验证模块具体用于:
基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息;
基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,则确定不对所述目标数据查询请求信息执行目标验证处理;
若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;
若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果。
本申请提供的一种大数据查询方法及大数据查询装置,在获取到数据查询请求设备发送的目标数据查询请求信息之后,先进行验证处理,且在验证通过之后再基于目标数据查询请求信息查询得到对应目标业务数据。基于此,相较于直接基于数据查询请求信息进行查询的常规技术方法,由于增加了验证处理,使得查询的安全性得到有效的提升,从而改善现有技术中数据查询的安全性不高的问题。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
图1为本申请实施例提供的大数据处理设备的结构框图。
图2为本申请实施例提供的大数据查询方法的流程示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例只是本申请的一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
如图1所示,本申请实施例提供了一种大数据处理设备。其中,所述大数据处理设备可以包括存储器和处理器。
详细地,所述存储器和处理器之间直接或间接地电性连接,以实现数据的传输或交互。例如,相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述存储器中可以存储有至少一个可以以软件或固件(firmware)的形式,存在的软件功能模块(如后文所述的大数据查询装置)。所述处理器可以用于执行所述存储器中存储的可执行的计算机程序,从而实现本申请实施例(如后文所述)提供的大数据查询方法。
可选地,所述存储器可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-OnlyMemory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。所述处理器可以是一种通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)、片上系统(System on Chip,SoC)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
并且,图1所示的结构仅为示意,所述大数据处理设备还可包括比图1中所示更多或者更少的组件,或具有与图1所示不同的配置,例如,可以包括用于与其它设备(如手机、电脑等数据查询请求设备)进行信息交互的通信单元。其中,在一种可以替代的示例中,所述大数据处理设备可以是一种具备数据处理能力的服务器。
结合图2,本申请实施例还提供一种大数据查询方法,可应用于上述大数据处理设备。其中,所述大数据查询方法有关的流程所定义的方法步骤,可以由所述大数据处理设备实现。
下面将对图2所示的具体流程,进行详细阐述。
步骤S110,获取所述数据查询请求设备发送的目标数据查询请求信息。
在本实施例中,所述大数据处理设备可以先获取通信连接的数据查询请求设备发送的目标数据查询请求信息。
其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备。
步骤S120,对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作。
在本实施例中,在基于步骤S110得到所述目标数据查询请求信息之后,所述大数据处理设备可以对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作。
其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作。并且,若需要执行所述目标数据查询请求操作,可以执行步骤S130。若不需要执行所述目标数据查询请求操作,则生成对应的查询失败提示信息,并将所述查询失败提示信息发送给所述数据查询请求设备。
步骤S130,基于目标数据查询请求信息查询得到对应目标业务数据。
在本实施例中,在基于步骤S120确定需要执行所述目标数据查询请求操作之后,所述大数据处理设备可以基于所述目标数据查询请求信息查询得到对应目标业务数据(如设备运行的数据或业务订单数据等)。
基于上述方法,在获取到数据查询请求设备发送的目标数据查询请求信息之后,先进行验证处理,且在验证通过之后再基于目标数据查询请求信息查询得到对应目标业务数据。基于此,相较于直接基于数据查询请求信息进行查询的常规技术方法,由于增加了验证处理,使得查询的安全性得到有效的提升,从而改善现有技术中数据查询的安全性不高的问题。
可以理解的是,在一种可以替代的示例中,在执行步骤S110时,在所述大数据处理设备通信连接有多个数据查询请求设备的基础上,可以基于以下步骤获取所述目标数据查询请求信息:
首先,(如在一个时刻或一个较短的时段内)获取至少一个所述数据查询请求设备发送的数据查询请求信息,得到至少一条数据查询请求信息;
其次,统计所述至少一条数据查询请求信息的数量,得到对应的第一数量;
然后,确定所述第一数量与预先确定的第一预设阈值之间的大小关系,其中,所述第一预设阈值可以基于所述大数据处理设备响应对应管理用户根据实际应用场景进行的阈值配置操作生成;
最后,若所述第一数量小于或等于所述第一预设阈值,则将所述第一数量条数据查询请求信息中的每一条数据查询请求信息确定为目标数据查询请求信息,得到所述第一数量条目标数据查询请求信息。
可以理解的是,在一种可以替代的示例中,在执行步骤S110时,在所述大数据处理设备通信连接有多个数据查询请求设备的基础上,还可以基于以下步骤获取所述目标数据查询请求信息:
第一步,若所述第一数量大于所述第一预设阈值,则确定所述第一数量条数据查询请求信息中的每一条数据查询请求信息的接收时间和发送时间,得到对应的接收时间信息和发送时间信息;
第二步,基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
第三步,基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
第四步,针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理(如相乘处理等),得到该目标数据查询请求信息对应的融合表征系数;
第五步,基于所述融合表征系数之间的大小关系,在所述第一数量条数据查询请求信息中筛选出所述第一预设阈值条数据查询请求信息(如筛选出所述融合系数最大的所述第一预设阈值条数据查询请求信息),作为目标数据查询请求信息,得到所述第一预设阈值条目标数据查询请求信息。
可以理解的是,在一种可以替代的示例中,在执行步骤S110时,在基于上述步骤,在得到所述第一数量条目标数据查询请求信息之后,还可以执行以下步骤(其中,在得到所述第一预设阈值条目标数据查询请求信息之后,也可以执行相同的步骤,在此不再一一赘述):
第一步,在得到所述第一数量条目标数据查询请求信息之后,确定每一条所述目标数据查询请求信息的接收时间信息和发送时间信息;
第二步,基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
第三步,基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
第四步,针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理,得到该目标数据查询请求信息对应的融合表征系数;
第五步,基于所述融合表征系数之间的大小关系,确定所述第一数量条目标数据查询请求信息之间的目标先后顺序关系,其中,所述目标先后顺序关系用于表征基于对应的所述目标数据查询请求信息执行所述对所述目标数据查询请求信息进行验证处理,得到对应的验证结果的步骤的优先级(例如,所述融合表征系数越大的目标数据查询请求信息的优先级越高,所述融合表征系数越小的目标数据查询请求信息的优先级越低,如此,可以先针对优先级高的目标数据查询请求信息执行后续的步骤S120,然后针对优先级低的目标数据查询请求信息执行后续的步骤S120)。
可以理解的是,在一种可以替代的示例中,在执行步骤S120时,可以基于以下步骤以对所述目标数据查询请求信息进行验证处理,得到对应的验证结果:
首先,基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息(可以预先建立有不同数据内容与不同安全保护等级信息之间的对应关系);
其次,基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息可以基于所述大数据处理设备响应对应管理用户根据实际应用场景进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,表明对应的数据相对重要,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,表明对应的数据相对不重要,则确定不对所述目标数据查询请求信息执行目标验证处理;
然后,若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;
最后,若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果,即直接通过验证。
可以理解的是,在一种可以替代的示例中,可以基于以下步骤以对所述目标数据查询请求信息执行所述目标验证处理:
首先,获取所述目标数据查询请求信息对应的数据查询请求设备的目标设备身份信息(如设备指纹等唯一性标识信息),并基于所述目标设备身份信息获取在历史上所述数据查询请求设备发送的至少一条历史数据查询请求信息;
其次,在所述至少一条历史数据查询请求信息中,基于每一条所述历史数据查询请求信息的接收时间确定一条历史数据查询请求信息,作为第一历史数据查询请求信息(如接收时间为中位值的一条历史数据查询请求信息,可以作为所述第一历史数据查询请求信息);
然后,基于所述第一历史数据查询请求信息对所述目标数据查询请求信息执行执行所述目标验证处理,得到对应的验证结果。
可以理解的是,在一种可以替代的示例中,可以基于以下步骤以基于所述第一历史数据查询请求信息对所述目标数据查询请求信息执行执行所述目标验证处理,得到对应的验证结果:
第一步,确定所述第一历史数据查询请求信息对应的接收时间与当前时间之间的目标时间段,并获取在所述目标时间段内所述目标设备身份信息对应的数据查询请求设备对所述大数据处理设备和所述大数据处理设备的关联数据处理设备(可以预先存储所述大数据处理设备和所述关联数据处理设备的关联关系,然后,从所述关联数据处理设备获取对应的历史数据查询请求信息)进行数据查询的的每一条历史数据查询请求信息,并基于该历史数据查询请求信息的接收时间,对该历史数据查询请求信息按照时间从早到晚的顺序进行排序,得到对应的历史数据查询请求信息序列;
第二步,在所述历史数据查询请求信息序列包括的历史数据查询请求信息中,确定查询的代表数据内容,其中,所述代表数据内容对应的历史数据查询请求信息的数量具有最大值;
第三步,确定所述目标设备身份信息以外的多个第二设备身份信息和每一个所述第二设备身份信息对应的第二历史数据查询请求信息,其中,每一个所述第二设备身份信息对应的数据查询请求设备在所述目标时间段内有向所述大数据处理设备发送数据查询请求信息,每一条所述第二历史数据查询请求信息用于对所述大数据处理设备或所述大数据处理设备进行数据查询;
第四步,针对每一个所述第二设备身份信息,按照接收时间从早到晚的顺序对该第二设备身份信息对应的第二历史数据查询请求信息进行排序,得到对应的第二历史数据查询请求信息序列;
第五步,分别确定每一个所述第二历史数据查询请求信息序列包括的第二历史数据查询请求信息对应的数据内容是否包括所述代表数据内容,并分别统计包括所述代表数据内容的每一条第二历史数据查询请求信息序列包括的第二历史数据查询请求信息的数量,得到对应的第二数量;
第六步,对于小于预先确定的第二预设阈值的每一个所述第二数量,将对应的每一个所述第二历史数据查询请求信息序列按照预先确定的第三预设阈值进行筛选处理(如随机筛选等),得到对应的第二历史数据查询请求信息代表序列,其中,所述第三预设阈值与所述历史数据查询请求信息序列包括的历史数据查询请求信息的数量相同,使得每一个第二历史数据查询请求信息代表序列包括的第二历史数据查询请求信息的数量与所述历史数据查询请求信息序列包括的历史数据查询请求信息的数量相同,所述第二预设阈值和所述第三预设阈值可以基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成;
第七步,对于大于或等于所述第二预设阈值的每一个所述第二数量,针对对应的每一个所述第二历史数据查询请求信息序列,在该第二历史数据查询请求信息序列中,选择(如随机选择等)包括所述代表数据内容对应的第二历史数据查询请求信息的连续的所述第三预设阈值个第二历史数据查询请求信息,组成第二历史数据查询请求信息代表序列,使得每一个第二历史数据查询请求信息代表序列包括的第二历史数据查询请求信息的数量与所述历史数据查询请求信息序列包括的历史数据查询请求信息的数量相同;
第八步,针对每一个所述第二历史数据查询请求信息代表序列,计算该第二历史数据查询请求信息代表序列与所述历史数据查询请求信息序列之间关于对应的数据内容形成的序列相似度(如判断对应序列位置的数据查询请求信息对应的数据内容是否相同,并统计具有相同数据内容的序列位置的数量占比,从而得到所述序列相似度),并确定该序列相似度是否大于预先确定的第四预设阈值,所述四预设阈值可以基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成;
第九步,确定是否存在大于所述第四预设阈值的序列相似度,并在确定存在大于所述第四预设阈值的序列相似度时,将该序列相似度对应的第二历史数据查询请求信息代表序列对应的第二设备身份信息确定为与所述目标设备身份信息之间具有关联关系,并确定验证通过(表明对应的数据查询请求设备与其它查询请求设备具有一定的关联性,具有一定的安全性,可以予以通过),并在确定不存在大于所述第四预设阈值的序列相似度时,确定验证未通过(表明对应的数据查询请求设备与其它查询请求设备不具有一定的关联性或关联性较低,使得安全性较低,可以不通过)。
可以理解的是,在一种可以替代的示例中,在执行步骤S130时,可以基于以下步骤以查询得到对应目标业务数据:
首先,若确定需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息;
其次,基于所述目标数据标识信息确定所述目标数据内容的存储位置,得到对应的目标存储位置信息(可以在存储数据时,建立不同数据内容的存储位置信息与数据标识信息之间的对应关系);
然后,在所述目标存储位置信息对应的目标数据库(既可以是所述大数据处理设备的本地数据库,也可以是所述大数据处理设备的远端数据库)中查询得到所述目标数据查询请求信息对应的目标业务数据。
本申请实施例还提供一种大数据查询装置,可应用于上述大数据处理设备。其中,所述大数据查询装置可以包括查询请求信息获取模块、查询请求信息验证模块和查询请求操作执行模块。
所述查询请求信息获取模块,用于获取所述数据查询请求设备发送的目标数据查询请求信息,其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备。在本实施例中,所述查询请求信息获取模块可用于执行图2所示的步骤S110,关于所述查询请求信息获取模块的相关内容可以参照前文对步骤S110的描述。
所述查询请求信息验证模块,用于对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作,其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作。在本实施例中,所述查询请求信息验证模块可用于执行图2所示的步骤S120,关于所述查询请求信息验证模块的相关内容可以参照前文对步骤S120的描述。
所述查询请求操作执行模块,用于若需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据。在本实施例中,所述查询请求操作执行模块可用于执行图2所示的步骤S130,关于所述查询请求操作执行模块的内容可以参照前文对步骤S130的描述。
可以理解的是,在一种可以替代的示例中,所述查询请求信息验证模块具体用于:基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息;基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,则确定不对所述目标数据查询请求信息执行目标验证处理;若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果
综上所述,本申请提供的一种大数据查询方法及大数据查询装置,在获取到数据查询请求设备发送的目标数据查询请求信息之后,先进行验证处理,且在验证通过之后再基于目标数据查询请求信息查询得到对应目标业务数据。基于此,相较于直接基于数据查询请求信息进行查询的常规技术方法,由于增加了验证处理,使得查询的安全性得到有效的提升,从而改善现有技术中数据查询的安全性不高的问题。
在本申请实施例所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,电子设备,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (10)
1.一种大数据查询方法,其特征在于,应用于大数据处理设备,所述大数据处理设备通信连接有数据查询请求设备,所述大数据查询方法包括:
获取所述数据查询请求设备发送的目标数据查询请求信息,其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备;
对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作,其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作;
若需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据。
2.根据权利要求1所述的大数据查询方法,其特征在于,所述大数据处理设备通信连接有多个数据查询请求设备,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,包括:
获取至少一个所述数据查询请求设备发送的数据查询请求信息,得到至少一条数据查询请求信息;
统计所述至少一条数据查询请求信息的数量,得到对应的第一数量;
确定所述第一数量与预先确定的第一预设阈值之间的大小关系,其中,所述第一预设阈值基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成;
若所述第一数量小于或等于所述第一预设阈值,则将所述第一数量条数据查询请求信息中的每一条数据查询请求信息确定为目标数据查询请求信息,得到所述第一数量条目标数据查询请求信息。
3.根据权利要求2所述的大数据查询方法,其特征在于,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,还包括:
若所述第一数量大于所述第一预设阈值,则确定所述第一数量条数据查询请求信息中的每一条数据查询请求信息的接收时间和发送时间,得到对应的接收时间信息和发送时间信息;
基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理,得到该目标数据查询请求信息对应的融合表征系数;
基于所述融合表征系数之间的大小关系,在所述第一数量条数据查询请求信息中筛选出所述第一预设阈值条数据查询请求信息,作为目标数据查询请求信息,得到所述第一预设阈值条目标数据查询请求信息。
4.根据权利要求2所述的大数据查询方法,其特征在于,所述获取所述数据查询请求设备发送的目标数据查询请求信息的步骤,还包括:
在得到所述第一数量条目标数据查询请求信息之后,确定每一条所述目标数据查询请求信息的接收时间信息和发送时间信息;
基于每一条所述目标数据查询请求信息的接收时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第一表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的接收时间信息对应的第一表征系数大于具有较晚的接收时间信息对应的第一表征系数;
基于每一条所述目标数据查询请求信息的发送时间信息之间的早晚关系,分别确定每一条所述目标数据查询请求信息的第二表征系数,其中,任意两条所述目标数据查询请求信息,具有较早的发送时间信息对应的第二表征系数大于具有较晚的发送时间信息对应的第二表征系数;
针对每一条所述目标数据查询请求信息,基于该目标数据查询请求信息对应的第一表征系数和第二表征系数进行融合处理,得到该目标数据查询请求信息对应的融合表征系数;
基于所述融合表征系数之间的大小关系,确定所述第一数量条目标数据查询请求信息之间的目标先后顺序关系,其中,所述目标先后顺序关系用于表征基于对应的所述目标数据查询请求信息执行所述对所述目标数据查询请求信息进行验证处理,得到对应的验证结果的步骤的优先级。
5.根据权利要求1所述的大数据查询方法,其特征在于,所述对所述目标数据查询请求信息进行验证处理,得到对应的验证结果的步骤,包括:
基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息;
基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,则确定不对所述目标数据查询请求信息执行目标验证处理;
若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;
若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果。
6.根据权利要求5所述的大数据查询方法,其特征在于,所述若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果的步骤,包括:
获取所述目标数据查询请求信息对应的数据查询请求设备的目标设备身份信息,并基于所述目标设备身份信息获取在历史上所述数据查询请求设备发送的至少一条历史数据查询请求信息;
在所述至少一条历史数据查询请求信息中,基于每一条所述历史数据查询请求信息的接收时间确定一条历史数据查询请求信息,作为第一历史数据查询请求信息;
基于所述第一历史数据查询请求信息对所述目标数据查询请求信息执行执行所述目标验证处理,得到对应的验证结果。
7.根据权利要求1-6任意一项所述的大数据查询方法,其特征在于,所述若确定需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据的步骤,包括:
若确定需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息;
基于所述目标数据标识信息确定所述目标数据内容的存储位置,得到对应的目标存储位置信息;
在所述目标存储位置信息对应的目标数据库中查询得到所述目标数据查询请求信息对应的目标业务数据。
8.根据权利要求1-6任意一项所述的大数据查询方法,其特征在于,所述大数据查询方法还包括:
若确定不需要执行所述目标数据查询请求操作,则生成对应的查询失败提示信息,并将所述查询失败提示信息发送给所述数据查询请求设备。
9.一种大数据查询装置,其特征在于,应用于大数据处理设备,所述大数据处理设备通信连接有数据查询请求设备,所述大数据查询装置包括:
查询请求信息获取模块,用于获取所述数据查询请求设备发送的目标数据查询请求信息,其中,所述目标数据查询请求信息基于所述数据查询请求设备响应对应的查询用户进行的数据查询操作生成,且发送给所述大数据处理设备;
查询请求信息验证模块,用于对所述目标数据查询请求信息进行验证处理,得到对应的验证结果,并基于所述验证结果确定是否执行所述目标数据查询请求信息对应的目标数据查询请求操作,其中,若所述验证结果为验证通过或验证不通过,且在验证通过时,确定执行所述目标数据查询请求信息对应的目标数据查询请求操作,在验证未通过时,则确定不执行所述目标数据查询请求信息对应的目标数据查询请求操作;
查询请求操作执行模块,用于若需要执行所述目标数据查询请求操作,则基于所述目标数据查询请求信息查询得到对应目标业务数据。
10.根据权利要求8所述的大数据查询装置,其特征在于,所述查询请求信息验证模块具体用于:
基于所述目标数据查询请求信息确定待查询的目标数据内容的目标数据标识信息,并基于所述目标数据标识信息确定所述目标数据内容对应的目标安全保护等级信息;
基于所述目标安全保护等级信息和预先确定的安全保护等级阈值信息,确定是否对所述目标数据查询请求信息执行目标验证处理,其中,所述安全保护等级阈值信息基于所述大数据处理设备响应对应管理用户进行的阈值配置操作生成,且若所述目标安全保护等级信息高于所述安全保护等级阈值信息,则确定对所述目标数据查询请求信息执行目标验证处理,若所述目标安全保护等级信息不高于所述安全保护等级阈值信息,则确定不对所述目标数据查询请求信息执行目标验证处理;
若确定对所述目标数据查询请求信息执行目标验证处理,则对所述目标数据查询请求信息执行所述目标验证处理,得到对应的验证结果;
若确定不对所述目标数据查询请求信息执行目标验证处理,则生成表征验证通过的验证结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110836179.4A CN113626689A (zh) | 2021-07-23 | 2021-07-23 | 一种大数据查询方法及大数据查询装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110836179.4A CN113626689A (zh) | 2021-07-23 | 2021-07-23 | 一种大数据查询方法及大数据查询装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113626689A true CN113626689A (zh) | 2021-11-09 |
Family
ID=78380758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110836179.4A Withdrawn CN113626689A (zh) | 2021-07-23 | 2021-07-23 | 一种大数据查询方法及大数据查询装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113626689A (zh) |
-
2021
- 2021-07-23 CN CN202110836179.4A patent/CN113626689A/zh not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109064031B (zh) | 基于区块链的项目干系人信用评价方法、区块链及存储介质 | |
CN111885051B (zh) | 数据验证方法、装置及电子设备 | |
CN112162999A (zh) | 基于交互式云计算的大数据处理方法及人工智能服务器 | |
CN114154990B (zh) | 一种基于在线支付的大数据防攻击方法及存储介质 | |
CN113569965A (zh) | 一种基于物联网的用户行为分析方法及系统 | |
CN108595685B (zh) | 一种数据处理方法及装置 | |
CN113609111A (zh) | 一种大数据测试方法及系统 | |
CN113609389A (zh) | 一种社区平台信息推送方法及系统 | |
CN113282454A (zh) | 基于区块链的金融业务监控方法 | |
CN112541823A (zh) | 基于区块链的交易风险控制方法、装置、设备及存储介质 | |
CN113626689A (zh) | 一种大数据查询方法及大数据查询装置 | |
CN113328988A (zh) | 基于大数据和云计算的网络安全校验方法及系统 | |
CN113256366A (zh) | 基于大数据和云计算的订单数据处理方法及系统 | |
CN112669163B (zh) | 基于大数据和云计算的金融业务管理方法及系统 | |
CN113204476A (zh) | 一种用户行为数据安全检测方法 | |
CN115189961A (zh) | 一种故障识别方法、装置、设备及存储介质 | |
CN110990810B (zh) | 一种用户操作数据处理方法、装置、设备及存储介质 | |
CN113626666A (zh) | 一种大数据可视化系统 | |
CN113239381A (zh) | 一种数据安全加密方法 | |
CN113472804A (zh) | 一种用于数字签名校验的方法 | |
CN112711480B (zh) | 数据链路解析方法及系统 | |
CN112686760B (zh) | 基于大数据的金融业务处理方法及平台 | |
CN113259361B (zh) | 互联网安全数据处理方法及系统 | |
CN112887276A (zh) | 基于大数据的网络数据处理方法及平台 | |
CN111797069B (zh) | 基于Hadoop平台的海量存取件记录处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20211109 |