CN112650481A - 一种用于对数据进行处理的方法及系统 - Google Patents
一种用于对数据进行处理的方法及系统 Download PDFInfo
- Publication number
- CN112650481A CN112650481A CN202011554963.8A CN202011554963A CN112650481A CN 112650481 A CN112650481 A CN 112650481A CN 202011554963 A CN202011554963 A CN 202011554963A CN 112650481 A CN112650481 A CN 112650481A
- Authority
- CN
- China
- Prior art keywords
- data
- content
- target
- user equipment
- data processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 90
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000012217 deletion Methods 0.000 claims description 7
- 230000037430 deletion Effects 0.000 claims description 7
- 238000011161 development Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000002688 persistence Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 238000007792 addition Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/31—Programming languages or programming paradigms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种用于对数据进行处理的方法及系统,其中方法包括:响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析;根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,基于比对的结果确定用户设备是否通过身份认证;当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集;根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索;当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应。
Description
技术领域
本发明涉及数据处理技术领域,并且更具体地,涉及一种用于对数据进行处理的方法及系统。
背景技术
通常的接口的开发需要控制层Controller、业务层Service、持久层Mapper、以及DTO、VO、Entity等实体对象的开发,涉及到大量重复的结构和冗余代码,开发完成还需要提交、打包、测试等繁琐步骤,导致开发效率低下。由于大部分接口功能都离不开对数据库的操作(增、删、改、查),如果通过直接写出要执行的SQL来实现功能,就可以减少编码工作、提高开发效率。故而,可以实现基于sql配置的方式,零行代码,完成业务接口的开发。
发明内容
本发明提供jar包的方式,内嵌到现有项目中,通过UI界面,开发人员可以编写能够实现需求的SQL语句,完成接口的配置、发布。
根据本发明的一个方面,提供一种用于对数据进行处理的方法,所述方法包括:
响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围;
根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证;
当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集;
根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索;
当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;
当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索;
当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;
当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。
当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。
当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。
当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
根据本发明的另一方面,提供一种用于对数据进行处理的系统,所述系统包括:
解析装置,响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围;
比对装置,根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证;
选择装置,当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集;
检索装置,根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索;
处理装置,当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索;当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。
当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。
当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。
当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
本发明的关键点如下:
1、通过直接编写sql的方式完成接口开发,避免了繁琐的控制层、服务层、持久层开发,大大缩短开发时间;
2、采用配置拦截器的方式使用缓存技术,提升系统性能,弥补SQL速度慢的缺点;
3、采用jar的集成到现有项目中,方便快捷;
4、提供可视化操作界面,操作简单、易于上手;
本发明的有益效果:使用本发明进行接口开发,开发人员甚至都不用关心具体的开发语言、语法,只需要编写SQL就可以完成需求,减少项目代码,大大缩短开发周期;拦截器采用配置的方式使用,方便灵活。
附图说明
通过参考下面的附图,可以更为完整地理解本发明的示例性实施方式:
图1为传统模型-视图-控制器MVC(Model-View-Controller)模式的处理流程图;
图2为根据本发明实施方式的数据处理的流程图;
图3为根据本发明实施方式的对数据进行处理的方法的流程图;以及
图4为根据本发明实施方式的对数据进行处理的系统的结构示意图。
具体实施方式
图1为传统模型-视图-控制器MVC(Model-View-Controller)模式的处理流程图。传统模型-视图-控制器MVC(Model-View-Controller)模式包括控制层、服务层、缓存、持久层和数据库。
图2为根据本发明实施方式的数据处理的流程图。本发明提供jar包的方式,内嵌到现有项目中,通过UI界面,开发人员可以编写能够实现需求的SQL语句,完成接口的配置、发布。
(1)将本发明集成到项目中;
将本发明jar包集成到项目依赖库中;
配置数据源(数据库连接信息、缓存数据库连接信息);
(2)编写要实现的具体功能的SQL语句,例如:
需要开发一个查询接口,开发人员只需要编写一条查询SQL语句:select*from tb[where];
需要开发一个新增接口,开发人员只需要编写一条插入SQL语句:insert into tb(columns)values(params);
需要开发一个删除接口,开发人员只需要编写一条删除SQL语句:delete from tb[where];
需要开发一个更新接口,开发人员只需要编写一条更新SQL语句:update tb set(column)=(param)[where];
(3)配置拦截器:
在执行查询操作前,进行缓存查询,若找到结果直接返回;
若未找到结果,执行SQL查询;
(4)测试、发布接口:
执行SQL语句进行测试,结果无误进入下一步;
测试成功的SQL语句进行发布接口;
此时已经通过编写SQL+配置拦截器的方式完成了接口的开发,可以调用服务接口直接使用。
图3为根据本发明实施方式的对数据进行处理的方法的流程图。方法300包括:
步骤301,响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围。
步骤302,根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证。
步骤303,当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集。
步骤304,根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索。
步骤305,当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应。
步骤306,当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索。
步骤307,当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应。
步骤308,当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
图4为根据本发明实施方式的对数据进行处理的系统的结构示意图。系统400包括:解析装置401,响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围。比对装置402,根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证。选择装置403,当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集。检索装置404,根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索。处理装置405,当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索;当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
Claims (10)
1.一种用于对数据进行处理的方法,所述方法包括:
响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围;
根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证;
当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集;
根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索;
当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;
当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索;
当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;
当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
2.根据权利要求1所述的方法,当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。
3.根据权利要求1所述的方法,当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。
4.根据权利要求1所述的方法,当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。
5.根据权利要求1所述的方法,当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
6.一种用于对数据进行处理的系统,所述系统包括:
解析装置,响应于接收到用户设备的数据处理请求,对所述数据处理请求进行解析以获取用户设备的标识信息、用户设备的身份信息、检索条件、数据操作、数据内容和数据范围;
比对装置,根据用户设备的标识信息在认证数据库中搜索预先存储的与用户设备相关联的认证信息,将用户设备的认证信息对用户设备的身份信息进行比对,并基于比对的结果确定用户设备是否通过身份认证;
选择装置,当用户设备通过身份认证时,根据数据范围在内容数据库的多个数据集中选择至少一个目标数据集;
检索装置,根据数据操作确定数据处理请求所涉及的检索条件、数据操作和数据内容,基于检索条件在缓存设备中进行检索;
处理装置,当在缓存设备中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在缓存设备中未检索到目标内容时,基于检索条件在至少一个目标数据集中的每个数据集中进行检索;当在数据集中检索到目标内容时,根据数据内容和数据操作对目标内容进行数据处理,返回指示数据处理成功的数据处理响应;当在数据集中未检索到目标内容时,返回指示数据处理失败的数据处理响应。
7.根据权利要求6所述的系统,当数据操作为查询操作时,数据内容为空,并且目标内容为查询操作所获得的数据内容。
8.根据权利要求6所述的系统,当数据操作为增加操作时,数据内容为待增加的数据内容,目标内容为目标位置,将待增加的数据内容添加到目标位置。
9.根据权利要求6所述的系统,当数据操作为删除操作时,数据内容为待删除的数据内容,目标内容为目标位置,在目标位置处,将待删除的数据内容进行删除。
10.根据权利要求6所述的系统,当数据操作为更新操作时,数据内容为新的数据内容,目标内容为目标位置,利用新的数据内容对目标位置处的原来的数据内容进行更新。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011554963.8A CN112650481A (zh) | 2020-12-23 | 2020-12-23 | 一种用于对数据进行处理的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011554963.8A CN112650481A (zh) | 2020-12-23 | 2020-12-23 | 一种用于对数据进行处理的方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112650481A true CN112650481A (zh) | 2021-04-13 |
Family
ID=75362681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011554963.8A Pending CN112650481A (zh) | 2020-12-23 | 2020-12-23 | 一种用于对数据进行处理的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112650481A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107329900A (zh) * | 2017-07-06 | 2017-11-07 | 携程计算机技术(上海)有限公司 | 生成测试数据的方法 |
CN110392068A (zh) * | 2018-04-17 | 2019-10-29 | 阿里巴巴集团控股有限公司 | 一种数据传输方法、装置及其设备 |
CN110489445A (zh) * | 2019-08-02 | 2019-11-22 | 四川宏力信息科技有限责任公司 | 一种基于多形态复合的海量数据快速查询方法 |
CN110825388A (zh) * | 2019-11-15 | 2020-02-21 | 中科院计算技术研究所大数据研究院 | 一种将sql语句直接转换为对应rest接口的方法 |
CN111046041A (zh) * | 2019-12-09 | 2020-04-21 | 珠海格力电器股份有限公司 | 数据处理方法和装置、存储介质及处理器 |
-
2020
- 2020-12-23 CN CN202011554963.8A patent/CN112650481A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107329900A (zh) * | 2017-07-06 | 2017-11-07 | 携程计算机技术(上海)有限公司 | 生成测试数据的方法 |
CN110392068A (zh) * | 2018-04-17 | 2019-10-29 | 阿里巴巴集团控股有限公司 | 一种数据传输方法、装置及其设备 |
CN110489445A (zh) * | 2019-08-02 | 2019-11-22 | 四川宏力信息科技有限责任公司 | 一种基于多形态复合的海量数据快速查询方法 |
CN110825388A (zh) * | 2019-11-15 | 2020-02-21 | 中科院计算技术研究所大数据研究院 | 一种将sql语句直接转换为对应rest接口的方法 |
CN111046041A (zh) * | 2019-12-09 | 2020-04-21 | 珠海格力电器股份有限公司 | 数据处理方法和装置、存储介质及处理器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8793240B2 (en) | Generation of machine code for a database statement by specialization of interpreter code | |
US8005807B2 (en) | Object oriented query path expression to relational outer join translator method, system, and article of manufacture, and computer program product | |
CN105518676B (zh) | 查询任意半结构化数据的通用的sql增强以及高效地支持这样的增强的技术 | |
US9996341B2 (en) | Infrastructure for the automation of the assembly of schema maintenance scripts | |
US8601016B2 (en) | Pre-generation of structured query language (SQL) from application programming interface (API) defined query systems | |
RU2395837C2 (ru) | Механизм для обеспечения расширенных функциональных возможностей для инструкций командной строки | |
US8364696B2 (en) | Efficient incremental parsing of context sensitive programming languages | |
CN109313547B (zh) | 用于cpu利用率和代码重构的查询优化器 | |
US8904352B2 (en) | Systems and methods for processing source code during debugging operations | |
US20160239509A1 (en) | File explorer system usable in an emulated integrated development environment (ide) | |
KR20100117415A (ko) | 데이터베이스 관리 방법 및 시스템 | |
US7526770B2 (en) | System and method for employing object-based pipelines | |
JP2020119348A (ja) | 解析プログラム、解析方法および解析装置 | |
US10372760B2 (en) | Building queries directed to objects hosted on clouds | |
EP3816814A1 (en) | Crux detection in search definitions | |
US8433729B2 (en) | Method and system for automatically generating a communication interface | |
US9043308B2 (en) | Techniques for efficient queries on a file system-like repository | |
KR20170013266A (ko) | 개발 시스템에서의 시맨틱 콘텐츠 액세스 기법 | |
US11550556B1 (en) | Efficient semantic analysis of program code | |
CN112650481A (zh) | 一种用于对数据进行处理的方法及系统 | |
CN115827676A (zh) | Sql子查询的执行方法、装置、终端设备以及介质 | |
US20230141190A1 (en) | Late Materialization of Queried Data in Database Cache | |
US11256602B2 (en) | Source code file retrieval | |
US9910871B2 (en) | Transparent database table replacement | |
US7318221B2 (en) | Windows™ F-language interpreter |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |