CN117111924A - 一种数据模型驱动的数据处理引擎系统及其工作方法 - Google Patents
一种数据模型驱动的数据处理引擎系统及其工作方法 Download PDFInfo
- Publication number
- CN117111924A CN117111924A CN202311091317.6A CN202311091317A CN117111924A CN 117111924 A CN117111924 A CN 117111924A CN 202311091317 A CN202311091317 A CN 202311091317A CN 117111924 A CN117111924 A CN 117111924A
- Authority
- CN
- China
- Prior art keywords
- data
- api
- verification
- interface
- configuration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013499 data model Methods 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000012545 processing Methods 0.000 title claims abstract description 21
- 238000012795 verification Methods 0.000 claims abstract description 47
- 238000012217 deletion Methods 0.000 claims description 11
- 230000037430 deletion Effects 0.000 claims description 11
- 238000013496 data integrity verification Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 abstract description 9
- 238000011161 development Methods 0.000 description 5
- 238000012800 visualization Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/34—Graphical or visual programming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/44—Program or device authentication
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种数据模型驱动的数据处理引擎系统及其工作方法，该系统包括配置加载模块、API接口模块、校验模块和SQL拼接模块，该系统的工作方法包括：引擎初始化，加载对应表单的引擎配置；判断引擎对应的数据操作，并执行对应的API操作，包括查询API、新增API、更新API、删除API；执行权限校验和完整性校验逻辑，校验通过则根据配置进行多数据模型SQL拼接逻辑，之后对应API提供输出数据。与现有技术相比，本发明能够解耦表单的数据层处理逻辑，提升开发逻辑的简洁性，从而方便快捷地引入外部相关功能，确保开发部署应用的灵活性。
Description
技术领域
本发明涉及数据处理技术领域，尤其是涉及一种数据模型驱动的数据处理引擎系统及其工作方法。
背景技术
低代码开发平台(Low-Code Development Platform，LCDP)，是无需编码(0代码)或通过少量代码就可以快速生成应用程序的开发平台。通过可视化工具进行应用程序开发，使得终端用户不需要采用传统编写代码的方式，即可完成业务逻辑、功能的构建，通过研究基础流程、表单等，建立数据存储读取驱动，从而实现可视化应用中数据的展示。
在现有的低代码平台中，用户会通过各种不同的形式进行配置，包括拖拉拽生成表单、基于模版生成表单等场景，但最终目标都是为了配置出一个表单，能够面向用户进行信息的录入、流程发起等功能。
表单的基本作用是用来描述字段相关属性，并在前端展示，同时还需要与数据模型相关联，用于描述和数据库表的关联关系，也就是说，表单实际上是与视图层和数据层强耦合，既要描述视图层的UI功能，又要和数据库进行交互进行表结构相关的描述，耦合度非常强，导致不利于接入其他相关功能，使得实际开发逻辑较为复杂，难以方便快捷地引入外部相关功能，无法灵活地开发部署应用。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种数据模型驱动的数据处理引擎系统及其工作方法，能够解耦表单的数据层处理逻辑，提升开发逻辑的简洁性。
本发明的目的可以通过以下技术方案来实现：一种数据模型驱动的数据处理引擎系统，包括配置加载模块、API接口模块、校验模块和SQL(Structured Query Language，结构化查询语言)拼接模块，所述配置加载模块用于加载表单的引擎配置，所述API接口模块用于提供数据操作接口，所述校验模块用于执行权限校验和数据完整性校验，所述SQL拼接模块根据配置执行多数据模型SQL拼接逻辑。
进一步地，所述API接口模块包括查询数据接口、删除数据接口、更新数据接口和新增数据接口。
进一步地，所述校验模块包括依次连接的权限校验单元和完整性校验单元，所述权限校验单元用于校验接口的权限，以确保数据安全性；
所述完整性校验单元用于校验接口的数据完整性，以确保数据格式符合预设要求。
一种数据模型驱动的数据处理引擎系统工作方法，包括以下步骤：
S1、引擎初始化，加载对应表单的引擎配置；
S2、判断引擎对应的数据操作，并执行对应的API操作；
若没有匹配成功、则返回步骤S1；
S3、执行权限校验和完整性校验逻辑，校验通过则执行步骤S4，否则返回步骤S1；
S4、根据配置进行多数据模型SQL拼接逻辑，之后对应API提供输出数据。
进一步地，所述步骤S2中API操作包括：
查询API：提供数据查询相关操作；
新增API：提供新增数据相关操作；
更新API：提供数据更新相关操作；
删除API：提供数据删除相关操作；
进一步地，所述查询API具体是针对系统内需要，提供不同格式数据查询，表单可直接引用该数据用于视图展示。
进一步地，所述新增API具体是提供删除接口，并且接口内部会进行权限校验，确保数据的完整性。
进一步地，所述更新API具体是提供更新数据接口，更新时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求。
进一步地，所述删除API具体是提供新增数据接口，新增时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求。
进一步地，所述步骤S4中，若为查询API，则输出查询出的数据；
若为新增API，则输出新增进去的数据；
若为更新API，则输出更新后的数据；
若为删除API，则输出删除的条数。
与现有技术相比，本发明具有以下优点：
一、本发明通过设置配置加载模块、API接口模块和SQL拼接模块，利用配置加载模块加载表单的引擎配置，利用API接口模块提供数据操作接口，利用SQL拼接模块根据配置执行多数据模型SQL拼接逻辑。由此能够支持多数据模型，对多表数据进行数据的相应操作；能够支持动态数据模型，不同表单可生成不同的配置，并根据配置进行SQL的拼接；从而将表单的数据层处理逻辑解耦出来，使表单只需要进行视图层处理逻辑，而无需关心数据层相关逻辑，通过数据层逻辑解耦，使得开发逻辑更加简单明了。
二、本发明设置校验模块，用于执行权限校验和数据完整性校验，从而能够支持权限校验，提供的接口均会进行权限校验，确保数据安全性；能够支持完整性校验，提供的接口均会进行数据完整校验，确保数据格式符合要求。
二、本发明在引擎初始化后，首先加载对应表单的引擎配置，之后判断引擎此次提供何种操作，再执行权限校验逻辑，判断是否有该数据操作逻辑，最后根据配置进行多数据模型SQL拼接逻辑、对应API提供输出数据。由此在引擎运行时获取到相关配置，并且提供出对应API供外界调用，第三方项目仅需将其依赖引入即可使用相关功能，方便快捷。
附图说明
图1为本发明的方法流程示意图；
图2为实施例的应用过程示意图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。
实施例
一种数据模型驱动的数据处理引擎系统，包括配置加载模块、API接口模块、校验模块和SQL拼接模块，其中，配置加载模块用于加载表单的引擎配置，API接口模块用于提供数据操作接口，API接口模块包括查询数据接口、删除数据接口、更新数据接口和新增数据接口；
校验模块用于执行权限校验和数据完整性校验，包括依次连接的权限校验单元和完整性校验单元，权限校验单元用于校验接口的权限，以确保数据安全性；完整性校验单元用于校验接口的数据完整性，以确保数据格式符合预设要求；
SQL拼接模块根据配置执行多数据模型SQL拼接逻辑。
基于上述系统，实现一种数据模型驱动的数据处理引擎系统工作方法，如图1所示，包括以下步骤：
S1、引擎初始化，加载对应表单的引擎配置；
S2、判断引擎对应的数据操作，并执行对应的API操作；
若没有匹配成功、则返回步骤S1；
S3、执行权限校验和完整性校验逻辑，校验通过则执行步骤S4，否则返回步骤S1；
S4、根据配置进行多数据模型SQL拼接逻辑，之后对应API提供输出数据。
本实施例应用上述技术方案，使用JSON格式数据对于数据处理引擎的格式进行描述，在引擎运行时获取到相关配置，并且提供出对应API供外界调用，第三方项目仅需将其依赖引入即可使用相关功能。首先提供对应API如下：
a)查询数据接口：针对系统内需要，提供不同格式数据查询，例如对象格式，字符串格式等，表单可直接引用该数据用于视图展示；
b)删除数据接口：提供删除接口，并且接口内部会进行权限校验，确保数据的完整性；
c)更新数据接口：提供更新数据接口，更新时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求；
d)新增数据接口：提供新增数据接口，新增时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求。
其中，配置相关信息包括：
a)数据权限相关配置：包含数据权限，包括查询/操作相关权限，向外提供的接口都会进行逻辑相关的校验；
b)数据完整性校验相关配置：每个字段都会有相应的数据格式要求配置，接口调用是会按照配置进行格式校验；
c)字段格式相关配置：查询接口可以按照相关格式进行数据格式的转换，例如人员组件需要包括id、姓名、头像等字段。
本实施例的应用过程如图2所示，包括：
一、引擎初始化，加载对应表单的引擎配置，并且初始化成功；
二、判断逻辑，判断引擎此次提供何种操作；
三、执行对应的API操作，如果没有匹配到则返回步骤一，对应的API操作包括：
查询API：提供数据查询相关操作；
新增API：提供新增数据相关操作；
更新API：提供数据更新相关操作；
删除API：提供数据删除相关操作；
四、执行权限校验和完整性检验逻辑，判断是否有该数据操作逻辑以及数据是否完整；
五、根据配置进行多数据模型SQL拼接逻辑
六、对应API提供输出数据：
查询API：提供查询出的数据；
新增API：提供新增进去的数据；
更新API：提供更新后的数据；
删除API：提供删除的条数。
Claims (10)
1.一种数据模型驱动的数据处理引擎系统，其特征在于，包括配置加载模块、API接口模块、校验模块和SQL拼接模块，所述配置加载模块用于加载表单的引擎配置，所述API接口模块用于提供数据操作接口，所述校验模块用于执行权限校验和数据完整性校验，所述SQL拼接模块根据配置执行多数据模型SQL拼接逻辑。
2.根据权利要求1所述的一种数据模型驱动的数据处理引擎系统，其特征在于，所述API接口模块包括查询数据接口、删除数据接口、更新数据接口和新增数据接口。
3.根据权利要求1所述的一种数据模型驱动的数据处理引擎系统，其特征在于，所述校验模块包括依次连接的权限校验单元和完整性校验单元，所述权限校验单元用于校验接口的权限，以确保数据安全性；
所述完整性校验单元用于校验接口的数据完整性，以确保数据格式符合预设要求。
4.一种应用如权利要求1所述数据模型驱动的数据处理引擎系统的工作方法，其特征在于，包括以下步骤：
S1、引擎初始化，加载对应表单的引擎配置；
S2、判断引擎对应的数据操作，并执行对应的API操作；
若没有匹配成功、则返回步骤S1；
S3、执行权限校验和完整性校验逻辑，校验通过则执行步骤S4，否则返回步骤S1；
S4、根据配置进行多数据模型SQL拼接逻辑，之后对应API提供输出数据。
5.根据权利要求4所述的一种数据处理引擎系统的工作方法，其特征在于，所述步骤S2中API操作包括：
查询API：提供数据查询相关操作；
新增API：提供新增数据相关操作；
更新API：提供数据更新相关操作；
删除API：提供数据删除相关操作。
6.根据权利要求5所述的一种数据处理引擎系统的工作方法，其特征在于，所述查询API具体是针对系统内需要，提供不同格式数据查询，表单可直接引用该数据用于视图展示。
7.根据权利要求5所述的一种数据处理引擎系统的工作方法，其特征在于，所述新增API具体是提供删除接口，并且接口内部会进行权限校验，确保数据的完整性。
8.根据权利要求5所述的一种数据处理引擎系统的工作方法，其特征在于，所述更新API具体是提供更新数据接口，更新时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求。
9.根据权利要求5所述的一种数据处理引擎系统的工作方法，其特征在于，所述删除API具体是提供新增数据接口，新增时按照字段配置进行格式校验，确保入库数据符合配置要求，符合完整性校验要求。
10.根据权利要求5所述的一种数据处理引擎系统的工作方法，其特征在于，所述步骤S4中，若为查询API，则输出查询出的数据；
若为新增API，则输出新增进去的数据；
若为更新API，则输出更新后的数据；
若为删除API，则输出删除的条数。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311091317.6A CN117111924A (zh) | 2023-08-28 | 2023-08-28 | 一种数据模型驱动的数据处理引擎系统及其工作方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202311091317.6A CN117111924A (zh) | 2023-08-28 | 2023-08-28 | 一种数据模型驱动的数据处理引擎系统及其工作方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN117111924A true CN117111924A (zh) | 2023-11-24 |
Family
ID=88805241
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202311091317.6A Pending CN117111924A (zh) | 2023-08-28 | 2023-08-28 | 一种数据模型驱动的数据处理引擎系统及其工作方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN117111924A (zh) |
-
2023
- 2023-08-28 CN CN202311091317.6A patent/CN117111924A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6651240B1 (en) | Object-oriented software development support apparatus and development support method | |
| CN109840429B (zh) | 智能合约部署、调用方法和装置 | |
| Cicchetti et al. | A metamodel independent approach to difference representation. | |
| US7490098B2 (en) | Apparatus, system, and method for processing hierarchical data in disparate data repositories | |
| CN112148509A (zh) | 数据处理方法、装置、服务器及计算机可读存储介质 | |
| CN111427561A (zh) | 业务代码的生成方法、装置、计算机设备和存储介质 | |
| US20070257938A1 (en) | Element template system | |
| CN111881042B (zh) | 自动化测试脚本的生成方法、装置和电子设备 | |
| US20170060974A1 (en) | Automated conversion tool for facilitating migration between data integration products | |
| CN113971037A (zh) | 应用处理方法、装置、电子设备及存储介质 | |
| CN111078672A (zh) | 数据库的数据对比方法及装置 | |
| CN111784108A (zh) | 一种主数据管理平台的建模方法和装置 | |
| CN110825395B (zh) | 多插件分层部署系统、设备及介质 | |
| JP5426938B2 (ja) | 情報処理装置、情報処理方法 | |
| CN114968817A (zh) | 代码改动影响范围的评估方法、装置、设备及存储介质 | |
| CN109960709B (zh) | 一种数据库驱动的处理方法、装置、设备及存储介质 | |
| CN111290961A (zh) | 接口测试的管理方法、装置及终端设备 | |
| CN104572439A (zh) | 回归警告方法和系统 | |
| CN114153473A (zh) | 模块集成方法、装置、存储介质及电子设备 | |
| CN112650526A (zh) | 版本一致性的检测方法、装置、电子设备和介质 | |
| CN113760733A (zh) | 一种单元测试方法和装置 | |
| WO2023109648A1 (zh) | 一种模型-代码同步方法 | |
| CN117111924A (zh) | 一种数据模型驱动的数据处理引擎系统及其工作方法 | |
| CN114996554A (zh) | 数据库的查询方法、装置、存储介质及电子设备 | |
| CN113032004B (zh) | 在开发环境中管理开发作业的方法、设备和程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |