CN113792048B - 非关系型数据库的表单校验规则生成方法和系统 - Google Patents

非关系型数据库的表单校验规则生成方法和系统 Download PDF

Info

Publication number
CN113792048B
CN113792048B CN202111046861.XA CN202111046861A CN113792048B CN 113792048 B CN113792048 B CN 113792048B CN 202111046861 A CN202111046861 A CN 202111046861A CN 113792048 B CN113792048 B CN 113792048B
Authority
CN
China
Prior art keywords
data
field
relational database
rule
preset rule
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111046861.XA
Other languages
English (en)
Other versions
CN113792048A (zh
Inventor
郭鑫程
陈和国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Anheng Information Security Technology Co Ltd
Original Assignee
Hangzhou Anheng Information Security Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Anheng Information Security Technology Co Ltd filed Critical Hangzhou Anheng Information Security Technology Co Ltd
Priority to CN202111046861.XA priority Critical patent/CN113792048B/zh
Publication of CN113792048A publication Critical patent/CN113792048A/zh
Application granted granted Critical
Publication of CN113792048B publication Critical patent/CN113792048B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及一非关系型数据库的表单校验规则生成方法和系统,其中,该非关系型数据库的表单校验规则生成方法,包括:确定表名称,依据所述表名称从非关系型数据库中确定与所述表名称对应的对象集合;遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合;将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则。通过本申请,解决了相关技术中存在的现有的表单验证规则生成技术不支持非关系型数据库的问题,实现了支持非关系型数据库的表单验证方法的技术效果,提高了非关系型数据库的表单验证效率。

Description

非关系型数据库的表单校验规则生成方法和系统
技术领域
本申请涉及数据处理技术领域,特别是涉及非关系型数据库的表单校验规则生成方法和系统。
背景技术
在生产生活中,我们通过电子表单收集数据的需求日趋上升,例如营销类的调查问卷、企事业单位日常运行收集业务数据、疫情期间社区收集居民体温数据等,整体呈现:需求发生快、表单内容迭代快、表单的数据量剧增等趋势。过去一名软件工程师也许一天做出一个问卷表单就能满足企业需求,而现在的企业可能需要每天都创建数十个表单来收集各种各样的数据。
为了更好地收集这些由用户填写的数据,往往需要在填写时,需要做好各种输入体验优化、防呆设计等工作,就对用户录入的内容进行校验、判断、提示错误等,既是为了提升用户输入体验,也降低了日后对海量数据进行清洗的成本。例如,当我们希望收集某一时间发生的日期时刻数据时,通常期望能够收集到格式统一的日期时刻数据,若不加以限制,则有可能收集到五花八门的各种表现形式,往往需要日后花费大量的成本来进行数据清洗,徒增企业成本。另外,面对量级超过以往千百倍的数据时,传统的关系型数据库往往在性能上无法满足需求。例如,当单表行数超过一亿乃至更多时,传统的关系型数据库都体现出非常明显的读写速度下降。因此许多系统都引入了非关系型数据库来加速应用。
关系型数据库具有数据表结构,数据表是由表名、表中的字段和表的记录三个部分组成的。设计数据表结构就是定义数据表文件名,确定数据表包含哪些字段,各字段的字段名、字段类型、及宽度,并将这些数据输入到计算机当中。然而非关系型数据库缺少表结构描述这一特性,往往需要工程师手动书写表单校验规则,消耗大量的人力成本。
现有的表单验证规则生成技术通常只适用于关系型数据库,并且只分析表结构,并不分析数据内容,而对于MongoDB或者其他的非关系型数据库,现有的表单验证规则生成技术便完全无法适用。
针对相关技术中存在的现有的表单验证规则生成技术不支持非关系型数据库的问题,目前还没有提出有效的解决方案。
发明内容
在本实施例中提供了一种非关系型数据库的表单校验规则生成方法和系统,以解决相关技术中存在的现有的表单验证规则生成技术不支持非关系型数据库的问题。
第一个方面,在本实施例中提供了一种非关系型数据库的表单校验规则生成方法,包括:确定表名称,依据所述表名称从非关系型数据库中确定与所述表名称对应的对象集合;遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合;将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则。
在其中的一些实施例中,将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则,包括:确定所述字段名称所对应的数据集合中的数据的属性;确定所述预设规则库里的预设规则的属性;根据所述数据的属性与所述预设规则的属性确定所述数据与所述预设规则的对应关系,根据所述对应关系,将所述数据与所述预设规则进行匹配,依据匹配结果生成所述字段的校验规则。
在其中的一些实施例中,将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则,包括:确定所述字段名称所对应的数据集合中的数据;确定所述预设规则库里的预设规则;逐一将所述数据与所述规则进行匹配,并依据匹配结果生成所述字段的校验规则。
在其中的一些实施例中,遍历所述对象集合,获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合之前,所述方法还包括:
将对象集合中的对象格式转换成编程语言所支持的格式。
在其中的一些实施例中,将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则之后,所述方法还包括:
获取所述每个字段名称所对应的数据集合中的数据;判断所述数据是否与所述预设规则库里的预设规则匹配,在所述数据与所述规则匹配时,依据匹配结果生成所述字段的校验规则,在所述数据与所述规则均不匹配时,标记出所述数据对应的字段。
在其中的一些实施例中,在所述数据与所述规则均不匹配时,标记出所述数据对应的字段,所述方法还包括:
给所述数据对应的字段编制校验规则。
在其中的一些实施例中,遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合,包括:遍历所述非关系型数据库中的获取到的所有对象的字段,并依据遍历结果获取所述对象集合中的字段名称集合;遍历所述对象集合中的字段名称集合所对应的数据,并依据遍历结果获取所有字段的名称所对应的数据集合。
第二个方面,在本实施例中提供了一种非关系型数据库的表单校验规则生成系统,包括:终端设备和服务器设备;其中,所述终端设备连接服务器设备;
所述终端设备用于发送用户的请求指令;所述服务器设备用于第一个方面所述的非关系型数据库的表单校验规则生成方法。
第三个方面,在本实施例中提供了一种电子装置,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一个方面所述的非关系型数据库的表单校验规则生成方法。
第四个方面,在本实施例中提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述第一个方面所述的非关系型数据库的表单校验规则生成方法。
与相关技术相比,在本实施例中提供的一种非关系型数据库的表单校验规则生成方法,通过确定表名称,依据所述表名称从非关系型数据库中确定与所述表名称对应的对象集合;遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合;将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则。解决了相关技术中存在的现有的表单验证规则生成技术不支持非关系型数据库的问题,实现了支持非关系型数据库的表单验证方法的技术效果,提高了非关系型数据库的表单验证效率。
本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是本实施例的非关系型数据库的表单校验规则生成方法流程图;
图2是本优选实施例的非关系型数据库的表单校验规则生成方法流程图;
图3是本实施例的非关系型数据库的表单校验规则生成装置的结构框图。
具体实施方式
为更清楚地理解本申请的目的、技术方案和优点,下面结合附图和实施例,对本申请进行了描述和说明。
除另作定义外,本申请所涉及的技术术语或者科学术语应具有本申请所属技术领域具备一般技能的人所理解的一般含义。在本申请中的“一”、“一个”、“一种”、“该”、“这些”等类似的词并不表示数量上的限制,它们可以是单数或者复数。在本申请中所涉及的术语“包括”、“包含”、“具有”及其任何变体,其目的是涵盖不排他的包含;例如,包含一系列步骤或模块(单元)的过程、方法和系统、产品或设备并未限定于列出的步骤或模块(单元),而可包括未列出的步骤或模块(单元),或者可包括这些过程、方法、产品或设备固有的其他步骤或模块(单元)。在本申请中所涉及的“连接”、“相连”、“耦接”等类似的词语并不限定于物理的或机械连接,而可以包括电气连接,无论是直接连接还是间接连接。在本申请中所涉及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。通常情况下,字符“/”表示前后关联的对象是一种“或”的关系。在本申请中所涉及的术语“第一”、“第二”、“第三”等,只是对相似对象进行区分,并不代表针对对象的特定排序。
本申请中的非关系型数据库以MongoDB为例,MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。它支持的数据结构非常松散,是类似json的bson格式,因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大,其语法有点类似于面向对象的查询语言,几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引。
在本实施例中提供了一种非关系型数据库的表单校验规则生成方法,图1是本实施例的非关系型数据库的表单校验规则生成方法的流程图,如图1所示,该流程包括如下步骤:
步骤S101,确定表名称,依据表名称从非关系型数据库中确定与表名称对应的对象集合。
由于MongoDB数据库中的数据以分布式的对象的形式存储,与关系型数据库不同的是它不具有关系型数据库的行列的形式。例如,MongoDB数据库中的表名称是X,表X的Q其中一个对象包括表名X、字段A、字段B和字段C及各字段对应的值a1、b1、c1;表X的另一个对象包括表名X、字段A、字段D和字段E及各字段对应的值a2、d2、e2。可见即使是相同的数据表的对象,具体的字段及字段的数量都可能不同。
确定表名称X后,先从MongoDB数据库中查询到与表名称X对应的所有对象,比如:字段A、字段B和字段C以及字段A、字段D和字段E。
步骤S102,遍历对象集合,依次获取对象集合中的字段名称集合和每个字段名称所对应的数据集合。
先遍历查询到的所有对象,比如遍历字段A、字段B和字段C以及字段A、字段D和字段E等,依据遍历结果,获取所有对象的名称,比如字段A的名称是班级序号,字段B的名称是姓名;字段C的名称是身份证号,字段D的名称是电话号码。对应于字段A的所有的值均是:一年级一班,对应于字段B的值是:张三,李四,等等,对应于字段C的值是123456789123456789,对应于字段D的值是13000000000或者13200000000。
步骤S103,将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则。
在本实施例中,其中一条预设规则是位数为18位的阿拉伯数字,或者位数是18位,前17位均为阿拉伯数字,第18位可以为字母。该预设规则与身份证号对应的值相匹配,则将该预设规则作为字段C的校验规则。
另外一条预设规则是位数为11位的阿拉伯数字,此条预设规则与电话号码对应的值相匹配,则将此条预设规则作为字段D的校验规则。
通过上述步骤,与相关技术相比,本申请采用完全不同于相关技术的路径,本申请从数据库中的对象所对应的值出发,经由一系列预设规则,通过对象所对应的值与预设规则匹配,最终生成可用于检验非关系型数据库的校验规则,本申请旨在遍历非关系型数据库中的数据值而不依赖表结构描述,来自动生成表单校验规则。解决了相关技术中存在的现有的表单验证规则生成技术不支持非关系型数据库的问题,实现了支持非关系型数据库的表单验证方法的技术效果,提高了非关系型数据库的表单验证效率,大大的降低人力成本。
在其中的一些实施例中,将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则,包括:确定字段名称所对应的数据集合中的数据的属性;确定预设规则库里的预设规则的属性;根据数据的属性与预设规则的属性确定数据与预设规则的对应关系,根据对应关系,将数据与预设规则进行匹配,依据匹配结果生成字段的校验规则。
具体的,以某单位体温登记表为例,由于疫情期间,单位都要对员工进行体温测量,并记录数据,以便后期查阅,该体温登记表包括工号、姓名和体温三个字段。每天测量每个员工的体温,并登记。
遍历字段所对应的数值时,先确定字段所对应的数值的属性,在本实施例中,例如,先确定字段对应的数值是否均是汉字这一属性,若字段对应的数值均是汉字,就确定字段对应的数值的属性是汉字,再确定预设规则库里的预设规则的属性,然后从预设规则库里筛选预设规则的属性也全是汉字的预设规则,筛选出预设规则的属性全是汉字的预设规则后,将属性全是汉字的字段与其匹配,若字段对应的数值与该预设规则匹配成功,则该字段对应的校验规则就是预设规则。
通过上述步骤,本实施例可以提高匹配的速度,无需与预设规则库里的所有预设规则一一匹配,仅需匹配预设规则库里包含有汉字属性的规则即可,可以节省大量的时间。
在其中的一些实施例中,将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则,包括:
确定字段名称所对应的数据集合中的数据;
确定预设规则库里的预设规则;
逐一将数据与规则进行匹配,并依据匹配结果生成字段的校验规则。
在本实施例中,还以上述某单位体温登记表为例,先确定字段对应的数值,再确定预设规则库里的预设规则,将该字段对应的数值与预设规则库里的预设规则逐一进行匹配,例如,字段为体温的数值,该数值均为10进制的阿拉伯数字且带有1位小数,将该数值集合中的任一数值与预设规则库里的任一规则进行匹配,直至匹配到预设规则也是为10进制的阿拉伯数字且带有1位小数的规则,将该预设规则作为校验规则。
在其中的一些实施例中,遍历对象集合,获取对象集合中的字段名称集合和每个字段名称所对应的数据集合之前,非关系型数据库的表单校验规则生成方法还包括:将对象集合中的对象格式转换成编程语言所支持的格式。
在mongodb数据库中,数据以BSON(Binary Serialized Document Format,)格式存储,其中,BSON是一种计算机数据交换格式,主要被用作MongoDB数据库中的数据存储和网络传输格式。它是一种二进制表示形式,能用来表示简单数据结构、关联数组(MongoDB中称为“对象”或“文档”)以及MongoDB中的各种数据类型。BSON之名缘于JSON,含义为BinaryJSON(二进制JSON)。由于大多数编程语言对BSON没有原生支持,必须将mongodb数据库中的数据格式进行一次转换,才能够在程序代码中访问到mongodb数据库中的数据。
在本实施例中,由于BSON格式的数据是源数据,源数据不能直接被访问,将数据格式为BSON的数据转为数据格式为Map的数据。转换后的数据可以直接遍历键,也可以用键来访问数据格式为Map的数据。
在其中的一些实施例中,将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则之后,方法还包括:获取每个字段名称所对应的数据集合中的数据;判断数据是否与预设规则库里的预设规则匹配,在数据与规则匹配时,依据匹配结果生成字段的校验规则,在数据与规则均不匹配时,标记出数据对应的字段。
在本实施例中,还以上述某单位体温登记表为例,先确定字段所对应的数值,以字段姓名为例,将字段为姓名所对应的数值与预设规则库里的预设规则一一匹配,当字段为姓名的数值匹配到相应的预设规则时,将该预设规则作为校验规则。比如该条预设规则是:该字段对应的数值均为汉字,且汉字的数量是2个、3个或4个中的一种。将该预设规则作为校验规则。
当字段对应的数值与预设规则库里的所有预设规则均不能匹配时,标记出该数据对应的字段名称,提醒编程人员此字段没有找到预设规则。
例如,该公司的工号是以位数为6位的流水序号,比如,000001、000002……
999999。当员工数量达到999999个时,若再有新入职的员工入职,将没有工号给新员工分配。公司决定新员工的工号位数还是6位不变,将工号的首位定为字母,比如,A00001、A00002、D90003、E37777等,将字段所对应的数值与预设规则进行匹配时,没有匹配到位数为6位的数值所对应的预设规则。将该字段对应的数据标记出来,提醒编程人员此字段没有找到预设规则,未能为该字段生成校验规则。
在其中的一些实施例中,在数据与规则均不匹配时,标记出数据对应的字段,非关系型数据库的表单校验规则生成方法还包括:给数据对应的字段编制校验规则。
在字段所对应的数据不能匹配到相应的预设规则时,将此字段标记出来,提醒编程人员此字段没有找到预设规则,未能为该字段生成校验规则,编程人员需根据该字段的特征,为该字段编制出校验规则,并将该校验规则添加至预设规则库内,并预设规则库内的预设规则。
在本实施例中,例如,为工号所对应的数值编制一条校验规则,该校验规则是位数是6位,首位为字母或者数字,其余五位均为数字的规则。
并将该校验规则添加进预设规则库内,并更新预设规则库内的预设规则。
在其中的一些实施例中,遍历对象集合,依次获取对象集合中的字段名称集合和每个字段名称所对应的数据集合,包括:遍历非关系型数据库中的获取到的所有对象的字段,并依据遍历结果获取对象集合中的字段名称集合;遍历对象集合中的字段名称集合所对应的数据,并依据遍历结果获取所有字段的名称所对应的数据集合。
下面通过优选实施例对本实施例进行描述和说明。
图2是本优选实施例的非关系型数据库的表单校验规则生成方法的流程图,如图2所示,该流程包括如下步骤:
S201:确定表名称,依据表名称从非关系型数据库中确定与表名称对应的对象集合。
S202:遍历非关系型数据库中的获取到的所有对象的字段,并依据遍历结果获取对象集合中的字段名称集合。
S203:遍历对象集合中的字段名称集合所对应的数据,并依据遍历结果获取所有字段的名称所对应的数据集合。
S204:将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则。
在本实施例中,例如一次疫情初始期间,A单位进行了对员工每日体温调查,该表单共有工号、姓名、体温等3个字段,初次记录数据时,并没有对数据库中的表设置验证规则,因此,事后需要人工清洗数据,例如,是否存在有中文句号误用为小数点、将表中的所有对应阿拉伯数字的中文字转换成阿拉伯数字。
在疫情规模降低后,停止了对该表单的收集,将原有数据清洗后保存。后来,又因疫情反复,A单位重启每日收集员工体温数据,依据上述表单的信息,可以快速总结提炼出表单验证规则。例如,可通过历史数据得出,姓名字段必须为中文字符,体温字段必须为10进制阿拉伯数字且带有1位小数,用于后续的提交验证,免去或减少人工对数据进行清洗的工作量。
本申请旨在使用真实数据来总结规则,并使用该规则用于指导后续运行。若不通过本申请的方法,只能依靠软件工程师人工整理或总结数据库中各类字段的表单验证规则。
在本实施例中还提供了一种非关系型数据库的表单校验规则生成装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。以下所使用的术语“模块”、“单元”、“子单元”等可以实现预定功能的软件和/或硬件的组合。尽管在以下实施例中所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图3是本实施例的非关系型数据库的表单校验规则生成装置的结构框图,如图3所示,该装置包括:确定模块,获取模块和生成模块;
确定模块,用于依据表名称从非关系型数据库中确定与表名称对应的对象集合;
获取模块,用于通过遍历对象集合,依次获取对象集合中的字段名称集合和每个字段名称所对应的数据集合;
生成模块;用于将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则。
需要说明的是,上述各个模块可以是功能模块也可以是程序模块,既可以通过软件来实现,也可以通过硬件来实现。对于通过硬件来实现的模块而言,上述各个模块可以位于同一处理器中;或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。
在本实施例中还提供了一种非关系型数据库的表单校验规则生成系统,包括:终端设备和服务器设备;其中,所述终端设备连接服务器设备;所述终端设备用于发送用户的请求指令;所述服务器设备用于执行上述任一项方法实施例中的步骤。
在本实施例中还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,确定表名称,依据表名称从非关系型数据库中确定与表名称对应的对象集合。
S2,遍历对象集合,依次获取对象集合中的字段名称集合和每个字段名称所对应的数据集合。
S3,将每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成字段的校验规则。
需要说明的是,在本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,在本实施例中不再赘述。
此外,结合上述实施例中提供的非关系型数据库的表单校验规则生成方法,在本实施例中还可以提供一种存储介质来实现。该存储介质上存储有计算机程序;该计算机程序被处理器执行时实现上述实施例中的任意一种非关系型数据库的表单校验规则生成方法。
应该明白的是,这里描述的具体实施例只是用来解释这个应用,而不是用来对它进行限定。根据本申请提供的实施例,本领域普通技术人员在不进行创造性劳动的情况下得到的所有其它实施例,均属本申请保护范围。
显然,附图只是本申请的一些例子或实施例,对本领域的普通技术人员来说,也可以根据这些附图将本申请适用于其他类似情况,但无需付出创造性劳动。另外,可以理解的是,尽管在此开发过程中所做的工作可能是复杂和漫长的,但是,对于本领域的普通技术人员来说,根据本申请披露的技术内容进行的某些设计、制造或生产等更改仅是常规的技术手段,不应被视为本申请公开的内容不足。
“实施例”一词在本申请中指的是结合实施例描述的具体特征、结构或特性可以包括在本申请的至少一个实施例中。该短语出现在说明书中的各个位置并不一定意味着相同的实施例,也不意味着与其它实施例相互排斥而具有独立性或可供选择。本领域的普通技术人员能够清楚或隐含地理解的是,本申请中描述的实施例在没有冲突的情况下,可以与其它实施例结合。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对专利保护范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。

Claims (8)

1.一种非关系型数据库的表单校验规则生成方法,其特征在于,包括:
确定表名称,依据所述表名称从非关系型数据库中确定与所述表名称对应的对象集合;
遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合;
将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则;
将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则之后,所述方法还包括:
获取所述每个字段名称所对应的数据集合中的数据;
判断所述数据是否与所述预设规则库里的预设规则匹配,在所述数据与所述预设规则匹配时,依据匹配结果生成所述字段的校验规则,在所述数据与所述预设规则均不匹配时,标记出所述数据对应的字段;
在所述数据与所述预设规则均不匹配时,标记出所述数据对应的字段,所述方法还包括:
给所述数据对应的字段编制校验规则。
2.根据权利要求1所述的非关系型数据库的表单校验规则生成方法,其特征在于,将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则,包括:
确定所述字段名称所对应的数据集合中的数据的属性;
确定所述预设规则库里的预设规则的属性;
根据所述数据的属性与所述预设规则的属性确定所述数据与所述预设规则的对应关系,根据所述对应关系,将所述数据与所述预设规则进行匹配,依据匹配结果生成所述字段的校验规则。
3.根据权利要求1所述的非关系型数据库的表单校验规则生成方法,其特征在于,将所述每个字段名称所对应的数据集合中的数据与预设规则库里的预设规则进行匹配,依据匹配结果生成所述字段的校验规则,包括:
确定所述字段名称所对应的数据集合中的数据;
确定所述预设规则库里的预设规则;
逐一将所述数据与所述预设规则进行匹配,并依据匹配结果生成所述字段的校验规则。
4.根据权利要求1所述的非关系型数据库的表单校验规则生成方法,其特征在于,遍历所述对象集合,获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合之前,所述方法还包括:
将对象集合中的对象格式转换成编程语言所支持的格式。
5.根据权利要求1所述的非关系型数据库的表单校验规则生成方法,其特征在于,遍历所述对象集合,依次获取所述对象集合中的字段名称集合和每个字段名称所对应的数据集合,包括:
遍历所述非关系型数据库中的获取到的所有对象的字段,并依据遍历结果获取所述对象集合中的字段名称集合;
遍历所述对象集合中的字段名称集合所对应的数据,并依据遍历结果获取所有字段的名称所对应的数据集合。
6.一种非关系型数据库的表单校验规则生成系统,其特征在于,包括:终端设备和服务器设备;其中,所述终端设备连接服务器设备;
所述终端设备用于发送用户的请求指令;
所述服务器设备用于执行权利要求1至5中任一项所述的非关系型数据库的表单校验规则生成方法。
7.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至5中任一项所述的非关系型数据库的表单校验规则生成方法。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至5中任一项所述的非关系型数据库的表单校验规则生成方法的步骤。
CN202111046861.XA 2021-09-06 2021-09-06 非关系型数据库的表单校验规则生成方法和系统 Active CN113792048B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111046861.XA CN113792048B (zh) 2021-09-06 2021-09-06 非关系型数据库的表单校验规则生成方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111046861.XA CN113792048B (zh) 2021-09-06 2021-09-06 非关系型数据库的表单校验规则生成方法和系统

Publications (2)

Publication Number Publication Date
CN113792048A CN113792048A (zh) 2021-12-14
CN113792048B true CN113792048B (zh) 2024-04-16

Family

ID=78879721

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111046861.XA Active CN113792048B (zh) 2021-09-06 2021-09-06 非关系型数据库的表单校验规则生成方法和系统

Country Status (1)

Country Link
CN (1) CN113792048B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6185583B1 (en) * 1998-11-30 2001-02-06 Gte Laboratories Incorporated Parallel rule-based processing of forms
CN105589959A (zh) * 2015-12-22 2016-05-18 北京京东尚科信息技术有限公司 表单处理方法和表单系统
CN111914537A (zh) * 2020-08-12 2020-11-10 杭州安恒信息技术股份有限公司 一种数据校验方法、装置、设备及可读存储介质
CN112187558A (zh) * 2019-07-03 2021-01-05 腾讯科技(深圳)有限公司 数据校验方法、装置、电子设备
CN112396419A (zh) * 2020-12-08 2021-02-23 深圳前海微众银行股份有限公司 校验规则的生成方法、装置、设备和存储介质
CN113094406A (zh) * 2019-12-23 2021-07-09 内蒙古电力(集团)有限责任公司电力营销服务与运营管理分公司 一种电力营销数据治理方法以及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6185583B1 (en) * 1998-11-30 2001-02-06 Gte Laboratories Incorporated Parallel rule-based processing of forms
CN105589959A (zh) * 2015-12-22 2016-05-18 北京京东尚科信息技术有限公司 表单处理方法和表单系统
CN112187558A (zh) * 2019-07-03 2021-01-05 腾讯科技(深圳)有限公司 数据校验方法、装置、电子设备
CN113094406A (zh) * 2019-12-23 2021-07-09 内蒙古电力(集团)有限责任公司电力营销服务与运营管理分公司 一种电力营销数据治理方法以及系统
CN111914537A (zh) * 2020-08-12 2020-11-10 杭州安恒信息技术股份有限公司 一种数据校验方法、装置、设备及可读存储介质
CN112396419A (zh) * 2020-12-08 2021-02-23 深圳前海微众银行股份有限公司 校验规则的生成方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN113792048A (zh) 2021-12-14

Similar Documents

Publication Publication Date Title
US11194793B1 (en) Dynamically materialized views for sheets based data
US9280569B2 (en) Schema matching for data migration
CN111258966A (zh) 一种数据去重方法、装置、设备及存储介质
CN112860727B (zh) 基于大数据查询引擎的数据查询方法、装置、设备及介质
CN113760839A (zh) 日志数据压缩处理方法、装置、电子设备和存储介质
CN113434542B (zh) 数据关系识别方法、装置、电子设备及存储介质
CN110704635B (zh) 一种知识图谱中三元组数据的转换方法及装置
CN113792048B (zh) 非关系型数据库的表单校验规则生成方法和系统
CN111858617A (zh) 用户查找方法和装置、计算机可读存储介质、电子设备
CN116204540A (zh) 操作日志记录方法、装置、设备及存储介质
CN115114297A (zh) 数据轻量存储及查找方法、装置、电子设备及存储介质
CN115310127A (zh) 一种数据脱敏方法及装置
WO2019010277A2 (en) HIGHLY ATOMIZED INTERVIEWABLE AND SEGMENTED DATA SYSTEMS (HASIDS)
CN114328486A (zh) 基于模型的数据质量核查方法及装置
CN112256689A (zh) 业务数据清洗方法、装置、电子设备
CN112632167A (zh) 一种结构化数据的数据转化方法、数据转化系统及相关装置
US20140317154A1 (en) Heterogeneous data management methodology and system
CN115242638B (zh) 可行触达的筛选方法、装置、电子设备及存储介质
CN113722334B (zh) 数据处理的方法、装置、电子设备及介质
CN113806372B (zh) 新数据信息构建方法、装置、计算机设备及存储介质
RU106012U1 (ru) Единая модель данных органа исполнительной власти
CN114676124B (zh) 基于配置式的数据字段差异解决方法、装置、设备及介质
CN111832304B (zh) 楼盘名称的查重方法、装置、电子设备及存储介质
CN116881262B (zh) 一种智能化的多格式数字身份映射方法及系统
CN117762984A (zh) 数据获取方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant