CN113779004A - 一种数据校验的方法和装置 - Google Patents

一种数据校验的方法和装置 Download PDF

Info

Publication number
CN113779004A
CN113779004A CN202110189110.7A CN202110189110A CN113779004A CN 113779004 A CN113779004 A CN 113779004A CN 202110189110 A CN202110189110 A CN 202110189110A CN 113779004 A CN113779004 A CN 113779004A
Authority
CN
China
Prior art keywords
check
data
verification
rule
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110189110.7A
Other languages
English (en)
Inventor
王永亮
余伟伟
任莉强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Wodong Tianjun Information Technology Co Ltd
Original Assignee
Beijing Wodong Tianjun Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Wodong Tianjun Information Technology Co Ltd filed Critical Beijing Wodong Tianjun Information Technology Co Ltd
Priority to CN202110189110.7A priority Critical patent/CN113779004A/zh
Publication of CN113779004A publication Critical patent/CN113779004A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/35Creation or generation of source code model driven
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/30Creation or generation of source code
    • G06F8/36Software reuse

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种数据校验的方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;对所述校验规则进行解析并生成校验字段对应的数据校验器;响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验,克服了数据校验过程中校验规则与数据对象强耦合、校验规则扩展性差、校验规则难以动态维护、校验性能低下等影响正常业务的技术问题,实现了校验规则运行时的动态更新以及校验规则的动态扩展,无需引入额外规则解析引擎和执行引擎,减少了资源浪费,提高了执行性能,降低了维护成本。

Description

一种数据校验的方法和装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据校验的方法和装置。
背景技术
在服务提供者与服务调用者之间进行数据交互过程中,常常需要对数据的正确性和合法性进行必要的校验,针对数据校验问题,可通过程序代码直接编写校验逻辑解决,也可利用通用的数据校验框架,通过字段注解(如Hibernate Validator)或校验规则(如Apache Comm ons Validator)的方式实现。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
注解方式,需要在数据对象的数据字段上添加校验注解,与代码耦合度高,当数据对象在不同场景被复用时,校验注解无法很好的在不同场景隔离,不易扩展,虽然可以通过分组校验方式实现,但其维护成本极高,且易造成校验逻辑混乱;
校验规则方式,需要针对数据对象和不同的应用场景,编写不同的校验规则,维护困难,此外,校验规则一般以文件方式存储,无法动态维护,且校验规则一般均依赖于特定脚本执行引擎,带来了额外的资源占用,相较于业务系统繁琐冗余。
发明内容
有鉴于此,本发明实施例提供一种数据校验的方法和装置,通过自定义校验规则去除与数据对象的耦合,支持多种化规则配置器,可实现校验规则运行时动态更新,通过规则解析生成原生校验器,无需引入额外规则解析引擎和执行引擎,减少资源利用,提高执行性能,通过服务提供发现机制,动态发现、加载规则校验器,实现校验规则的动态扩展。
为实现上述目的,根据本发明实施例的一个方面,提供了一种数据校验的方法。
一种数据校验的方法,包括:加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;对所述校验规则进行解析并生成校验字段对应的数据校验器;响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验。
可选地,对所述校验规则进行解析并生成校验字段对应的数据校验器包括:解析所述校验规则,获取所述校验规则的规则名称、规则校验值、规则校验条件和规则校验提示信息;根据所述规则名称从数据校验系统中获取对应的校验器模型;基于所述规则校验值、规则校验条件和规则校验提示信息,使用所述校验器模型生成具体的数据校验器;建立所述校验字段与所述数据校验器的映射关系以生成所述校验字段对应的数据校验器。
可选地,根据所述规则名称从数据校验系统中获取对应的校验器模型包括:通过服务提供发现机制,根据所述规则名称从数据校验系统中获取对应的校验器模型。
可选地,使用所述校验字段对应的若干个数据校验器进行数据校验包括:获取所述校验字段的字段值以及对应的若干个数据校验器;遍历所述校验字段对应的数据校验器,对于每个数据校验器,判断所述校验字段是否满足对应的规则校验条件,若满足则使用所述数据校验器对所述校验字段的字段值进行校验;若所有数据校验器对所述校验字段的字段值校验均通过,则校验通过;否则校验不通过,输出数据校验器对应的规则校验提示信息。
可选地,所述数据校验机制包括快速失败机制和失效转移机制;当采用快速失败机制时,若任一数据校验器校验不通过,则结束校验,并返回校验不通过的数据校验器对应的规则校验提示信息;当采用失效转移机制时,若有数据校验器校验不通过,仍继续进行校验直到所有数据校验器均完成校验,返回所有校验不通过的数据校验器对应的校验规则提示信息。
可选地,所述校验规则利用JSON规则进行嵌套定义。
可选地,所述校验规则存储在具有不同加载优先级的不少于一个可存储设备中。
根据本发明实施例的另一方面,提供了一种数据校验的装置。
一种数据校验的装置,包括:配置加载模块,用于加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;检验器生成模块,用于对所述校验规则进行解析并生成校验字段对应的数据校验器;执行校验模块,用于响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验。
可选地,校验器生成模块还用于:解析所述校验规则,获取所述校验规则的规则名称、规则校验值、规则校验条件和规则校验提示信息;根据所述规则名称从数据校验系统中获取对应的校验器模型;基于所述规则校验值、规则校验条件和规则校验提示信息,使用所述校验器模型生成具体的数据校验器;建立所述校验字段与所述数据校验器的映射关系以生成所述校验字段对应的数据校验器。
可选地,校验器生成模块还用于:通过服务提供发现机制,根据所述规则名称从数据校验系统中获取对应的校验器模型。
可选地,执行校验模块还用于:获取所述校验字段的字段值以及对应的若干个数据校验器;遍历所述校验字段对应的数据校验器,对于每个数据校验器,判断所述校验字段是否满足对应的规则校验条件,若满足则使用所述数据校验器对所述校验字段的字段值进行校验;若所有数据校验器对所述校验字段的字段值校验均通过,则校验通过;否则校验不通过,输出数据校验器对应的规则校验提示信息。
可选地,所述装置还包括校验机制模块包括快速失败机制和失效转移机制,用于:当采用快速失败机制时,若任一数据校验器校验不通过,则结束校验,并返回校验不通过的数据校验器对应的规则校验提示信息;当采用失效转移机制时,若有数据校验器校验不通过,仍继续进行校验直到所有数据校验器均完成校验,返回所有校验不通过的数据校验器对应的校验规则提示信息。
可选地,所述装置还包括规则定义模块,用于:所述校验规则利用JSON规则进行嵌套定义。
可选地,所述装置还包括规则储存模块,用于:将校验规则存储在具有不同加载优先级的不少于一个可存储设备中。
根据本发明实施例的又一方面,提供了一种数据校验的电子设备。
一种数据校验的电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例所提供的数据校验的方法。
根据本发明实施例的再一方面,提供了一种计算机可读介质。
一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例所提供的数据校验的方法。
上述发明中的一个实施例具有如下优点或有益效果:采用加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;对所述校验规则进行解析并生成校验字段对应的数据校验器;响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验的技术手段,克服了数据校验过程中遇到的校验规则与数据对象强耦合、校验规则扩展性差、校验规则难以动态维护、校验性能低下影响正常业务的技术问题,实现了校验规则运行时动态更新以及校验规则的动态扩展,无需引入额外规则解析引擎和执行引擎,减少了资源浪费,提高了执行性能,降低了维护成本。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明实施例的数据校验的方法的主要步骤示意图;
图2是本发明实施例的数据校验的主要流程示意图;
图3是本发明实施例的数据校验的具体实现流程示意图;
图4是根据本发明实施例的数据校验的装置的主要模块示意图;
图5是本发明实施例可以应用于其中的示例性系统架构图;
图6是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
在服务提供者与服务调用者之间进行数据交互过程中,常常需要对数据的正确性和合法性进行必要的校验,如字段不能为空、字段不能超过一定长度、字段应符合某种固定模式等,针对数据校验问题,可通过程序代码直接编写校验逻辑解决,也可利用通用的数据校验框架,通过字段注解(如Hibernate Validator)或校验规则(如Apache CommonsValidator)的方式实现,现有技术有基于JavaScript脚本实现的规则校验方法,能够将校验脚本缓存到内存,以便动态更新,提高执行效率;也有将单一字段与校验规则组合生成单一校验器,供校验过程中复用,实现动态组合,提高可重用性,减小复杂性。
现有技术虽能实现数据校验的功能,但仍存在局限性,通过注解方式实现数据校验,需要在数据对象的数据字段上添加校验注解,与代码耦合度高,当数据对象在不同场景被复用时,校验注解无法很好的在不同场景隔离,不易扩展,虽然可以通过分组校验方式实现,但其维护成本极高,且易造成校验逻辑混乱;而通过校验规则方式来实现数据校验,需要针对数据对象和不同的应用场景,编写不同的校验规则,维护困难,且校验规则一般以文件方式存储,无法动态维护,校验规则一般均依赖于特定脚本执行引擎,带来了额外的资源占用,相较于业务系统繁琐冗余。
图1是根据本发明实施例的数据校验的方法的主要步骤示意图,如图1所示,本发明实施例的管理堆外内存的方法,主要包括如下的步骤S101至步骤S103。
步骤S101,加载校验配置,校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则。在进行配置加载前,首先针对所需要校验的数据定义对应的校验配置ValidationConfig,由于需要校验的数据可能包括多个字段,故而一个校验配置可由多个校验字段Valida tionField组成,校验字段又包括字段名称和字段描述以及对应的若干条校验规则,一条校验规则由规则名称name、规则校验值value、规则校验条件condition和规则校验提示信息message组成,规则名称为校验系统中已支持的校验器名称,如“blank”对应非空校验器BlankValidator、“range”对应值域校验器RangeValidator等;规则校验值为规则对应的限定值,如利用最小值校验器,“最小值为0”这条规则对应的校验值即为0;规则校验条件为规则对应的限定条件表达式,当满足该条件时才执行该校验器,如“context.root.s==‘123’”这个表达式表示目标对象的“s”字段值为“123”时,才对数据对象执行本校验器的校验;规则校验提示信息为当不满足校验条件时,给出的错误提示信息,如“字段值不能为空字符串”。
校验规则可按照指定格式编写,编写完成后保存为普通文本格式,存储于数据库、配置文件、动态配置中心,也可通过数据对象字段注解方式指定校验规则,校验系统均可加载并识别,方式灵活。基于动态配置的方式设置规则,可实现动态更新。以下展示了几种校验规则的形式和写法:
(1)普通形式
{“fieldMeta”:{“fieldName”:“field1”,“fieldText”:“字段1”},“fieldRules”:[{“ruleName”:“required”},{“ruleName”:“min”,“ruleValue”:“0”,“conditi on”:“context.root.s==‘abc’”,“message”:“当s=abc时最小值为0”}]};
(2)简化形式
{“field\0字段1”,“required\0min:0\1m:当s=abc时最小值为0\1c:context.root.s==‘abc’”,};
(3)字段嵌套形式
{“field1.subField12.subSubField123\0子字段123”,“required\1m:字段值必填”}。
步骤S102,对校验规则进行解析并生成校验字段对应的数据校验器。在本发明的实施例中,对校验规则进行解析并生成校验字段对应的数据校验器包括:解析校验规则,获取校验规则的规则名称、规则校验值、规则校验条件和规则校验提示信息;根据规则名称从数据校验系统中获取对应的校验器模型;基于规则校验值、规则校验条件和规则校验提示信息,使用校验器模型生成具体的数据校验器;建立校验字段与数据校验器的映射关系以生成校验字段对应的数据校验器。
具体地,在规则加载完成之后,通过规则解析器ConfigParser,对加载的规则进行校验、解析,然后生成具体的校验器,详细步骤如下:
解析规则,获取规则名称,然后按照规则名称从校验系统中获取对应的校验器模型;基于规则中设定的校验值、校验条件、提示信息,生成具体的数据校验器;建立校验字段到该具体的数据校验器的映射关系FieldValidatorsMap。
在本发明的实施例中,根据规则名称从数据校验系统中获取对应的校验器模型包括:通过服务提供发现机制,根据规则名称从数据校验系统中获取对应的校验器模型。在实际使用中,通过规则名称查找校验器,是通过服务提供发现机制完成,后续添加规则校验器,仅需实现规则校验接口,将校验器实现类添加到校验系统,添加对应校验规则配置即可,无需更改业务逻辑,易于动态扩展,校验规则的高度灵活可配置通过组合多种配置方式并设定优先级和动态更新机制来实现,动态更新还可替换为消息队列通信等,本申请所述的校验系统除了可通过服务提供发现机制(SPI)来实现,也可利用Java虚拟机(JV M)的类加载器在运行时通过指定类名动态加载校验器实现类的方式来实现。
步骤S103,响应于数据校验请求,获取校验字段标识,对每个校验字段,使用校验字段对应的若干个数据校验器进行数据校验。
在本发明的实施例中,使用校验字段对应的若干个数据校验器进行数据校验包括:获取校验字段的字段值以及对应的若干个数据校验器;遍历校验字段对应的数据校验器,对于每个数据校验器,判断校验字段是否满足对应的规则校验条件,若满足则使用数据校验器对校验字段的字段值进行校验;若所有数据校验器对校验字段的字段值校验均通过,则校验通过;否则校验不通过,输出数据校验器对应的规则校验提示信息。
在本发明的实施例中,数据校验机制包括快速失败机制和失效转移机制;当采用快速失败机制时,若任一数据校验器校验不通过,则结束校验,并返回校验不通过的数据校验器对应的规则校验提示信息;当采用失效转移机制时,若有数据校验器校验不通过,仍继续进行校验直到所有数据校验器均完成校验,返回所有校验不通过的数据校验器对应的校验规则提示信息。
具体地,在生成校验字段到校验器的映射关系后,结合待校验数据,即可对该数据有效性进行校验,并在校验通过或校验失败后做出相应决策,其详细内容包括:遍历所有存在校验规则的字段,获取待校验数据的字段值以及对应的校验器;遍历字段对应的校验器,将字段值应用到每一个校验器,执行校验,包括值校验、条件匹配校验;如果遍历校验过程中存在任何一个失败,则认为该字段值校验不通过,需返回校验规则中配置的错误提示消息,如果所有的校验器都校验通过,则认为该字段值校验通过。校验执行机制存在两种模式快速失败 (failfast)和失效转移(failover),默认为failfast模式,即一个字段的校验器校验失败就直接返回,不再进行下一字段的校验;若是failover 模式,则待所有字段的校验器校验完后再返回,返回所有校验失败的规则对应的提示语。特别的,校验系统预留脚本规则校验接口,可通过第三方脚本引擎对数据值进行校验,进一步提升校验规则的灵活性和可用性。
根据本发明的一个实施例,校验规则可利用JSON规则进行嵌套定义。校验规则语法简单、易用,支持复杂的多层嵌套对象,并且可修改为其它形式,如XML、YAML、TOML等,只要语义匹配。使用JSO N格式定义校验规则,语义化强,简单明确,易于使用,利用JSON规则嵌套定义的方式,结合非递归校验算法,支持复杂的多层嵌套对象的数据校验处理的同时,保证高性能。
根据本发明的另一个实施例,校验规则存储在具有不同加载优先级的不少于一个可存储设备中。数据校验规则可储存于任何可存储设备(目前支持数据库、配置文件、字段注解、动态配置中心),且支持多种存储方式组合,可设置加载优先级以及在业务系统运行时动态进行修改和更新,维护成本低,存储方式还可进行其它形式扩展如内存缓存。
图2是根据本发明实施例的数据校验的方法的主要流程示意图。如图2所示,本发明的实施例的数据校验的主要流程包括规则加载、规则解析、数据校验三个阶段,详细内容如下所示:
(1)加载校验规则,具体地,规则加载阶段负责从特定地方加载预先设定的校验规则,可以是从文件加载、从数据对象字段注解加载、从动态配置加载等;
(2)对校验规则进行解析并生成校验字段对应的数据校验器,规则解析阶段负责对规则加载阶段加载的校验规则进行校验、解析,动态生成各个规则对应的数据校验器;
(3)响应于数据校验请求,获取校验字段标识,对每个校验字段,使用校验字段对应的若干个数据校验器进行数据校验,数据校验阶段负责将规则解析阶段生成的数据校验器应用到待校验数据,执行校验后输出校验结果(校验通过或返回对应的错误提示信息)。
图3是根据本发明实施例的数据校验的方法的具体实现流程示意图。如图3所示,本发明实施例的数据校验的具体实现流程包括:
(1)首先针对所需要校验的数据定义对应的校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括字段名称,字段描述和若干个校验规则,一条校验规则由规则名称name、规则校验值val ue、规则校验条件condition和规则校验提示信息message组成;
(2)加载校验配置,对其中的校验规则进行解析并生成校验字段对应的数据校验器;
(3)响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验,遍历所有存在校验规则的字段,依次取出对应字段的数值,首先看是否满足触发条件,若满足,则使用具体规则校验器对字段数值进行校验,若校验成功,则继续进行下一个字段,否则校验失败,条件触发可通过嵌入第三方脚本引擎如JavaScript、Lua脚本引擎的方式实现,本发明自定义了条件解析,使用原生语言执行判断,效率和性能更高,使用计算、存储资源更少;
开始循环遍历字段的执行步骤如下:
步骤1,判断是否存在下个校验字段,若是,则执行步骤2,否则结束;
步骤2,获取校验字段的字段值,并执行步骤3;
步骤3,判断获取字段值的校验字段是否存在下个校验器;若是,则执行步骤4,否则,执行步骤1;
步骤4,判断校验器是否满足规则校验条件,若是,则执行步骤5;否则执行步骤3;
步骤5,判断校验器执行校验是否成功,若是则执行步骤3;否则结束。
图4是根据本发明实施例的数据校验的装置的主要模块示意图,如图4所示,本发明实施例的数据校验的装置400主要包括配置加载模块401、检验器生成模块402、执行校验模块403。
配置加载模块401,用于加载校验配置,校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;
检验器生成模块402,用于对校验规则进行解析并生成校验字段对应的数据校验器;
执行校验模块403,用于响应于数据校验请求,获取校验字段标识,对每个校验字段,使用校验字段对应的若干个数据校验器进行数据校验。
根据本发明的一个实施例,校验器生成模块402还用于:解析校验规则,获取校验规则的规则名称、规则校验值、规则校验条件和规则校验提示信息;根据规则名称从数据校验系统中获取对应的校验器模型;基于规则校验值、规则校验条件和规则校验提示信息,使用校验器模型生成具体的数据校验器;建立校验字段与数据校验器的映射关系以生成校验字段对应的数据校验器。
根据本发明的另一个实施例,校验器生成模块402还用于:通过服务提供发现机制,根据规则名称从数据校验系统中获取对应的校验器模型。
在本发明的实施例中,执行校验模块403还用于:获取校验字段的字段值以及对应的若干个数据校验器;遍历校验字段对应的数据校验器,对于每个数据校验器,判断校验字段是否满足对应的规则校验条件,若满足则使用数据校验器对校验字段的字段值进行校验;若所有数据校验器对校验字段的字段值校验均通过,则校验通过;否则校验不通过,输出数据校验器对应的规则校验提示信息。
在本发明的实施例中,装置400还包括校验机制模块(图中未示出)包括快速失败机制和失效转移机制,用于:当采用快速失败机制时,若任一数据校验器校验不通过,则结束校验,并返回校验不通过的数据校验器对应的规则校验提示信息;当采用失效转移机制时,若有数据校验器校验不通过,仍继续进行校验直到所有数据校验器均完成校验,返回所有校验不通过的数据校验器对应的校验规则提示信息。
在本发明的实施例中,装置还包括规则定义模块(图中未示出),用于:校验规则利用JSON规则进行嵌套定义。
在本发明的实施例中,装置400还包括规则储存模块(图中未示出),用于:将校验规则存储在具有不同加载优先级的不少于一个可存储设备中。
图5示出了可以应用本发明实施例的数据校验的方法或数据校验的装置的示例性系统架构500。
如图5所示,系统架构500可以包括终端设备501、502、503,网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备501、502、503通过网络504与服务器50 5交互,以接收或发送消息等。终端设备501、502、503上可以安装有各种客户端应用,例如数据校验类应用、办公软件应用、计算软件类应用件等(仅为示例)。
终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器505可以是提供各种服务的服务器,例如对用户利用终端设备501、502、503所浏览的数据校验类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的数据校验请求等数据进行分析等处理,并将处理结果(例如校验结果--仅为示例)反馈给终端设备。
需要说明的是,本发明实施例所提供的数据校验的方法一般由服务器505执行,相应地,数据校验的装置一般设置于服务器505中。
应该理解,图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
下面参考图6,其示出了适于用来实现本发明实施例的终端设备或服务器的计算机系统600的结构示意图。图6示出的终端设备或服务器仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分60 8加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CP U)601执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,例如,可以描述为:一种处理器包括配置加载模块、检验器生成模块、执行校验模块。其中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定,例如,检验器生成模块还可以被描述为“用于对校验规则进行解析并生成校验字段对应的数据校验器的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;对所述校验规则进行解析并生成校验字段对应的数据校验器;响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验。
根据本发明实施例的技术方案,采用加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;对所述校验规则进行解析并生成校验字段对应的数据校验器;响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验的技术手段,克服了数据校验过程中遇到的校验规则与数据对象强耦合、校验规则扩展性差、校验规则难以动态维护、校验性能低下影响正常业务的技术问题,实现了校验规则运行时动态更新以及校验规则的动态扩展,无需引入额外规则解析引擎和执行引擎,减少了资源浪费,提高了执行性能,降低了维护成本。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (10)

1.一种数据校验的方法,其特征在于,包括:
加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;
对所述校验规则进行解析并生成校验字段对应的数据校验器;
响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验。
2.根据权利要求1所述的方法,其特征在于,对所述校验规则进行解析并生成校验字段对应的数据校验器包括:
解析所述校验规则,获取所述校验规则的规则名称、规则校验值、规则校验条件和规则校验提示信息;
根据所述规则名称从数据校验系统中获取对应的校验器模型;
基于所述规则校验值、规则校验条件和规则校验提示信息,使用所述校验器模型生成具体的数据校验器;
建立所述校验字段与所述数据校验器的映射关系以生成所述校验字段对应的数据校验器。
3.根据权利要求2所述的方法,其特征在于,根据所述规则名称从数据校验系统中获取对应的校验器模型包括:
通过服务提供发现机制,根据所述规则名称从数据校验系统中获取对应的校验器模型。
4.根据权利要求1或2所述的方法,其特征在于,使用所述校验字段对应的若干个数据校验器进行数据校验包括:
获取所述校验字段的字段值以及对应的若干个数据校验器;
遍历所述校验字段对应的数据校验器,对于每个数据校验器,判断所述校验字段是否满足对应的规则校验条件,若满足则使用所述数据校验器对所述校验字段的字段值进行校验;
若所有数据校验器对所述校验字段的字段值校验均通过,则校验通过;否则校验不通过,输出数据校验器对应的规则校验提示信息。
5.根据权利要求4所述的方法,其特征在于,所述数据校验机制包括快速失败机制和失效转移机制;
当采用快速失败机制时,若任一数据校验器校验不通过,则结束校验,并返回校验不通过的数据校验器对应的规则校验提示信息;
当采用失效转移机制时,若有数据校验器校验不通过,仍继续进行校验直到所有数据校验器均完成校验,返回所有校验不通过的数据校验器对应的校验规则提示信息。
6.根据权利要求1所述的方法,其特征在于,所述校验规则利用J SON规则进行嵌套定义。
7.根据权利要求1所述的方法,其特征在于,所述校验规则存储在具有不同加载优先级的不少于一个可存储设备中。
8.一种数据校验的装置,其特征在于,包括:
配置加载模块,用于加载校验配置,所述校验配置包括不少于一个校验字段,每个校验字段包括若干个校验规则;
检验器生成模块,用于对所述校验规则进行解析并生成校验字段对应的数据校验器;
执行校验模块,用于响应于数据校验请求,获取校验字段标识,对每个校验字段,使用所述校验字段对应的若干个数据校验器进行数据校验。
9.一种数据校验的电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN202110189110.7A 2021-02-19 2021-02-19 一种数据校验的方法和装置 Pending CN113779004A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110189110.7A CN113779004A (zh) 2021-02-19 2021-02-19 一种数据校验的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110189110.7A CN113779004A (zh) 2021-02-19 2021-02-19 一种数据校验的方法和装置

Publications (1)

Publication Number Publication Date
CN113779004A true CN113779004A (zh) 2021-12-10

Family

ID=78835616

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110189110.7A Pending CN113779004A (zh) 2021-02-19 2021-02-19 一种数据校验的方法和装置

Country Status (1)

Country Link
CN (1) CN113779004A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115114176A (zh) * 2022-08-30 2022-09-27 云账户技术(天津)有限公司 用于自动化测试结果的断言方法、装置、介质、设备及程序
CN115185616A (zh) * 2022-09-14 2022-10-14 深圳依时货拉拉科技有限公司 业务规则引擎及业务规则引擎的处理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115114176A (zh) * 2022-08-30 2022-09-27 云账户技术(天津)有限公司 用于自动化测试结果的断言方法、装置、介质、设备及程序
CN115185616A (zh) * 2022-09-14 2022-10-14 深圳依时货拉拉科技有限公司 业务规则引擎及业务规则引擎的处理方法

Similar Documents

Publication Publication Date Title
CN109840429B (zh) 智能合约部署、调用方法和装置
CN110825479A (zh) 页面处理方法、装置、终端设备、服务器和存储介质
CN107643984B (zh) 用于输出信息的方法和装置
CN110688096B (zh) 包含插件的应用程序的构建方法、装置、介质及电子设备
CN110858202A (zh) 数据库查询语句中where子句的生成方法和生成装置
CN113779004A (zh) 一种数据校验的方法和装置
CN113076153A (zh) 一种接口调用方法和装置
KR102583532B1 (ko) 스케줄링 방법, 장치, 기기, 기록 매체 및 컴퓨터 프로그램
CN113541987A (zh) 一种更新配置数据的方法和装置
CN112052152A (zh) 一种模拟测试的方法和装置
CN112084254A (zh) 一种数据同步方法和系统
US20240118933A1 (en) Transaction Method and Apparatus with Fixed Execution Order
CN113722007B (zh) Vpn分支设备的配置方法、装置及系统
CN113760274B (zh) 一种前端组件逻辑注入方法和装置
CN113127430B (zh) 镜像信息处理方法、装置、计算机可读介质及电子设备
CN113742235A (zh) 一种校验代码的方法和装置
CN113312900A (zh) 数据校验的方法和装置
CN114115941A (zh) 资源发送方法、页面渲染方法、装置、电子设备和介质
CN111209014A (zh) 一种参数校验的方法和装置
US11861045B2 (en) Method, electronic device, and computer program product for system feature management
CN113760316A (zh) 一种应用的配置系统和方法
CN109446183B (zh) 全局防重的方法和装置
CN109376023B (zh) 用于生成调用信息、发布返回码组的方法和设备
CN111291038B (zh) 一种数据查询方法及装置
CN107911248B (zh) 升级方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination