CN113778725A - 一种数据校验方法和装置 - Google Patents
一种数据校验方法和装置 Download PDFInfo
- Publication number
- CN113778725A CN113778725A CN202010495396.7A CN202010495396A CN113778725A CN 113778725 A CN113778725 A CN 113778725A CN 202010495396 A CN202010495396 A CN 202010495396A CN 113778725 A CN113778725 A CN 113778725A
- Authority
- CN
- China
- Prior art keywords
- interface
- data
- response data
- annotation
- verification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013524 data verification Methods 0.000 title claims abstract description 138
- 238000000034 method Methods 0.000 title claims abstract description 136
- 230000004044 response Effects 0.000 claims abstract description 137
- 230000008569 process Effects 0.000 claims abstract description 29
- 238000012795 verification Methods 0.000 claims description 57
- 238000004590 computer program Methods 0.000 claims description 10
- 230000014759 maintenance of location Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000010200 validation analysis Methods 0.000 description 3
- 235000010627 Phaseolus vulgaris Nutrition 0.000 description 2
- 244000046052 Phaseolus vulgaris Species 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 235000012149 noodles Nutrition 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
- G06F8/31—Programming languages or programming paradigms
- G06F8/316—Aspect-oriented programming techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/73—Program documentation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- Library & Information Science (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种数据校验方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:创建切面,其中,切面的切点设置为使用注解标记的目标接口,切面的通知实现对目标接口输出的响应数据进行校验的方法;当服务端接口接收到访问请求时,将服务端接口与切点设置的目标接口进行匹配;在确定服务端接口为目标接口时,执行通知中的方法,获取服务端接口输出的响应数据,以及为服务端接口设置的数据校验规则,根据数据校验规则对响应数据进行校验。该实施方式在不更改应用程序原代码的前提下,重新定义了数据校验流程,同时使得数据校验规则与应用程序相解耦,当业务场景发生变化时,可以灵活调整数据校验规则。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据校验方法和装置。
背景技术
目前,对接口的响应数据的校验一般使用Hibernate Validation或者SpringValidation校验框架实现。其中,Hibernate Validation是一个后端验证框架,遵循BeanValidation规范,并在其基础上进行了附加扩展,包含@Null、@Future、@Range等注解。Spring Validation对Hibernate Validation进行了二次封装,在其Springmvc模块中添加了自动校验,并将校验信息封装进了特定的类中。
虽然Hibernate Validation和Spring Validation校验框架将数据校验逻辑从业务逻辑中解耦,但是使用这两个校验框架进行数据校验时,需要把数据校验规则硬编码在应用程序中,一旦业务场景需要调整,数据校验规则也要调整,应用程序也需要重新打包部署,才能使新数据校验规则生效。而且如果使用这两个校验框架实现数据校验逻辑,后续每次调用接口时,都会对接口所下发的响应数据进行校验。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
数据校验规则硬编码在应用程序中,不能根据业务场景的变化进行灵活调整;每次调用接口时均校验接口下发的响应数据,会降低接口性能。
发明内容
有鉴于此,本发明实施例提供一种数据校验方法和装置,利用切面和预先设置的数据校验规则,对被注解标记的接口所输出的响应数据进行校验,在不更改应用程序原代码的前提下,重新定义了数据校验流程,同时使得数据校验规则与应用程序相解耦,当业务场景发生变化时,可以灵活调整数据校验规则。
为实现上述目的,根据本发明实施例的一个方面,提供了一种数据校验方法。
本发明实施例的一种数据校验方法,包括:创建切面,其中,所述切面的切点设置为使用注解标记的目标接口,所述切面的通知实现对所述目标接口输出的响应数据进行校验的方法;当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配;在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
可选地,创建切面,包括:采用所述注解定义所述切点;其中,所述切点的表达式为所述注解的全路径名;定义所述通知,并在所述通知中添加用于获取所述响应数据的第一子方法,以及用于校验所述响应数据的第二子方法。
可选地,在定义所述通知过程中,所述方法还包括:在所述通知中添加用于判断是否对所述响应数据进行校验的第三子方法;其中,所述第三子方法的实现如下:获取所述目标接口的调用次数,以及预设置的数据校验次数;根据所述调用次数和所述数据校验次数,判断是否对所述响应数据进行校验;在需要对所述响应数据进行校验的情况下,调用所述第二子方法。
可选地,创建切面的步骤之前,所述方法还包括:定义所述注解,使用所述注解对所述目标接口进行标记。
可选地,定义所述注解,包括:使用元注解声明所述注解的使用范围和保留策略;声明注解名和成员变量,为所述成员变量指定初始值;其中,所述成员变量为所述目标接口的数据校验次数。
可选地,获取为所述服务端接口设置的数据校验规则的步骤之前,所述方法还包括:获取所述服务端接口输出响应数据的数据格式;根据所述数据格式和业务场景,配置所述服务端接口的数据校验规则。
可选地,所述方法还包括:根据对所述响应数据进行校验所得到的校验结果,判断所述响应数据是否通过校验;如果所述响应数据通过校验,则返回所述响应数据至客户端;如果所述响应数据未通过校验,则输出告警信息。
为实现上述目的,根据本发明实施例的另一方面,提供了一种数据校验装置。
本发明实施例的一种数据校验装置,包括:创建模块,用于创建切面,其中,所述切面的切点设置为使用注解标记的目标接口,所述切面的通知实现对所述目标接口输出的响应数据进行校验的方法;匹配模块,用于当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配;校验模块,用于在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
可选地,所述创建模块,还用于:采用所述注解定义所述切点;其中,所述切点的表达式为所述注解的全路径名;以及定义所述通知,并在所述通知中添加用于获取所述响应数据的第一子方法,以及用于校验所述响应数据的第二子方法。
可选地,所述创建模块,还用于:在定义所述通知过程中,在所述通知中添加用于判断是否对所述响应数据进行校验的第三子方法;其中,所述第三子方法的实现如下:获取所述目标接口的调用次数,以及预设置的数据校验次数;根据所述调用次数和所述数据校验次数,判断是否对所述响应数据进行校验;在需要对所述响应数据进行校验的情况下,调用所述第二子方法。
可选地,所述装置还包括:定义模块,用于定义所述注解,使用所述注解对所述目标接口进行标记。
可选地,所述定义模块,还用于使用元注解声明所述注解的使用范围和保留策略;以及声明注解名和成员变量,为所述成员变量指定初始值;其中,所述成员变量为所述目标接口的数据校验次数。
可选地,所述装置还包括:配置模块,用于获取所述服务端接口输出响应数据的数据格式;以及根据所述数据格式和业务场景,配置所述服务端接口的数据校验规则。
可选地,所述组装还包括:告警模块,用于根据对所述响应数据进行校验所得到的校验结果,判断所述响应数据是否通过校验;如果所述响应数据通过校验,则返回所述响应数据至客户端;如果所述响应数据未通过校验,则输出告警信息。
为实现上述目的,根据本发明实施例的再一方面,提供了一种电子设备。
本发明实施例的一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例的一种数据校验方法。
为实现上述目的,根据本发明实施例的再一方面,提供了一种计算机可读介质。
本发明实施例的一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例的一种数据校验方法。
上述发明中的一个实施例具有如下优点或有益效果:利用切面和预先设置的数据校验规则,对被注解标记的接口所输出的响应数据进行校验,在不更改应用程序原代码的前提下,重新定义了数据校验流程;同时使得数据校验规则与应用程序相解耦,当业务场景发生变化时,可以灵活调整数据校验规则,调整数据校验规则后只需重新编译切面代码即可使用新数据校验规则对响应数据进行校验;通过注解定义切点,避免在配置文件配置接口路径,且避免添加大量切点定义的代码。
上述发明中的一个实施例具有如下优点或有益效果:通过数据校验次数确定是否需要校验响应数据,无需每次调用接口时均校验响应数据,提高接口性能;使用注解对目标接口进行标记,可以使得服务端只对被标记接口的响应数据进行数据校验;在注解中设置数据校验次数,使得数据校验次数可以灵活调整,在满足业务需求的前提下,提高接口性能;通过在后台配置数据校验规则,保证后续可以根据业务场景灵活调整数据校验规则;在数据校验不符合业务场景时,向运营人员输出告警信息,以使得运营人员能够快速收到报警问题,并及时解决。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明一实施例的数据校验方法的主要步骤的示意图;
图2是根据本发明再一实施例的数据校验方法的主要流程示意图;
图3是根据本发明又一实施例的数据校验方法的主要流程示意图;
图4是将本发明实施例的数据校验方法应用于数据校验系统的处理过程示意图;
图5是根据本发明实施例的数据校验装置的主要模块的示意图;
图6是本发明实施例可以应用于其中的示例性系统架构图;
图7是适用于来实现本发明实施例的电子设备的计算机装置的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
服务端接口一般是基于HTTP协议的接口,为了判断服务端接口下发的响应数据是否符合业务场景,一般通过判断HTTP状态码和对下发的响应数据进行逐一验证的方式。现有技术通常使用Hibernate Validation或者Spring Validation校验框架对响应数据进行校验,且在校验时,需要通过注解把校验规则硬编码在应用程序中,示例如下:
上述校验方式不能根据业务场景的变化来灵活地调整数据校验规则,不能对响应数据的校验频次进行灵活设置,且当响应数据不符合业务场景时,运营人员也不能及时收到报警。针对现有技术的上述技术问题,本发明实施例提供了一种数据校验方法,具体实现如下。
下面对本发明实施例涉及的术语进行解释。
Bean Validation,是Java定义的一套基于注解的数据校验规范。
@Null,作用为被注释的元素必须为null。
@Future,作用为被注释的元素必须是一个将来的日期。
@Range,作用为被注释的元素必须在合适的范围内。
通知:定义了切面是什么以及何时使用。
切点:用于准确定位应该在什么地方应用切面的通知。
切面:是通知和切入点的结合。通知说明了干什么和什么时候干,切点说明了在哪干(指定到底是哪个方法),这就是一个完整的切面定义。
图1是根据本发明一实施例的数据校验方法的主要步骤的示意图。如图1所示,本发明实施例的数据校验方法,主要包括如下步骤:
步骤S101:创建切面。切面的创建包括定义切点和定义通知两个部分。切点为使用注解标记的目标接口,通知中实现对目标接口输出的响应数据进行校验的方法。目标接口即需要进行数据校验的接口。预先使用注解对目标接口进行标记,然后采用面向切面编程(Aspect Oriented Programming,AOP)的技术创建切面。
步骤S102:当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配。客户端向服务端发起访问请求,调用服务端接口。服务端接受访问请求,并通过服务端接口处理访问请求。使用切面识别该服务端接口是否为切点设置的目标接口,如果该服务端接口是切点设置的目标接口,则两者相匹配。
步骤S103:在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。在服务端接口是切点设置的目标接口的情况下,执行切面的通知中实现的方法,以使得切面获取该服务端接口输出的响应数据,并获取为该服务端接口设置的数据校验规则,之后根据数据校验规则对响应数据进行校验。
图2是根据本发明再一实施例的数据校验方法的主要流程示意图。如图2所示,本发明实施例的数据校验方法,主要包括如下步骤:
步骤S201:定义注解。注解可以理解为代码里的特殊标记,这些标记可以在编译,类加载,运行时被读取,并执行相应的处理。通过注解开发人员可以在不改变原有代码和逻辑的情况下在源代码中嵌入补充信息。注解的定义包括两部分内容:一是注解名,二是注解包含的类型元素。使用关键字@interface声明一个注解。注解的语法如下:
[public|缺省]@interface注解名(){
返回类型元素名()default默认值;
}
步骤S202:使用注解对目标接口进行标记。研发人员根据具体业务场景梳理出需要对响应数据进行校验的接口作为目标接口。假设注解名为JsonCheck,则可以使用Java注解@JsonCheck对目标接口进行标记。具体实现可以如下:
上述代码中supermarketIndex方法即为被@JsonCheck注解标记的目标接口的方法。
步骤S203:根据服务端接口输出响应数据的数据格式和业务场景,为服务端接口配置数据校验规则。获取服务端接口输出响应数据的数据格式,根据数据格式和业务场景,为该服务端接口配置数据校验规则。实施例中,通过在应用程序的代码中添加日志代码来获取响应数据的数据格式,一般为json格式。其中,json是一种轻量级的数据交换格式。
业务场景比如:下发价格在某个区间内的sku(stock keeping unit,库存量单位),通过数据校验规则对这些sku的价格进行校验,是否符合区间要求;再比如:下发优惠券,通过数据校验规则对优惠券的折扣金额进行校验,是否达到优惠力度。
在配置数据校验规则时,可以使用JSON Schema方式,在内容管理系统(ContentManagement System,CMS)配置,将数据校验规则的内容以文本形式保存,并以接口名命名。其中,JSON Schema可以解决有关数据验证的问题,比如:值的数据类型是否正确:可以具体规定一个值是数字、字符串等类型;是否包含所需的数据:可以规定哪些数据是需要的,哪些是不需要的;值的形式是不是符合业务场景:可以指定范围、最小值和最大值。
以对User类的实例进行校验为例,数据校验规则可以如下:
上述数据校验规则中name、age属性即可体现业务场景。该例对应的业务场景为:筛选出年龄在18-60岁之间的用户。
当业务场景发生变化,需要调整某个服务端接口的数据校验规则时,可以在CMS后台修改该服务端接口对应的数据校验规则的内容,在保存后,修改后的数据校验规则立即生效。仍旧以User类为例,如果业务场景为筛选出年龄在18-30岁之间的用户,则可以将数据校验规则中的exclusiveMaximum字段由60改为30。
步骤S204:采用面向切面编程的技术定义切点和通知,创建切面。定义切点为使用注解标记的目标接口。定义通知,并在定义通知的过程中,在通知中添加用于获取响应数据的第一子方法,以及用于校验响应数据的第二子方法。定义好切点和通知,即完成切面的创建。
定义切点时,可以通过在配置文件中编写切点函数excecution()实现,且该切点函数中设置有接口路径;也可以采用注解定义切点。实施例中,采用注解定义切点,其中,切点的表达式为注解的全路径名。通过注解定义切点,可以在编写代码的过程中灵活的设置切点,避免在定义切点时,尤其是需要定义大量切点时,需要将接口路径在配置文件配置,并添加大量接口代码。采用注解定义切点的实现代码如下:
其中,注解@annotation用于声明以注解的方式来定义切点;“com.jd.market.tool.jsonCheck.JsonCheck”即为注解的全路径名。
本实施例中,切面包含的主要功能是:当被注解标记的接口被访问时,切面获取接口输出的响应数据(对应第一子方法),读取接口所对应的数据校验规则,然后根据数据校验规则对响应数据进行校验(对应第二子方法)。在一优选的实施例中,第二子方法的具体实现可以为:
如果返回的响应数据为空,则校验不通过;
如果返回的响应数据不为空,则对响应数据进行格式化处理,读取接口所对应的数据校验规则,然后根据数据校验规则对格式化后的响应数据进行校验,返回校验结果。
步骤S205:当服务端接口接收到访问请求时,通过切面识别服务端接口是否为目标接口,如果服务端接口为目标接口,则执行步骤S206;如果服务端接口不是目标接口,则结束本流程。切面是通过运行期动态代理实现程序功能的一种技术,对被注解标记的所有目标接口进行了动态代理。服务端接口接收到来自客户端的访问请求后,可以通过切面判断该服务端接口是否为被注解标记的目标接口。
步骤S206:通过切面获取服务端接口输出的响应数据,以及对应的数据校验规则,根据数据校验规则对响应数据进行校验,得到校验结果。如果服务端接口是被注解标记的目标接口,则执行切面中的方法,用于获取服务端接口下发的响应数据,并基于接口名读取步骤S203中为该接口配置的数据校验规则,然后根据数据校验规则对响应数据进行校验。
步骤S207:根据校验结果判断响应数据是否通过校验,如果通过校验,则执行步骤S208;如果未通过校验,则执行步骤S209。
步骤S208:返回响应数据至客户端,结束本流程。如果校验结果符合业务场景,则返回响应数据至客户端。
步骤S209:输出告警信息,结束本流程。告警信息可以是该服务端接口对应的错误明细。如果校验结果不符合业务场景,则应用程序可以将根据数据校验规则反馈出的错误明细,通过邮件、短信等形式告知运营人员,以使得运营人员可以及时处理。
该实施例中,使用注解对目标接口进行标记,使用JSON Schema方式设定数据校验规则,并采用面向切面编程技术,通过自定义注解来定义切点和横切面注入的方式,对接口下发的响应数据进行校验,使得本实施例可以根据业务场景的变化灵活地调整数据校验规则。而且应用程序采用切面注入的方式,对响应数据进行校验,在将数据校验和业务逻辑相解耦的前提下,使得切面内容可以复用。
上述实施例中虽然可以灵活地调整数据校验规则,但是目标接口每调用一次,均需要对目标接口输出的响应数据进行校验,降低了接口性能。故在一优选的实施例中,可以在定义注解时设定数据校验次数,并在切面的通知中增加用于判断是否对响应数据进行校验的第三子方法,以使得本实施例可以灵活地调整对目标接口所输出响应数据的数据校验次数。下面结合图3对该实施例进行说明。
图3是根据本发明又一实施例的数据校验方法的主要流程示意图。如图3所示,本发明实施例的数据校验方法,主要包括如下步骤:
步骤S301:采用元注解定义注解,并在注解中设定被注解标记的目标接口的数据校验次数。注解定义的过程如下:使用Java的元注解声明注解的使用范围和保留策略,并声明注解名和成员变量。在一优选的实施例中,可以为成员变量指定初始值。
元注解是指注解的注解,包括@Retention、@Target、@Document和@Inherited四种。其中,@Retention定义注解的保留策略,@Target定义注解的使用范围,@Document说明该注解将被包含在javadoc(是用于生成API文档的技术)中,@Inherited说明子类可以继承父类中的该注解。实施例中根据业务需求选择若干元注解对注解进行定义即可。实施例中定义的注解如下所示:
上述代码中JsonCheck为注解名;rate为成员变量,用于设定被注解标记的目标接口的数据校验次数。实施例中,数据校验次数根据接口业务数据变化来设定,如果接口业务数据变化很频繁,则需将该次数设置地相对大些;反之,设置的相对小些。该代码中用default设定目标接口的数据校验次数占比为50%,即目标接口每调用2次,则对该目标接口输出的响应数据校验一次。
步骤S302:使用注解对目标接口进行标记。该步骤的具体实现如步骤S202,此处不再赘述。
步骤S303:根据服务端接口输出响应数据的数据格式和业务场景,为服务端接口配置数据校验规则。该步骤的具体实现如步骤S203,此处不再赘述。
步骤S304:采用面向切面编程的技术,并通过注解定义切点,定义环绕通知,创建切面。实施例中使用Spring的注解@Component、@Aspect来创建切面。切面的创建包括定义切点和定义通知两个部分。定义切点的实现如步骤S204所述。该实施例的切面相比步骤S204的切面,在通知中增加了用于判断是否对响应数据进行校验的第三子方法。
本实施例中定义的通知为环绕通知,即@Around标注,在目标方法执行前和执行后,都需要执行通知定义的任务。该通知实现的功能如下(该功能中除第一子方法和第二子方法外,均由第三子方法实现):
从分布式缓存中获取该切点的调用次数,将调用次数加1后存入分布式缓存;执行第一子方法来获取切点方法的返回数据(即响应数据);从注解中获取该切点的数据校验次数占比;根据该切点的调用次数和数据校验次数占比,判断是否对切点的返回数据进行校验;如果需要校验,则执行第二子方法;如果不需要校验,则返回校验通过的结果。
步骤S305:当服务端接口接收到访问请求时,通过切面识别服务端接口是否为目标接口,如果服务端接口为目标接口,则执行步骤S306;如果服务端接口不是目标接口,则结束本流程。该步骤的具体实现如步骤S205,此处不再赘述。
步骤S306:通过切面获取服务端接口输出的响应数据,以及对应的数据校验规则,根据数据校验规则和注解中设置的数据校验次数对响应数据进行校验,得到校验结果。执行切面中的方法,从而获取该服务端接口的调用次数并加1,获取该服务端接口的响应数据和数据校验次数占比,判断是否需要对响应数据进行校验,如果需要校验,则根据数据校验规则对对响应数据进行校验。如果无需校验,则可以直接返回校验通过的结果。
比如,注解中设置数据校验次数占比为50%,即接口每调用2次,则校验响应数据1次。一旦接口被调用一次,则调用次数的计数值加1,并存入分布式缓存中。判断是否需要对接口返回的响应数据进行校验,可以根据分布式缓存中调用次数的计数值确定,计数值为偶数,则校验;计数值为奇数,则不校验。
步骤S307:根据校验结果判断响应数据是否通过校验,如果通过校验,则执行步骤S308;如果未通过校验,则执行步骤S309。
步骤S308:返回响应数据至客户端,结束本流程。如果校验结果符合业务场景,则返回响应数据至客户端。
步骤S309:输出告警信息,结束本流程。如果校验结果不符合业务场景,则发送告警信息,通知报告运营人员。
图4是将本发明实施例的数据校验方法应用于数据校验系统的处理过程示意图。如图4所示,本发明实施例的数据校验系统执行数据校验方法的过程,数据校验系统由客户端和服务端实现,主要包括如下步骤:
步骤S401:客户端向服务端发送访问请求,调用服务端接口。
步骤S402:服务端接受访问请求,由服务端接口处理访问请求。
步骤S403:服务端的切面在确定服务端接口为目标接口时,获取服务端接口输出的响应数据,以及对应的数据校验规则,根据数据校验规则对响应数据进行校验。步骤S403的具体实现见步骤S205-S206,或者步骤S305-S306。
步骤S404:服务端判断响应数据是否通过校验,如果通过校验,则执行步骤S405;如果未通过校验,则执行步骤S406。服务端根据校验结果判断响应数据是否通过校验。
步骤S405:服务端返回响应数据至客户端,结束本流程。如果校验结果符合业务场景,则服务端返回响应数据至客户端。
步骤S406:服务端输出告警信息,结束本流程。如果校验结果不符合业务场景,则服务端发送告警信息,通知报告运营人员。
图5是根据本发明实施例的数据校验装置的主要模块的示意图。如图5所示,本发明实施例的数据校验装置500,主要包括:
创建模块501,用于创建切面。切面的创建包括定义切点和定义通知两个部分。切点为使用注解标记的目标接口,通知中实现对目标接口输出的响应数据进行校验的方法。目标接口即需要进行数据校验的接口。预先使用注解对目标接口进行标记,然后采用AOP技术创建切面。
匹配模块502,用于当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配。客户端向服务端发起访问请求,调用服务端接口。服务端接受访问请求,并通过服务端接口处理访问请求。使用切面识别该服务端接口是否为切点设置的目标接口,如果该服务端接口是切点设置的目标接口,则两者相匹配。
校验模块503,用于在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
在服务端接口是切点设置的目标接口的情况下,执行切面的通知中实现的方法,以使得切面获取该服务端接口输出的响应数据,并获取为该服务端接口设置的数据校验规则,之后根据数据校验规则对响应数据进行校验。
另外,本发明实施例的数据校验装置500还可以包括:定义模块、配置模块和告警模块(图5中未示出)。其中,定义模块,用于定义所述注解,使用所述注解对所述目标接口进行标记。配置模块,用于获取所述服务端接口输出响应数据的数据格式;根据所述数据格式和业务场景,配置所述服务端接口的数据校验规则。
告警模块,用于根据对所述响应数据进行校验所得到的校验结果,判断所述响应数据是否通过校验;如果所述响应数据通过校验,则返回所述响应数据至客户端;以及如果所述响应数据未通过校验,则输出告警信息。
从以上描述可以看出,利用切面和预先设置的数据校验规则,对被注解标记的接口所输出的响应数据进行校验,在不更改应用程序原代码的前提下,重新定义了数据校验流程;同时使得数据校验规则与应用程序相解耦,当业务场景发生变化时,可以灵活调整数据校验规则,调整数据校验规则后只需重新编译切面代码即可使用新数据校验规则对响应数据进行校验。
图6示出了可以应用本发明实施例的数据校验方法或数据校验装置的示例性系统架构600。
如图6所示,系统架构600可以包括终端设备601、602、603,网络604和服务器605。网络604用以在终端设备601、602、603和服务器605之间提供通信链路的介质。网络604可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备601、602、603通过网络604与服务器605交互,以接收或发送消息等。终端设备601、602、603上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备601、602、603可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器605可以是提供各种服务的服务器,例如对管理员利用终端设备601、602、603发送的访问请求进行处理的后台管理服务器。后台管理服务器可以处理访问请求,创建切面,通过切面获取响应数据,根据数据校验规则校验响应数据,并将处理结果(例如校验结果)反馈给终端设备。
需要说明的是,本申请实施例所提供的数据校验方法一般由服务器605执行,相应地,数据校验装置一般设置于服务器605中。
应该理解,图6中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
根据本发明的实施例,本发明还提供了一种电子设备和一种计算机可读介质。
本发明的电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例的一种数据校验方法。
本发明的计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例的一种数据校验方法。
下面参考图7,其示出了适用于来实现本发明实施例的电子设备的计算机系统700的结构示意图。图7示出的电子设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示,计算机系统700包括中央处理单元(CPU)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有计算机系统700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
以下部件连接至I/O接口705:包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
特别地,根据本发明公开的实施例,上文主要步骤图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行主要步骤图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元(CPU)701执行时,执行本发明的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括创建模块、匹配模块和校验模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,创建模块还可以被描述为“创建切面的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:创建切面,其中,所述切面的切点设置为使用注解标记的目标接口,所述切面的通知实现对所述目标接口输出的响应数据进行校验的方法;当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配;在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
根据本发明实施例的技术方案,利用切面和预先设置的数据校验规则,对被注解标记的接口所输出的响应数据进行校验,在不更改应用程序原代码的前提下,重新定义了数据校验流程;同时使得数据校验规则与应用程序相解耦,当业务场景发生变化时,可以灵活调整数据校验规则,调整数据校验规则后只需重新编译切面代码即可使用新数据校验规则对响应数据进行校验。
上述产品可执行本发明实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明实施例所提供的方法。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (11)
1.一种数据校验方法,其特征在于,包括:
创建切面,其中,所述切面的切点设置为使用注解标记的目标接口,所述切面的通知实现对所述目标接口输出的响应数据进行校验的方法;
当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配;
在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
2.根据权利要求1所述的方法,其特征在于,创建切面,包括:
采用所述注解定义所述切点;其中,所述切点的表达式为所述注解的全路径名;
定义所述通知,并在所述通知中添加用于获取所述响应数据的第一子方法,以及用于校验所述响应数据的第二子方法。
3.根据权利要求2所述的方法,其特征在于,在定义所述通知过程中,所述方法还包括:
在所述通知中添加用于判断是否对所述响应数据进行校验的第三子方法;其中,所述第三子方法的实现如下:
获取所述目标接口的调用次数,以及预设置的数据校验次数;
根据所述调用次数和所述数据校验次数,判断是否对所述响应数据进行校验;
在需要对所述响应数据进行校验的情况下,调用所述第二子方法。
4.根据权利要求1所述的方法,其特征在于,创建切面的步骤之前,所述方法还包括:
定义所述注解,使用所述注解对所述目标接口进行标记。
5.根据权利要求4所述的方法,其特征在于,定义所述注解,包括:
使用元注解声明所述注解的使用范围和保留策略;
声明注解名和成员变量,为所述成员变量指定初始值;其中,所述成员变量为所述目标接口的数据校验次数。
6.根据权利要求1所述的方法,其特征在于,获取为所述服务端接口设置的数据校验规则的步骤之前,所述方法还包括:
获取所述服务端接口输出响应数据的数据格式;
根据所述数据格式和业务场景,配置所述服务端接口的数据校验规则。
7.根据权利要求1至6的任一项所述的方法,其特征在于,所述方法还包括:
根据对所述响应数据进行校验所得到的校验结果,判断所述响应数据是否通过校验;
如果所述响应数据通过校验,则返回所述响应数据至客户端;
如果所述响应数据未通过校验,则输出告警信息。
8.一种数据校验装置,其特征在于,包括:
创建模块,用于创建切面,其中,所述切面的切点设置为使用注解标记的目标接口,所述切面的通知实现对所述目标接口输出的响应数据进行校验的方法;
匹配模块,用于当服务端接口接收到访问请求时,将所述服务端接口与所述切点设置的目标接口进行匹配;
校验模块,用于在确定所述服务端接口为所述目标接口时,执行所述通知中的方法,获取所述服务端接口输出的响应数据,以及为所述服务端接口设置的数据校验规则,根据所述数据校验规则对所述响应数据进行校验。
9.根据权利要求8所述的装置,其特征在于,所述创建模块,还用于:
采用所述注解定义所述切点;其中,所述切点的表达式为所述注解的全路径名;
定义所述通知,并在所述通知中添加用于获取所述响应数据的第一子方法,以及用于校验所述响应数据的第二子方法。
10.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
11.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010495396.7A CN113778725A (zh) | 2020-06-03 | 2020-06-03 | 一种数据校验方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010495396.7A CN113778725A (zh) | 2020-06-03 | 2020-06-03 | 一种数据校验方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113778725A true CN113778725A (zh) | 2021-12-10 |
Family
ID=78834171
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010495396.7A Pending CN113778725A (zh) | 2020-06-03 | 2020-06-03 | 一种数据校验方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113778725A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114666258A (zh) * | 2022-03-22 | 2022-06-24 | 阿波罗智联(北京)科技有限公司 | 接口测试方法、装置、电子设备和介质 |
CN115114502A (zh) * | 2022-06-27 | 2022-09-27 | 康键信息技术(深圳)有限公司 | 一种接口调用方法及装置、存储介质、计算机设备 |
CN117194094A (zh) * | 2023-11-07 | 2023-12-08 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、存储介质及计算机设备 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105357027A (zh) * | 2015-09-24 | 2016-02-24 | 四川长虹电器股份有限公司 | 基于大数据的轻量级数据服务总线系统 |
CN107204977A (zh) * | 2017-05-23 | 2017-09-26 | 努比亚技术有限公司 | 接口安全校验方法及装置、计算机可读存储介质 |
WO2019153544A1 (zh) * | 2018-02-12 | 2019-08-15 | 平安科技(深圳)有限公司 | 注解后端校验方法、装置、计算机设备及存储介质 |
CN110413269A (zh) * | 2019-06-18 | 2019-11-05 | 深圳壹账通智能科技有限公司 | 接口编码方法、服务器及计算机可读存储介质 |
CN110417615A (zh) * | 2019-06-21 | 2019-11-05 | 中国平安财产保险股份有限公司 | 校验开关控制方法、装置、设备及计算机可读存储介质 |
CN110765422A (zh) * | 2018-07-25 | 2020-02-07 | 北京京东尚科信息技术有限公司 | 一种参数校验方法和装置 |
CN111212066A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种动态分配请求验证方法 |
-
2020
- 2020-06-03 CN CN202010495396.7A patent/CN113778725A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105357027A (zh) * | 2015-09-24 | 2016-02-24 | 四川长虹电器股份有限公司 | 基于大数据的轻量级数据服务总线系统 |
CN107204977A (zh) * | 2017-05-23 | 2017-09-26 | 努比亚技术有限公司 | 接口安全校验方法及装置、计算机可读存储介质 |
WO2019153544A1 (zh) * | 2018-02-12 | 2019-08-15 | 平安科技(深圳)有限公司 | 注解后端校验方法、装置、计算机设备及存储介质 |
CN110765422A (zh) * | 2018-07-25 | 2020-02-07 | 北京京东尚科信息技术有限公司 | 一种参数校验方法和装置 |
CN110413269A (zh) * | 2019-06-18 | 2019-11-05 | 深圳壹账通智能科技有限公司 | 接口编码方法、服务器及计算机可读存储介质 |
CN110417615A (zh) * | 2019-06-21 | 2019-11-05 | 中国平安财产保险股份有限公司 | 校验开关控制方法、装置、设备及计算机可读存储介质 |
CN111212066A (zh) * | 2019-12-31 | 2020-05-29 | 浙江工业大学 | 一种动态分配请求验证方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114666258A (zh) * | 2022-03-22 | 2022-06-24 | 阿波罗智联(北京)科技有限公司 | 接口测试方法、装置、电子设备和介质 |
CN114666258B (zh) * | 2022-03-22 | 2023-11-07 | 阿波罗智联(北京)科技有限公司 | 接口测试方法、装置、电子设备和介质 |
CN115114502A (zh) * | 2022-06-27 | 2022-09-27 | 康键信息技术(深圳)有限公司 | 一种接口调用方法及装置、存储介质、计算机设备 |
CN117194094A (zh) * | 2023-11-07 | 2023-12-08 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、存储介质及计算机设备 |
CN117194094B (zh) * | 2023-11-07 | 2024-07-23 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、存储介质及计算机设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113778725A (zh) | 一种数据校验方法和装置 | |
US20090248801A1 (en) | Automatic Change Detection and Notification System and Method | |
CN107491382B (zh) | 日志输出方法和装置 | |
CN109284198A (zh) | 一种校验数据的方法和装置 | |
CN111666293A (zh) | 数据库访问方法和装置 | |
CN110738036A (zh) | 用于生成信息的方法和装置 | |
CN113760729A (zh) | 一种代码检测方法和装置 | |
CN112559024A (zh) | 一种生成交易码变更列表的方法和装置 | |
CN112948726A (zh) | 一种处理异常信息的方法、装置和系统 | |
CN113742235A (zh) | 一种校验代码的方法和装置 | |
CN112948306A (zh) | 扩展系统接口的方法和装置 | |
CN113779004A (zh) | 一种数据校验的方法和装置 | |
CN112346774A (zh) | 一种应用安装包的生成方法和装置 | |
CN114625458A (zh) | 页面数据的处理方法、装置、电子设备和存储介质 | |
CN109901934A (zh) | 生成接口帮助文档的方法和装置 | |
CN113111079A (zh) | 一种数据库执行语句生成方法和装置 | |
CN113535322A (zh) | 一种表单校验方法和装置 | |
CN112905970A (zh) | 权限校验方法、装置、计算机可读存储介质及电子设备 | |
CN113761038A (zh) | 数据源读写分离方法和装置 | |
CN111949472A (zh) | 一种记录应用日志的方法及装置 | |
CN112241332A (zh) | 一种接口补偿的方法和装置 | |
CN118069539B (zh) | 数据处理的方法、装置、电子设备和存储介质 | |
CN113900895B (zh) | 信息处理方法、信息处理装置、存储介质与电子设备 | |
CN109376023B (zh) | 用于生成调用信息、发布返回码组的方法和设备 | |
CN115955327A (zh) | 一种基于文档系统的拦截鉴权方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |