CN111338817B - 一种接口预处理方法及装置 - Google Patents

Abstract

本申请公开了一种接口预处理方法及装置，方法包括：接收调用系统发送的第一数据，第一数据中包括规则标识；依据规则标识从多个预置的校验规则中确定出目标校验规则；确定接口中的数据变量是否满足目标校验规则；若满足，依据与目标校验规则对应的格式化规则，对满足目标校验规则的数据变量进行格式化处理；将格式化处理后的数据变量存储并返回至调用系统。所述接口预处理方法及装置，将数据校验规则放到接口中做处理，接口中可以预置适合多种系统的多种处理规则，这样，不同的调用系统可以从接口中选择适合自身的校验规则和处理规则，从而避免了接口调用方针对要求统一数据规范的接口需要做重复处理的问题，有助于提升开发效率。

Description

一种接口预处理方法及装置

技术领域

本发明涉及数据处理技术，更具体的说，是涉及一种接口预处理方法及装置。

背景技术

接口是能够将具有特定功能的程序封装起来，提供给其他系统调用的一种抽象实体。其他系统只需要按照接口的输入要求输入指定的数据，然后调用接口，便可得到相应的输出信息，实现特定的功能。

接口设计需要考虑统一的数据规范问题，因此会涉及到常见的数据校验问题。也就是保证数据符合要求的数据规范，并对不符合规范的数据做报警反馈处理。现有的校验模块设计大多是被动的，根据数据来源系统做特定的数据校验；一个系统有一种统一的校验规则，所有数据都要满足唯一的校验规则。但是，在接口设计中，一个设计好的接口可能会被很多个系统调用，并且这些系统的源数据格式可能不一致。而现有技术根据指定的业务系统确定合适的校验规则的方式，较为直观，但使用场景有限。对于具有统一数据规范的接口服务来说，如果在数据预处理中将数据的校验规则唯一确定，所有的上游调用系统均要严格按照接口数据要求上送数据，则接口的灵活性就显得有些欠佳。

发明内容

有鉴于此，本发明提供了一种接口预处理方法及装置，以克服现有技术中接口灵活性差的问题。

为实现上述目的，本发明提供如下技术方案：

一种接口预处理方法，包括：

接收调用系统发送的第一数据，所述第一数据中包括规则标识；

依据所述规则标识从多个预置的校验规则中确定出目标校验规则；

确定接口中的数据变量是否满足所述目标校验规则；

若满足，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理；

将格式化处理后的数据变量存储并返回至所述调用系统。

可选的，还包括：

预先配置多个校验规则，其中每一个校验规则具备唯一的规则标识。

可选的，所述确定接口中的数据变量是否满足所述目标校验规则，包括：

获取数据变量；

将所述数据变量与所述目标校验规则关联；

确定每一个数据变量的实际值；

确定每一个所述实际值是否满足所述目标校验规则。

可选的，还包括：

若接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常，则向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。

可选的，还包括：

定期更新包含多个校验规则的校验规则库。

可选的，所述定期更新包含多个校验规则的校验规则库，包括：

定期对接口日志进行分析，得到接口调用信息的多个指标项；

确定所述多个指标项中满足预设条件的关键指标；

针对所述关键指标优化或新建与其相关的校验规则。

一种接口预处理装置，包括：

数据接收模块，用于接收调用系统发送的第一数据，所述第一数据中包括规则标识；

校验确定模块，用于依据所述规则标识从多个预置的校验规则中确定出目标校验规则；

校验处理模块，用于确定接口中的数据变量是否满足所述目标校验规则；

格式化处理模块，用于在所述校验处理模块的界定结果为满足的情况下，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理；

数据返回模块，用于将格式化处理后的数据变量存储并返回至所述调用系统。

可选的，还包括：

规则配置模块，用于预先配置多个校验规则，其中每一个校验规则具备唯一的规则标识。

可选的，所述校验处理模块包括：

变量获取模块，用于获取数据变量；

规则关联模块，用于将所述数据变量与所述目标校验规则关联；

实际值确定模块，用于确定每一个数据变量的实际值；

检验判断模块，用于确定每一个所述实际值是否满足所述目标校验规则。

可选的，还包括：

异常告警模块，用于在接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常的情况下，触发所述数据返回模块向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。

经由上述的技术方案可知，与现有技术相比，本发明实施例公开了一种接口预处理方法及装置，方法包括：接收调用系统发送的第一数据，所述第一数据中包括规则标识；依据所述规则标识从多个预置的校验规则中确定出目标校验规则；确定接口中的数据变量是否满足所述目标校验规则；若满足，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理；将格式化处理后的数据变量存储并返回至所述调用系统。所述接口预处理方法及装置，将数据校验规则放到接口中做处理，接口中可以预置适合多种系统的多种处理规则，这样，不同的调用系统可以从接口中选择适合自身的校验规则和处理规则，从而避免了接口调用方针对要求统一数据规范的接口需要做重复处理的问题，有助于提升开发效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例公开的一种接口预处理方法的流程图；

图2为本发明实施例公开的目标校验规则校验数据变量的流程图；

图3为本发明实施例公开的另一种接口预处理方法的流程图；

图4为本发明实施例公开的规则优化处理流程示意图；

图5为本发明实施例公开的接口预处理方法的一个具体实现流程示意图；

图6为本发明实施例公开的一种接口预处理装置的结构示意图；

图7为本发明实施例公开的校验处理模块的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例公开的一种接口预处理方法的流程图，参见图1所示，接口预处理方法可以包括：

步骤101：接收调用系统发送的第一数据，所述第一数据中包括规则标识。

本申请实施例所述接口预处理方法在接口侧执行。其中，所述规则标识具体可以是标识ID，标识ID具有全局唯一性，不同的标识ID代表不同的校验规则。本实现中，由于接口中预置了多个校验规则，因此需要采用规则标识来区分代表不同的校验规则，调用系统在向接口上送的调用请求中，可以携带适合自身的校验规则的规则标识，以便于接口根据第一数据中的规则标识来进行后续的相关校验。

调用系统并不特指某种特定类型的系统，在不同实现中，其可以为具有不同数据规范及数据组织形式的业务系统。

步骤102：依据所述规则标识从多个预置的校验规则中确定出目标校验规则。

本实施例中，多个校验规则可以以校验规则库的形式存在，依据实际情况需要，校验规则库可以定期或不定时更新，便于不同的业务系统后续对接口的顺利调用。

步骤103：确定接口中的数据变量是否满足所述目标校验规则，若满足，进入步骤104。

步骤104：依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理。

只有通过校验规则校验的数据变量才能够继续进行后续处理，若数据变量没有通过校验规则的校验，则认为校验出错，不再针对出错的数据变量进行后续的相关处理。

步骤105：将格式化处理后的数据变量存储并返回至所述调用系统。

在数据校验和数据格式化处理过程中都没有异常的情况下，可以将最终处理得到的数据进行存储，并向调用系统返回相应的数据。

本实施例所述接口预处理方法，将数据校验规则放到接口中做处理，接口中可以预置适合多种系统的多种处理规则，这样，不同的调用系统可以从接口中选择适合自身的校验规则和处理规则，从而避免了接口调用方针对要求统一数据规范的接口需要做重复处理的问题，有助于提升开发效率。

在其他的实现中，接口预处理方法还可以包括预先配置多个校验规则的步骤，其中每一个校验规则具备唯一的规则标识。预先配置好多个校验规则，便于后续不同类型的系统都能够选择适合自身的校验规则。

图2为本发明实施例公开的目标校验规则校验数据变量的流程图，参见图2所示，目标校验规则校验数据变量的过程可以包括：

步骤201：获取数据变量。

步骤202：将所述数据变量与所述目标校验规则关联。

步骤203：确定每一个数据变量的实际值。

步骤204：确定每一个所述实际值是否满足所述目标校验规则。

上述目标校验规则校验数据变量的过程，详细记载了校验数据变量的具体实现，有助于领域内人员更好的理解实施本申请实施例公开的接口预处理方法。

在其他的实施例中，接口预处理方法还可以包括：在接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常的情况下，则向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。

图3为本发明实施例公开的另一种接口预处理方法的流程图，如图3所示，接口预处理方法可以包括：

步骤301：定期更新包含多个校验规则的校验规则库。

定期更新校验规则库，有助于使得校验规则更加全面优化，符合实际需求。需要说明的是，定期更新包含多个校验规则的校验规则库的步骤的执行时间并没有固定限制，其可以在接口空闲的时刻进行，与本申请实施例所公开的接口预处理方法的执行中的其他步骤也没有固定顺序限制。

步骤302：接收调用系统发送的第一数据，所述第一数据中包括规则标识。

步骤303：依据所述规则标识从多个预置的校验规则中确定出目标校验规则。

步骤304：确定接口中的数据变量是否满足所述目标校验规则，若满足，进入步骤305。

步骤305：依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理。

步骤306：将格式化处理后的数据变量存储并返回至所述调用系统。

上述内容中，所述定期更新包含多个校验规则的校验规则库，可以包括：定期对接口日志进行分析，得到接口调用信息的多个指标项；确定所述多个指标项中满足预设条件的关键指标；针对所述关键指标优化或新建与其相关的校验规则。

图4为本发明实施例公开的规则优化处理流程示意图，结合图4所示，具体的，系统定期对接口日志进行分析，分析方法可以包括：首先，采集接口调用日志，将日志信息进行指标化，比如：5分钟间隔成功率、各RULE对应成功率、错误码、出错字段、错误信息等指标项，然后使用数据挖掘方法对各指标进行分析，获取其规律特点，以对接口规则进行优化，减少异常调用情况。

工程实现中，可以使用关联规则算法对指标项数据集做具体分析，用支持度和置信度来作为量化分析依据，找出导致接口规则异常调用的关键指标，然后做针对性的优化，提高接口规则调用的成功率。

上述实现中，接口的处理规则具有很好的可扩展性，可根据需求定期更新校验规则库及数据格式化规则库，并且使用数据挖掘方法进行规则优化，不断自我完善，减少异常调用情况。因此，该实现对于具有统一数据规范的接口服务的数据校验及规范化来说较为适宜。

对于具有统一数据规范的接口服务来说，如果将数据的校验规则唯一确定，所有的上游调用系统均要严格按照接口数据要求上送数据，则接口的灵活性就显得有些欠佳。例如，系统X是一个对外提供数据的系统，系统A、系统B都是从系统X中直接获取数据，然后将数据上送到我们的接口中。此时，数据校验就可放在接口中做处理，而不必在接口调用方系统中做重复处理。另外，对于空值校验来说，不同的业务系统上送的数据信息可能会有所不同，固定的校验规则就不可取。

基于上述问题，一个具体实现的流程图如图5，可结合图5理解下述内容。

在对外提供服务的接口中，可以对各业务系统上送的数据(第一数据)进行特定规则校验以及统一格式化数据持久化存储。接口中拥有一个校验规则库(每个校验规则用唯一标识符RULE_ID表示)，接口调用系统可根据自己的系统特点按需使用某个校验规则(通过在上送数据中指定RULE_ID属性信息来确定使用何种校验规则)。此校验规则库可以根据实际需求定期更新，具有很强的灵活性和可扩展性。另外，根据错误类型设计错误码及相应的错误信息反馈，告知接口调用方哪些数据不符合校验规则，以做针对性的修正。通过校验的数据，再进行后续规范化(格式化)的处理，对不同格式或数据类型的数据进行统一的数据格式化处理。接口可提前预置好多种数据格式化规则(与数据校验的RULE_ID属性对应的格式化规则)，根据特定的规则进行数据格式化处理，将处理后的数据统一进行持久化存储，保证保存在接口数据库的数据具有相同的数据格式，然后，再执行接口的其他业务逻辑，并将接口的输出信息反馈给接口调用方系统。经过上述流程之后，就是完成了一次成功的接口调用。

具体的，在系统启动前或在夜间业务低峰时，将存储在关系型数据库中的规则集加载到Redis中。在数据加载到Redis期间，关闭系统联机，避免出现脏数据。

业务系统(即：接口调用方)调用接口服务，上送数据至接口服务器，接口服务器收到数据后，访问Redis并根据数据中的RULE_ID属性信息来获取指定的校验规则，如果Redis中没有相应的校验规则，则去关系型数据库中查询，获取相应的校验规则及数据格式化规则，同时将此校验规则和数据格式化规则缓存到Redis中。从Redis数据库获取缓存的各数据变量信息，并将其与指定的校验规则关联，最后取出各数据变量的实际值，判断其是否满足校验规则。如果不满足指定规则，则会返回接口调用方相应的错误码以及错误信息，以便接口调用方修改数据内容，排查错误数据，使其符合接口规则要求。否则的话，将校验通过的数据做进一步规范化处理。

数据规范化处理同样基于一个可定期更新的数据格式化规则库(与数据校验的数据校验库关联，一一对应)。过程中先访问Redis数据库，将通过校验规则的数据缓存，然后根据数据中的RULE_ID属性信息获取对应的数据格式化规则，随后获取各数据变量信息，并将之与数据格式化规则关联，最后取出各数据变量的实际值，根据指定规则对数据做格式化处理。所有处理完成后，将数据异步统一进行持久化存储(如：保存至关系型数据库)。其中数据格式化规则和前述的校验规则是通过RULE_ID属性信息相关联的，一一对应。在数据格式化过程中，如果出现异常或者错误，将会将异常或错误信息写进接口服务器的本地日志系统中，供接口开发人员做进一步处理。

异常告警的功能，主要用来对数据校验和数据规范化处理中出现的错误和异常做统一处理。根据错误类型，对不同的错误或异常标记不同的错误码(如空值错误可以指定错误码为9001)，实际错误反馈时，再获取出错的数据变量，一起反馈给接口调用方/接口开发人员。该实现对于排除错误至关重要，可以快捷直观的发现问题所在，及时的解决问题。

对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

上述本发明公开的实施例中详细描述了方法，对于本发明的方法可采用多种形式的装置实现，因此本发明还公开了一种装置，下面给出具体的实施例进行详细说明。

图6为本发明实施例公开的一种接口预处理装置的结构示意图，参见图6所示，接口预处理装置60可以包括：

数据接收模块601，用于接收调用系统发送的第一数据，所述第一数据中包括规则标识。

校验确定模块602，用于依据所述规则标识从多个预置的校验规则中确定出目标校验规则。

校验处理模块603，用于确定接口中的数据变量是否满足所述目标校验规则。

格式化处理模块604，用于在所述校验处理模块的界定结果为满足的情况下，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理。

数据返回模块605，用于将格式化处理后的数据变量存储并返回至所述调用系统。

本实施例所述接口预处理装置，将数据校验规则放到接口中做处理，接口中可以预置适合多种系统的多种处理规则，这样，不同的调用系统可以从接口中选择适合自身的校验规则和处理规则，从而避免了接口调用方针对要求统一数据规范的接口需要做重复处理的问题，有助于提升开发效率。

在其他的实现中，接口预处理装置还可以包括规则配置模块，用于预先配置多个校验规则，其中每一个校验规则具备唯一的规则标识。预先配置好多个校验规则，便于后续不同类型的系统都能够选择适合自身的校验规则。

图7为本发明实施例公开的校验处理模块的结构示意图，参见图7所示，校验处理模块603可以包括：

变量获取模块701，用于获取数据变量。

规则关联模块702，用于将所述数据变量与所述目标校验规则关联。

实际值确定模块703，用于确定每一个数据变量的实际值。

检验判断模块704，用于确定每一个所述实际值是否满足所述目标校验规则。

上述目标校验规则校验数据变量的过程，详细记载了校验数据变量的具体实现，有助于领域内人员更好的理解实施本申请实施例公开的接口预处理装置。

在其他的实施例中，接口预处理装置还可以包括异常告警模块，用于在接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常的情况下，触发所述数据返回模块向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。

其他实现中，接口预处理装置还可以包括：规则优化模块，用于定期更新包含多个校验规则的校验规则库。具体可以包括：定期对接口日志进行分析，得到接口调用信息的多个指标项；确定所述多个指标项中满足预设条件的关键指标；针对所述关键指标优化或新建与其相关的校验规则。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种接口预处理方法，其特征在于，包括：

接收调用系统发送的第一数据，所述第一数据中包括规则标识；

依据所述规则标识从多个预置的校验规则中确定出目标校验规则，所述多个预置的校验规则存储在接口中的校验规则库中；

确定接口中的数据变量是否满足所述目标校验规则；

其中，确定接口中的数据变量是否满足所述目标校验规则包括：获取数据变量；将所述数据变量与所述目标校验规则关联；确定每一个数据变量的实际值；确定每一个所述实际值是否满足所述目标校验规则；

若满足，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理；

将格式化处理后的数据变量存储并返回至所述调用系统。

2.根据权利要求1所述的接口预处理方法，其特征在于，还包括：

预先配置多个校验规则，其中每一个校验规则具备唯一的规则标识。

3.根据权利要求1所述的接口预处理方法，其特征在于，还包括：

若接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常，则向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。

4.根据权利要求1所述的接口预处理方法，其特征在于，还包括：

定期更新包含多个校验规则的所述校验规则库。

5.根据权利要求4所述的接口预处理方法，其特征在于，所述定期更新包含多个校验规则的所述校验规则库，包括：

定期对接口日志进行分析，得到接口调用信息的多个指标项；

确定所述多个指标项中满足预设条件的关键指标；

针对所述关键指标优化或新建与其相关的校验规则。

6.一种接口预处理装置，其特征在于，包括：

数据接收模块，用于接收调用系统发送的第一数据，所述第一数据中包括规则标识；

校验确定模块，用于依据所述规则标识从多个预置的校验规则中确定出目标校验规则，所述多个预置的校验规则存储在接口中的校验规则库中；

校验处理模块，用于确定接口中的数据变量是否满足所述目标校验规则；

所述校验处理模块，具体包括：变量获取模块，用于获取数据变量；规则关联模块，将所述数据变量与所述目标校验规则关联；实际值确定模块，确定每一个数据变量的实际值；检验判断模块，确定每一个所述实际值是否满足所述目标校验规则；

格式化处理模块，用于在所述校验处理模块的界定结果为满足的情况下，依据与所述目标校验规则对应的格式化规则，对满足所述目标校验规则的数据变量进行格式化处理；

数据返回模块，用于将格式化处理后的数据变量存储并返回至所述调用系统。

7.根据权利要求6所述的接口预处理装置，其特征在于，还包括：

规则配置模块，用于预先配置多个校验规则，其中每一个校验规则具备唯一的规则标识。

8.根据权利要求6所述的接口预处理装置，其特征在于，还包括：

异常告警模块，用于在接口中的数据变量不满足所述目标检验规则，或在对满足所述目标校验规则的数据变量进行格式化处理过程中出现异常的情况下，触发所述数据返回模块向所述调用系统返回错误信息，所述错误信息包括错误代码和错误数据。