CN111064621A - 业务数据对接方法和装置 - Google Patents

Abstract

本发明提供了一种业务数据对接方法和装置，涉及通信技术领域，包括接收业务系统发送的业务请求，根据业务请求中的业务ID获取当前业务中所需的第三方数据源的配置参数，其中，当前业务所需至少一个第三方数据源；根据配置参数动态生成业务调用代码；加载业务调用代码调用当前业务所需的第三方数据源，将返回结果发送至业务系统，通过通用数据接口，获取并管理与当前业务相关的至少一个第三方数据源，简化了数据对接的繁琐程度。

Description

业务数据对接方法和装置

技术领域

本发明涉及通信技术领域，尤其是涉及一种业务数据对接方法和装置。

背景技术

目前的数据系统与第三方数据源一般通过资源数据状态转化(RepresentationalState Transfer，REST)接口进行通信。由于各第三方数据源接口返回的内容样式不同，因此要针对每个第三方数据源做单独处理。按照第三方数据源提供的接口文档中所写明的格式，调用接口，并取出返回数据。

当前，对于不同数据源来说，各个数据源的调用方式以及处理方式类似，但调用的参数不一定相同，因此，在数据对接时，有相当程度的不得不做的重复劳动。且在调用过程中还可能会遇到接口返回错误、网络错误或第三方接口临时下线的情况，进一步增加了数据对接的繁琐程度。

发明内容

本发明的目的在于提供业务数据对接方法和装置，通过具有通用数据接口的业务调用代码，获取并管理与当前业务相关的至少一个第三方数据源，简化了数据对接的繁琐程度。

第一方面，实施例提供一种业务数据对接方法，用于对接业务系统和至少一个第三方数据源，所述方法包括：

接收业务系统发送的业务请求，根据所述业务请求获取当前业务中所需的第三方数据源的配置参数，其中，所述当前业务所需至少一个第三方数据源；

根据所述配置参数动态生成业务调用代码，所述业务调用代码包括调用所述第三方数据源的通用数据接口；

加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果与所述业务系统进行对接。

在可选的实施方式中，所述方法还包括：

根据控制指令修改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号，并将所述新生配置参数与所述版本号进行缓存。

在可选的实施方式中，在根据控制指令更改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号的步骤之后，还包括：

识别当前配置参数对应的版本号，判断所述当前配置参数对应的版本号与缓存的版本号是否相同；

若相同，则调用所述缓存的版本号对应的业务调用代码；

若不同，则根据所述当前配置参数动态生成当前业务的业务调用代码。

在可选的实施方式中，配置参数包括接口地址、调用方式、调用参数、重试次数、超时等待时间、返回数据处理方式、失败默认返回样式、数据源自动下线规则、数据源优先级和数据源选取方式中的一种或多种。

在可选的实施方式中，根据控制指令更改所述配置参数的步骤包括：

根据控制指令可对所述配置参数中的重试次数、重试时间进行更改，所述控制指令包括根据所述业务请求获得的第一控制指令和来自控制中心的第二控制指令。

在可选的实施方式中，根据所述配置参数动态生成业务调用代码的步骤，包括：

根据所述配置参数中的数据源选取方法选取策略模板；

按照所述策略模板以及所述配置参数动态生成业务调用代码。

在可选的实施方式中，加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果发送至所述业务系统的步骤，包括：

加载所述业务调用代码，获知当前业务中的配置参数；

根据所述配置参数中的选取方式和优先级，调用当前业务所需的第三方数据源，并返回所述第三方数据源。

第二方面，实施例提供一种业务数据对接装置，用于对接业务系统和至少一个第三方数据源，所述装置包括：

业务选取模块，用于接收业务系统发送的业务请求，根据所述业务请求获取当前业务中所需的第三方数据源的配置参数，其中，所述当前业务所需至少一个第三方数据源；

调用代码自动生成模块，用于根据所述配置参数动态生成业务调用代码，所述业务调用代码包括调用所述第三方数据源的通用数据接口；

数据源数据处理模块，用于加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果与所述业务系统进行对接。

第三方面，实施例提供一种电子设备，包括存储器、处理器及存储在所述存储器上并且能够在所述处理器上运行的程序，所述处理器执行所述程序时实现如前述实施方式中任一项所述的业务数据对接方法。

第四方面，实施例提供一种计算机可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序被执行时实现前述实施方式中任意一项所述的业务数据对接方法。

本发明实施例提供了一种数据对接方法和装置，通过业务系统发送的包括业务ID的业务请求，获取当前业务所需的第三方数据源的配置参数，根据配置参数动态生成业务调用代码，该业务调用代码具有当前业务所需的第三方数据源的通用数据接口，通过对业务调用代码进行加载，可调用业务所需的第三方数据源，将调用结果发送至业务系统。本发明实施例的应用可作为中间件联结第三方数据源与业务系统，通过通用数据接口，能够统一接收处理多个第三方数据源的数据，并可以对第三方数据源进行上线、下线及替代的管理，简化了数据对接的繁琐程度。

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种业务数据对接方法流程图；

图2为本发明实施例提供的一种业务数据对接装置的场景应用示意图；

图3为本发明实施例提供的一种业务数据对接装置的功能模块示意图；

图4为本发明实施例提供的电子设备的硬件架构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

当前，在业务数据系统与第三方数据源进行通信时，调用过程中可能会遇到接口返回错误、网络错误或第三方接口临时下线的情况。针对接口返回错误，需要根据第三方数据源提供的接口文档进行处理；针对网络错误，需要再进行有限次数的重试，此时不同数据源的重试策略和超时等待的时间不尽相同，无法统一的进行查看与配置；针对第三方接口临时下线，此时，数据源处于失效或者无法获取数据的状态，但缺乏有效的通知及处理手段。

此外，为了将来能够核对调用结果，通常各个数据源的结果也要作为历史记录保存，但上述实施例对于历史的调用记录没有较优的查看与统计的手段。

基于此，本发明实施例提供的一种业务数据对接方法和装置，通过通用数据接口，获取并管理与当前业务相关的至少一个第三方数据源，简化了数据对接的繁琐程度。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种业务数据对接方法进行详细介绍。

图1为本发明实施例提供的一种业务数据对接方法流程图。

该业务数据对接方法，用于对接业务系统和至少一个第三方数据源，其中，业务系统应用于客户端，参照图1，所述方法包括以下步骤：

步骤S102，接收业务系统发送的业务请求，根据业务请求中的业务ID获取当前业务中所需的第三方数据源的配置参数，其中，当前业务所需至少一个第三方数据源；

步骤S104，根据配置参数动态生成业务调用代码，业务调用代码包括调用第三方数据源的通用数据接口；

步骤S106，加载业务调用代码调用当前业务所需的第三方数据源，将返回结果发送至业务系统，与业务系统进行对接。

在实际应用的优选实施例中，通过业务系统发送的包括业务ID的业务请求，获取当前业务所需的第三方数据源的配置参数，根据配置参数动态生成业务调用代码，该业务调用代码具有当前业务所需的第三方数据源的通用数据接口，通过对业务调用代码进行加载，可调用业务所需的第三方数据源，将调用结果发送至业务系统。本发明实施例的应用可作为中间件联结第三方数据源与业务系统，通过通用数据接口，能够统一接收处理多个第三方数据源的数据，并可以对第三方数据源进行上线、下线及替代的管理，简化了数据对接的繁琐程度。

需要说明的是，本发明使用Java语言编写，依赖Java语言的特性。

进一步的，配置参数包括接口地址、调用方式、调用参数、重试次数、超时等待时间、返回数据处理方式、失败默认返回样式、数据源自动下线规则、数据源优先级和数据源选取方式中的一种或多种。

这里，每一个第三方数据源均有一个对应的配置参数；业务所需数据源对应的至少一个数据源接口的相关配置参数，以列表的形式进行呈现；

例如，业务配置参数为一个列表，列表中的每一项代表了一个数据源接口及其相关配置。这么做的目的是能够处理多个数据源相同业务类型的数据而设置的(相同业务类型的数据源可能具有不同数据源接口以及配置)。配置参数中的调用方式可分为自动和手动；其中自动是为了处理一般接口，而手动调用则用于处理需要特殊参数或者逻辑较为复杂的接口调用。配置参数中的数据源优先级，可用数字进行表征，数字越小越先被调用。

此外，每个业务还可以配置通用配置，作为每个数据源的默认配置。

进一步的，步骤S102包括：

接收客户端通过REST接口向业务选取模块发送的业务请求，所述业务请求中包括业务ID和客户端ID，根据所述业务ID进行业务选取，根据所述客户端ID进行记录。

进一步的，步骤S104的步骤，包括：

步骤1.1)，根据配置参数中的数据源选取方法选取策略模板；

步骤1.2)，按照策略模板以及配置参数动态生成业务调用代码。

这里，本发明实施例可根据自动或手动的调用方式，生成不同的调用代码；具体地，可通过读取业务配置列表，逐个拉取数据源参数配置，并根据配置生成代码。

例如，如果调用方式为“自动”，则会根据从配置参数中读取的接口调用地址、调用参数和参数传递方式生成实际调用代码。生成代码时，根据程序自有的策略模板动态加入参数及其调用代码。如果调用方式为“手动”，系统根据配置动态编译生成代码。

这里，上述两种方式生成代码时，均在Java字节码的层级进行操作，生成的业务调用代码属于类字节码文件，将会保存在运行数据源处理模块的机器的磁盘指定位置作为缓存。其中，类字节码生成后，程序将通过Java类加载器加载进入Java的元数据区。字节码对应的类名格式为DataSourceProcessor$<业务ID>。每个动态生成的类字节码均实现了通用的DataSourceProcessor接口，该接口接受任意类型的任意个数配置参数，返回类型可为任意类型，进而实现了多种第三方数据源接口的统一。

进一步的，S106的步骤，包括以下步骤：

步骤2.1)，加载业务调用代码，获知当前业务中的配置参数；

步骤2.2)，根据配置参数中的选取方式和优先级，调用当前业务所需的第三方数据源，并返回第三方数据源。

这里，选取方式为全部的，则调用业务所需的所有数据源，并获取最快返回成功的一个数据源；选取方式为依次的，则按照配置参数中的优先级调用相应数据源，并获取最快返回成功的一个数据源；

如果处理方式为“自动”，则将返回值根据类型转换为JSON或者XML后直接返回，不做处理，此处无需生成代码。如果处理方式为“手动”，则采用和上一点阐述的同样的方法根据配置生成代码并加载。

为了避免代码重复生成，本发明实施例采用版本号加缓存的机制，所述方法还包括：

步骤3.1)，根据控制指令修改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号，并将所述新生配置参数与所述版本号进行缓存。

这里，为了避免重复生成代码，“控制中心”在每次修改配置时，会生成一个新的业务对应的版本号。

进一步的，在步骤3.1)之后，还包括：

步骤4.1)，识别当前配置参数对应的版本号，判断所述当前配置参数对应的版本号与缓存的版本号是否相同；

步骤4.2)，若相同，则调用所述缓存的版本号对应的业务调用代码；

步骤4.3)，若不同，则根据所述当前配置参数动态生成当前业务的业务调用代码。

字节码生成后会放入磁盘用于缓存，当版本号相同的情况下，由于版本号没有发生改变，不会重新生成缓存，每次均取磁盘中缓存的类字节码。版本号发生改变，亦及配置被修改时，会将改动的配置参数推送至调用代码字段生成模块。同时，为了避免推送失效的问题，调用代码字段生成模块会每隔预设时间重新拉取一次配置，获取修改信息。如果发生改动，磁盘缓存会被删除，等待下一次的重新生成。

进一步的，步骤3.1)中根据控制指令更改所述配置参数包括：

步骤3.1.1)，根据控制指令可对所述配置参数中的重试次数、重试时间进行更改，所述控制指令包括根据所述业务请求获得的第一控制指令和来自控制中心的第二控制指令。

这里，业务选取模块还根据业务请求获得的第一控制指令配置重试次数和超出时间，配置后的这两个参数可覆盖由控制中心第二控制指令配置的重试次数和超出时间参数。

可以理解的是，可根据配置中的重试次数和超时等待时间，调用第三方数据源接口。如，重试次数用于限制失败时重试的字数，当调用发生错误时，便会重新进行调用，调用次数不会超过配置的重试次数。而超时等待时间则用于限定累计调用时间，如果多次重试累计时间或是第一次调用时间超过了超时等待时间结果将会返回空值。

执行时，如果先前根据客户端业务系统中业务请求的配置参数配置了重试次数和超时时间参数，则这些参数将会覆盖控制中心的配置中指定的同名参数。数据处理模块会将执行结果通知到记录模块。为了保证性能，数据源处理模块和记录模块间采用消息队列进行数据传递。传递的数据包括执行时间、业务ID、客户端ID、调用方式，实际使用数据源(单业务多数据源的情况)，原生返回结果，处理结果。

如图3所示，本发明实施例提供一种业务数据对接装置，用于对接业务系统和至少一个第三方数据源，所述装置包括：

业务选取模块，用于接收业务系统发送的业务请求，根据所述业务请求中的业务ID获取当前业务中所需的第三方数据源的配置参数，其中，所述当前业务所需至少一个第三方数据源；

调用代码自动生成模块，用于根据所述配置参数动态生成业务调用代码，所述业务调用代码包括调用所述第三方数据源的通用数据接口；

数据源数据处理模块，用于加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果发送至所述业务系统。

进一步的，调用代码自动生成模块还具体用于根据控制指令修改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号，并将所述新生配置参数与所述版本号进行缓存。

进一步的，调用代码自动生成模块还具体用于识别当前配置参数对应的版本号，判断所述当前配置参数对应的版本号与缓存的版本号是否相同；若相同，则调用所述缓存的版本号对应的业务调用代码；若不同，则根据所述当前配置参数动态生成当前业务的业务调用代码。

进一步的，配置参数包括接口地址、调用方式、调用参数、重试次数、超时等待时间、返回数据处理方式、失败默认返回样式、数据源自动下线规则、数据源优先级和数据源选取方式中的一种或多种。

进一步的，调用代码自动生成模块还具体用于根据控制指令可对所述配置参数中的重试次数、重试时间进行更改，所述控制指令包括根据所述业务请求获得的第一控制指令和来自控制中心的第二控制指令。

进一步的，根调用代码自动生成模块还具体用于根据所述配置参数中的数据源选取方法选取策略模板；按照所述策略模板以及所述配置参数动态生成业务调用代码。

进一步的，数据源数据处理模块还具体用于加载所述业务调用代码，获知当前业务中的配置参数；根据所述配置参数中的选取方式和优先级，调用当前业务所需的第三方数据源，并返回所述第三方数据源。

图2为本发明实施例提供一种业务数据对接装置的场景应用示意图。

参照图2，作为一种可选的实施例，车贷风控系统应用业务数据对接装置，查询用户手机号在网时长，此场景中的车贷风控系统，需要对接多个第三方数据源，会优先使用服务较好且便宜的数据源，其他作为备份。

具体地，业务系统应用于客户端，客户端发送业务请求给业务选取模块，业务选取模块根据业务请求中的业务ID获取当前业务所需第三方数据源的配置参数，其中，当前业务所需第三方数据源可能包括多个。调用代码自动生成模块根据配置参数动态生成业务调用代码，数据源数据处理模块加载业务调用代码，根据业务调用代码调用第三方数据源，根据配置参数中的配置，将最快成功返回的数据源返回给客户端业务系统，其余第三方数据源作为备用，并通过记录模块进行记录。

这里，控制中心可对业务选取模块中的配置参数进行更改。

进一步地，如图4所示，是本发明实施例提供的用于实现所述业务数据对接方法的电子设备300的示意图。本实施例中，所述电子设备300可以是，但不限于，个人电脑(Personal Computer，PC)、笔记本电脑、监控设备、服务器等具备分析及处理能力的计算机设备。作为一种可选的实施例，电子设备300可为服务器。

图4为本发明实施例提供的电子设备300的硬件架构示意图。参见图4所示，该计算机设备包括：机器可读存储介质301和处理器302，还可以包括非易失性存储介质303、通信接口304和总线305；其中，机器可读存储介质301、处理器302、非易失性存储介质303和通信接口304通过总线305完成相互间的通信。处理器302通过读取并执行机器可读存储介质301中业务数据对接方法的机器可执行指令，可执行上文实施例描述业务数据对接方法。

本文中提到的机器可读存储介质可以是任何电子、磁性、光学或其它物理存储装置，可以包含或存储信息，如可执行指令、数据，等等。例如，机器可读存储介质可以是：RAM(Radom Access Memory，随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、任何类型的存储盘(如光盘、dvd等)，或者类似的存储介质，或者它们的组合。

非易失性介质可以是非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、任何类型的存储盘(如光盘、dvd等)，或者类似的非易失性存储介质，或者它们的组合。

可以理解的是，本实施例中的各功能模块的具体操作方法可参照上述方法实施例中相应步骤的详细描述，在此不再重复赘述。

本发明实施例所提供计算机可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序代码被执行时可实现上述任一实施例所述的业务数据对接方法，具体实现可参见方法实施例，在此不再赘述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种业务数据对接方法，其特征在于，用于对接业务系统和至少一个第三方数据源，所述方法包括：

接收业务系统发送的业务请求，根据所述业务请求获取当前业务中所需的第三方数据源的配置参数，其中，所述当前业务所需至少一个第三方数据源；

根据所述配置参数动态生成业务调用代码，所述业务调用代码包括调用所述第三方数据源的通用数据接口；

加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果与所述业务系统进行对接。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据控制指令修改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号，并将所述新生配置参数与所述版本号进行缓存。

3.根据权利要求2所述的方法，其特征在于，在根据控制指令更改所述配置参数，并得到当前业务中所需的第三方数据源的新生配置参数以及所述新生配置参数对应的版本号的步骤之后，还包括：

识别当前配置参数对应的版本号，判断所述当前配置参数对应的版本号与缓存的版本号是否相同；

若相同，则调用所述缓存的版本号对应的业务调用代码；

若不同，则根据所述当前配置参数动态生成当前业务的业务调用代码。

4.根据权利要求2所述的方法，其特征在于，配置参数包括接口地址、调用方式、调用参数、重试次数、超时等待时间、返回数据处理方式、失败默认返回样式、数据源自动下线规则、数据源优先级和数据源选取方式中的一种或多种。

5.根据权利要求4所述的方法，其特征在于，根据控制指令更改所述配置参数的步骤包括：

根据控制指令可对所述配置参数中的重试次数、重试时间进行更改，所述控制指令包括根据所述业务请求获得的第一控制指令和来自控制中心的第二控制指令。

6.根据权利要求4所述的方法，其特征在于，根据所述配置参数动态生成业务调用代码的步骤，包括：

根据所述配置参数中的数据源选取方法选取策略模板；

按照所述策略模板以及所述配置参数动态生成业务调用代码。

7.根据权利要求4所述的方法，其特征在于，加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果发送至所述业务系统的步骤，包括：

加载所述业务调用代码，获知当前业务中的配置参数；

根据所述配置参数中的选取方式和优先级，调用当前业务所需的第三方数据源，并返回所述第三方数据源。

8.一种业务数据对接装置，其特征在于，用于对接业务系统和至少一个第三方数据源，所述装置包括：

业务选取模块，用于接收业务系统发送的业务请求，根据所述业务请求获取当前业务中所需的第三方数据源的配置参数，其中，所述当前业务所需至少一个第三方数据源；

调用代码自动生成模块，用于根据所述配置参数动态生成业务调用代码，所述业务调用代码包括调用所述第三方数据源的通用数据接口；

数据源数据处理模块，用于加载所述业务调用代码调用所述当前业务所需的第三方数据源，将返回结果与所述业务系统进行对接。

9.一种电子设备，其特征在于，包括存储器、处理器及存储在所述存储器上并且能够在所述处理器上运行的程序，所述处理器执行所述程序时实现如权利要求1至7中任一项所述的业务数据对接方法。

10.一种计算机可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，所述计算机程序被执行时实现权利要求1-7中任意一项所述的业务数据对接方法。

Images