CN112241430A - 一种应用于多系统对接处理的模型 - Google Patents

一种应用于多系统对接处理的模型 Download PDF

Info

Publication number
CN112241430A
CN112241430A CN202011151686.6A CN202011151686A CN112241430A CN 112241430 A CN112241430 A CN 112241430A CN 202011151686 A CN202011151686 A CN 202011151686A CN 112241430 A CN112241430 A CN 112241430A
Authority
CN
China
Prior art keywords
interface
component
model
configuration
calling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011151686.6A
Other languages
English (en)
Inventor
郝伟
宋勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Cloud Information Technology Co Ltd
Original Assignee
Inspur Cloud Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Cloud Information Technology Co Ltd filed Critical Inspur Cloud Information Technology Co Ltd
Priority to CN202011151686.6A priority Critical patent/CN112241430A/zh
Publication of CN112241430A publication Critical patent/CN112241430A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/252Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/547Remote procedure calls [RPC]; Web services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/54Indexing scheme relating to G06F9/54
    • G06F2209/544Remote

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种应用于多系统对接处理的模型,所述模型的构成包括:基本配置组件,接口调用处理器组件,http调用组件,接口调用记录存储组件,异步任务队列组件,定时任务作业组件,其中:基本配置组件,包括连接数据库配置,全局策略配置,应用及接口配置;所述基本配置组件采用json文件或者数据库表实现。本发明通过建立统一的交互模型,来完整各个系统的调用,在多厂商,多产品共同打造的政务产品生态环境中,完成数据的交互,流通,清晰展现多个系统间交互的具体信息,包括参数,响应等,为运维排查以及技术对接提供了很大便利,能够为多系统交互提供统一的管理办法。

Description

一种应用于多系统对接处理的模型
技术领域
本发明涉及政务产品技术领域,具体提供一种应用于多系统对接处理的模型,属于一种与业务紧密相关的技术,与多方系统的产品都可以使用这一技术思想进行引用。
背景技术
自主创新,拥有成熟的信息产业链是国家战略的必经之路。未来国产数字化将成为一个全新的方向,给广大企业带来新的风口。政务领域应用将越来越多,提前入局的企业应用将成为新赛道的领跑者。从2019年后,数字政务的发展越来越快,本质上是国家信息化战略的资源整合,是一种治理模式上的改变。原来是每个政府单位各自建设,没有标准,造成大量的资源浪费,以及数据孤岛,信息不畅通的现象。
为了解决这些难题,政务信息化通过一些标准和政策,逐渐向下沉淀,应用互联网技术一步步从单一建设,到整体建设。
发明内容
在多厂商,多产品共同打造的政务产品生态环境中,数据的交互,流通就必不可少,本发明的技术任务是针对上述存在的问题,提供一种应用于多系统对接处理的模型,通过统一管理各个系统及其配置信息,记录各个系统间调用记录,以及定时重调,预警邮件等功能来为各个应用数据交换提供整体解决方案。
为实现上述目的,本发明提供了如下技术方案:
一种应用于多系统对接处理的模型,所述模型的构成包括:基本配置组件,接口调用处理器组件,http调用组件,接口调用记录存储组件,异步任务队列组件,定时任务作业组件,其中:
基本配置组件,包括连接数据库配置,全局策略配置,应用及接口配置;
通过建立统一的交互模型,来完整各个系统的调用,在多厂商,多产品共同打造的政务产品生态环境中,完成数据的交互,流通,清晰展现多个系统间交互的具体信息,包括参数,响应等,为运维排查以及技术对接提供了很大便利。能够为多系统交互提供统一的管理办法。
所述基本配置组件采用json文件或者数据库表实现;
完成与多方系统交互的关联离不开各种配置,如连接数据库信息,一些全局策略的配置,各个应用及其接口相关的配置,对于低于10个的对接应用采用json文件的方式配置,简洁和清晰的层次结构使得基于json文件的配置既容易方便配置,也容易解析。如果对接应用更多,则采用数据库的方式来完成配置。
所述http调用组件采用Okhttp完成htpp请求,网络交互,连接同一地址的链接共享同一个socket(端口),通过连接池来减小响应延迟;
OkHttp有透明的GZIP压缩,请求缓存等优势,还存在以下的特点:
a.支持HTTP2/SPDY;
b.socket自动选择最好路线,并支持自动重连;
c.拥有自动维护的socket连接池,减少握手次数;
d.拥有队列线程池,轻松写并发;
e.拥有Interceptors轻松处理请求与响应(比如透明GZIP压缩,LOGGING);
f.基于Headers的缓存策略;
根据应用接口配置信息以及传入的请求头,请求体,基于okhttp3完成高效稳定的网络通信。
所述定时任务作业组件采用Quartz框架作为定时任务处理器,根据时间间隔来调度作业,实现作业和触发器的多对多的关系,并将多个作业与不同的触发器关联,完成自动清除数据,定时重调等功能。
Quartz是由OpenSymphony提供的、开源的、java编写的强大任务调度框架。所述模型基于Quartz可定制多个任务,如重调任务,预警任务以及清除任务。
所述模型通过线程池或消息队列完成异步接口调用;
所述接口调用处理器组件发起异步接口调用处理流程如下:
组装请求头以及请求头;
提交任务至线程池或消息队列;
从任务队列获取消息队列中读取接口调用任务;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
所述接口调用处理器组件发起普通接口调用处理流程如下:
组装请求头以及请求头;
基于OKhttp3发起http请求;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
所述模型针对接口调用处理器组件的每一次接口调用形成接口调用记录,保证接口调用的可追溯。
所述模型根据接口调用记录信息表中产生的数据,对数据启动附加功能,根据配置文件生成的策略处理器开始发挥作用,包括:重调策略处理器,清除策略处理器,预警策略处理器。
通过维护接口调用记录信息表可以清晰明了的观察本系统和其他系统应用的交互情况,基于接口调用记录我们可以完成更多的工作,如接口预警,查询某段时间内调用异常的接口数量;扫描某段时间内调用错误的接口调用记录,根据重调策略进行重调等工作。最后完成接口数据的清除工作,接口数据如果不做清理表数据会累积的很快,最终成为系统瓶颈,根据数据清除策略,定期清除数据是其中一个解决方式。
所述重调策略处理器,根据配置的频率扫描指定时间段内调用异常的接口记录(接口调用处理器解析返回结果需要重调的记录),发起重调,重调时调用接口调用处理器中的buildUrl(),buildHeaders(),buildPostRequestBody(),buildPostJSONRequestBody(),build PostJSONRequestBody()等钩子函数构造出新的请求体,进行重调。
现在很多应用接口在访问时都需要获取具有时效性的token,或者将当前时间戳与某些秘钥加密放置到请求头或请求体中用作权限控制,
所述CallSupport中定义了在接口失败重调过程中构造请求的各个钩子函数,用来重新构造请求信息。
所述清除策略处理器,根据指定频率扫描接口调用记录的创建时间,如达到最大生存时间则删除。
所述预警策略处理器,根据不同应用,不同接口级别指定的频率扫描产生调用错误的数量,达到预警临界值就向绑定邮箱发送预警邮件。
所述模型在json文件的模板中,通过config布置全局的配置,包括连接数据库配置,全局的数据清理策略,预警策略以及重调策略,其中各种策略的配置都是基于接口级别进行配置,不同的接口级别应用不同的策略。
所述模型在json文件的模板中,对于接口调用管理中,判定一个接口调用是否成功,如果失败是否需要重调,根据集成方的需要自己定义实现,并在app中配置接口调用处理器callSupportClassName信息,实现CallSupport接口。
所述模型在json文件的模板中,通过apps模块进行对接应用相关的配置,并根据需要为每个应用定义不同的应用编码,应用名称,元数据,接口调用支持类等信息;
其中,每一个app中需要事先定义各个接口的相关信息,如接口编码,名称,路径,接口级别等等信息;
或者,为一个接口设置单独的CallSupport支持;
其中接口级别的定义可以区分接口的重要程度,相关策略的配置基于接口级别定义的。
为满足不用应用的个性化设置,全局配置中的重调策略,自动清理策略等等都可以在每个应用中单独配置。
根据上述的基本配置,在应用启动时会读取、解析配置文件,根据全局设置以及app应用个性化配置生成定时任务作业。
与现有技术相比,本发明一种应用于多系统对接处理的模型具有以下突出的有益效果:
本发明通过建立统一的交互模型,来完整各个系统的调用,在多厂商,多产品共同打造的政务产品生态环境中,完成数据的交互,流通,清晰展现多个系统间交互的具体信息,包括参数,响应等,为运维排查以及技术对接提供了很大便利,能够为多系统交互提供统一的管理办法。
附图说明
图1是本发明模型发起普通接口调用处理流程示意图;
图2是本发明模型发起异步接口调用处理流程示意图。
具体实施方式
下面将结合附图和实施例,对本发明作进一步详细说明。
一种应用于多系统对接处理的模型,所述模型的构成包括:基本配置组件,接口调用处理器组件,http调用组件,接口调用记录存储组件,异步任务队列组件,定时任务作业组件,其中:
基本配置组件,包括连接数据库配置,全局策略配置,应用及接口配置;
所述基本配置组件采用json文件或者数据库表实现;
所述http调用组件采用Okhttp完成htpp请求,网络交互,连接同一地址的链接共享同一个socket,通过连接池来减小响应延迟;
所述定时任务作业组件采用Quartz框架作为定时任务处理器,根据时间间隔来调度作业,实现作业和触发器的多对多的关系,并将多个作业与不同的触发器关联,完成自动清除数据,定时重调等功能。
所述模型通过线程池或消息队列完成异步接口调用;
如图2所示,所述接口调用处理器组件发起异步接口调用处理流程如下:
组装请求头以及请求头;
提交任务至线程池或消息队列;
从任务队列获取消息队列中读取接口调用任务;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
如图1所示,所述接口调用处理器组件发起普通接口调用处理流程如下:
组装请求头以及请求头;
基于OKhttp3发起http请求;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
如下所示,是本实施例配置基本信息的json文件模板:
Figure BDA0002741502160000051
Figure BDA0002741502160000061
其中config主要是一些全局的配置,如连接数据库配置,全局的数据清理策略,预警策略以及重调策略。其中各种策略的配置都是基于接口级别进行配置,不同的接口级别应用不同的策略。
apps模块主要是描述对接应用相关的配置,需要为每个应用定义不同的应用编码,应用名称,元数据,接口调用支持类等信息。
对于接口调用管理来说判定一个接口调用是否成功,如果失败是否需要重调等信息是非常关键的,这部分需要集成方自己定义实现,并且在app中配置接口调用处理器callSupportClassName信息,,接口调用处理器需要实现CallSupport接口,CallSupport以及相关模型如下:
Figure BDA0002741502160000071
Figure BDA0002741502160000081
CallSupport中定义了在接口失败重调过程中构造请求的各个钩子函数,用来重新构造请求信息。
每一个app中需要事先定义各个接口的相关信息,如接口编码,名称,路径,接口级别等等信息,也可以为一个接口设置单独的CallSupport支持。其中接口级别的定义可以区分接口的重要程度,相关策略的配置都是基于接口级别定义的。
为满足不用应用的个性化设置,全局配置中的重调策略,自动清理策略等等都可以在每个应用中单独配置。
根据上述的基本配置,在应用启动时会读取、解析配置文件,根据全局设置以及app应用个性化配置生成定时任务作业。
当接口记录表中产生数据以后,便可以针对数据做一些附加功能,根据配置文件生成的策略处理器开始发挥作用:
重调策略处理器,如开启了全局处理器,根据配置的频率扫描指定时间段内调用异常的接口记录(接口调用处理器解析返回结果需要重调的记录),发起重调,重调时调用接口调用处理器中的:
buildUrl(),buildHeaders(),buildPostRequestBody(),buildPostJSONRequestBody(),build PostJSONRequestBody()等钩子函数构造出新的请求体,进行重调。
清除策略处理器,根据指定频率扫描接口调用记录的创建时间,如达到最大生存时间则删除。
预警策略处理器,根据不同应用,不同接口级别指定的频率扫描产生调用错误的数量,达到预警临界值就向绑定邮箱发送预警邮件。
以上所述的实施例,只是本发明较优选的具体实施方式,本领域的技术人员在本发明技术方案范围内进行的通常变化和替换都应包含在本发明的保护范围内。

Claims (10)

1.一种应用于多系统对接处理的模型,其特征在于,所述模型的构成包括:基本配置组件,接口调用处理器组件,http调用组件,接口调用记录存储组件,异步任务队列组件,定时任务作业组件,其中:
基本配置组件,包括连接数据库配置,全局策略配置,应用及接口配置;
所述基本配置组件采用json文件或者数据库表实现;
所述http调用组件采用Okhttp完成htpp请求,网络交互,连接同一地址的链接共享同一个socket,通过连接池来减小响应延迟;
所述定时任务作业组件采用Quartz框架作为定时任务处理器,根据时间间隔来调度作业,实现作业和触发器的多对多的关系,并将多个作业与不同的触发器关联,完成自动清除数据,定时重调等功能。
2.根据权利要求1所述的一种应用于多系统对接处理的模型,其特征在于,
所述模型通过线程池或消息队列完成异步接口调用;
所述接口调用处理器组件发起异步接口调用处理流程如下:
组装请求头以及请求头;
提交任务至线程池或消息队列;
从任务队列获取消息队列中读取接口调用任务;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
3.根据权利要求1所述的一种应用于多系统对接处理的模型,其特征在于,所述接口调用处理器组件发起普通接口调用处理流程如下:
组装请求头以及请求头;
基于OKhttp3发起http请求;
调用接口调用处理器解析响应结果;
将接口调用记录保存在接口调用记录信息表中,返回数据。
4.根据权利要求2或3所述的一种应用于多系统对接处理的模型,其特征在于,所述模型根据接口调用记录信息表中产生的数据,对数据启动附加功能,根据配置文件生成的策略处理器开始发挥作用,包括:重调策略处理器,清除策略处理器,预警策略处理器。
5.根据权利要求4所述的一种应用于多系统对接处理的模型,其特征在于,所述重调策略处理器,根据配置的频率扫描指定时间段内调用异常的接口记录(接口调用处理器解析返回结果需要重调的记录),发起重调,重调时调用接口调用处理器中的钩子函数构造出新的请求体,进行重调。
6.根据权利要求4所述的一种应用于多系统对接处理的模型,其特征在于,所述清除策略处理器,根据指定频率扫描接口调用记录的创建时间,如达到最大生存时间则删除。
7.根据权利要求4所述的一种应用于多系统对接处理的模型,其特征在于,所述预警策略处理器,根据不同应用,不同接口级别指定的频率扫描产生调用错误的数量,达到预警临界值就向绑定邮箱发送预警邮件。
8.根据权利要求1所述的一种应用于多系统对接处理的模型,其特征在于,所述模型在json文件的模板中,通过config布置全局的配置,包括连接数据库配置,全局的数据清理策略,预警策略以及重调策略,其中各种策略的配置都是基于接口级别进行配置,不同的接口级别应用不同的策略。
9.根据权利要求8所述的一种应用于多系统对接处理的模型,其特征在于,所述模型在json文件的模板中,对于接口调用管理中,判定一个接口调用是否成功,如果失败是否需要重调,根据集成方的需要自己定义实现,并在app中配置接口调用处理器callSupportClassName信息,实现CallSupport接口。
10.根据权利要求9所述的一种应用于多系统对接处理的模型,其特征在于,所述模型在json文件的模板中,通过apps模块进行对接应用相关的配置,并根据需要为每个应用定义不同的应用编码,应用名称,元数据,接口调用支持类信息;
其中,每一个app中需要事先定义各个接口的相关信息,如接口编码,名称,路径,接口级别等等信息;
或者,为一个接口设置单独的CallSupport支持;
其中接口级别的定义可以区分接口的重要程度,相关策略的配置基于接口级别定义的。
CN202011151686.6A 2020-10-26 2020-10-26 一种应用于多系统对接处理的模型 Pending CN112241430A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011151686.6A CN112241430A (zh) 2020-10-26 2020-10-26 一种应用于多系统对接处理的模型

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011151686.6A CN112241430A (zh) 2020-10-26 2020-10-26 一种应用于多系统对接处理的模型

Publications (1)

Publication Number Publication Date
CN112241430A true CN112241430A (zh) 2021-01-19

Family

ID=74169742

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011151686.6A Pending CN112241430A (zh) 2020-10-26 2020-10-26 一种应用于多系统对接处理的模型

Country Status (1)

Country Link
CN (1) CN112241430A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117573622A (zh) * 2024-01-15 2024-02-20 北京持安科技有限公司 一种自动清理前端项目中废弃接口方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107704315A (zh) * 2017-03-31 2018-02-16 广东网金控股股份有限公司 一种基于Quartz的定时任务调度服务框架及方法
CN108647265A (zh) * 2018-04-28 2018-10-12 新疆熙菱信息技术股份有限公司 基于多平台数据交互式系统
CN109886656A (zh) * 2019-02-27 2019-06-14 成都高投盈创动力投资发展有限公司 一种支持多系统的工作流引擎系统
CN110673892A (zh) * 2019-09-17 2020-01-10 中电万维信息技术有限责任公司 一种基于组件配置的接口统一调用方法
CN110781236A (zh) * 2019-10-29 2020-02-11 山西云时代技术有限公司 一种构建政务大数据治理体系的方法
CN110968439A (zh) * 2019-11-28 2020-04-07 蜂助手股份有限公司 系统间的消息通知方法、装置、服务器、系统及存储介质
CN111325517A (zh) * 2018-12-14 2020-06-23 上海冠翊软件科技有限公司 电子政务管理系统及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107704315A (zh) * 2017-03-31 2018-02-16 广东网金控股股份有限公司 一种基于Quartz的定时任务调度服务框架及方法
CN108647265A (zh) * 2018-04-28 2018-10-12 新疆熙菱信息技术股份有限公司 基于多平台数据交互式系统
CN111325517A (zh) * 2018-12-14 2020-06-23 上海冠翊软件科技有限公司 电子政务管理系统及方法
CN109886656A (zh) * 2019-02-27 2019-06-14 成都高投盈创动力投资发展有限公司 一种支持多系统的工作流引擎系统
CN110673892A (zh) * 2019-09-17 2020-01-10 中电万维信息技术有限责任公司 一种基于组件配置的接口统一调用方法
CN110781236A (zh) * 2019-10-29 2020-02-11 山西云时代技术有限公司 一种构建政务大数据治理体系的方法
CN110968439A (zh) * 2019-11-28 2020-04-07 蜂助手股份有限公司 系统间的消息通知方法、装置、服务器、系统及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117573622A (zh) * 2024-01-15 2024-02-20 北京持安科技有限公司 一种自动清理前端项目中废弃接口方法及装置
CN117573622B (zh) * 2024-01-15 2024-04-09 北京持安科技有限公司 一种自动清理前端项目中废弃接口方法及装置

Similar Documents

Publication Publication Date Title
US20210117895A1 (en) Systems and Methods for Cross-Platform Scheduling and Workload Automation
JP4979931B2 (ja) 文書中の変更を追跡するための方法およびシステム
US8495434B2 (en) Failure source server and mail server administrator alert management programs, systems, and methods
US9842151B2 (en) System and method for uploading and management of contract-research-organization data to a sponsor company's electronic laboratory notebook
CA2621946C (en) Improvements in and relating to service oriented architecture
US20120035942A1 (en) Managing business relationships using a third-party service
US20090204949A1 (en) System, method and program product for dynamically adjusting trace buffer capacity based on execution history
US10033796B2 (en) SAAS network-based backup system
US20170068963A1 (en) System and a method for lean methodology implementation in information technology
US20110167048A1 (en) Method and system for clearing log files of service system
EP2461615A1 (en) Method for backing up terminal data and system thereof
US8626526B2 (en) System and method for a healthcare communication framework
CN111930706B (zh) 基于远程调用的分布式网络文件存储系统和方法
CN103297485B (zh) 分布式缓存自动管理系统和分布式缓存自动管理方法
US20160089608A1 (en) Computer-implemented method for determining game mechanics in business process gamification
CN110209654A (zh) 一种文本文件数据入库方法、系统及电子设备和存储介质
CN110162563B (zh) 一种数据入库方法、系统及电子设备和存储介质
CN112241430A (zh) 一种应用于多系统对接处理的模型
CN102521339B (zh) 用于动态访问数据源的系统和方法
US8805942B2 (en) Storing and partitioning email messaging data
CN115437954A (zh) 一种接口自动化测试数据分离方法
EP2600294A1 (en) Reporting work with user profile contacts
CN117131080A (zh) 一种基于流处理和消息队列的数据处理平台
CN113837870A (zh) 金融风险数据审批方法及装置
CN111813575A (zh) 一种基于容器服务的定制化清理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210119