CN102035848A - 一种共享系统间进行数据交换的方法 - Google Patents

一种共享系统间进行数据交换的方法 Download PDF

Info

Publication number
CN102035848A
CN102035848A CN2010106041384A CN201010604138A CN102035848A CN 102035848 A CN102035848 A CN 102035848A CN 2010106041384 A CN2010106041384 A CN 2010106041384A CN 201010604138 A CN201010604138 A CN 201010604138A CN 102035848 A CN102035848 A CN 102035848A
Authority
CN
China
Prior art keywords
data
formatted file
target
target data
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010106041384A
Other languages
English (en)
Other versions
CN102035848B (zh
Inventor
刘少军
曾文语
陈煌辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FUJIAN LINEWELL SOFTWARE ENGINEERING DEVELOPMENT Co Ltd
Original Assignee
FUJIAN LINEWELL SOFTWARE ENGINEERING DEVELOPMENT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FUJIAN LINEWELL SOFTWARE ENGINEERING DEVELOPMENT Co Ltd filed Critical FUJIAN LINEWELL SOFTWARE ENGINEERING DEVELOPMENT Co Ltd
Priority to CN 201010604138 priority Critical patent/CN102035848B/zh
Publication of CN102035848A publication Critical patent/CN102035848A/zh
Application granted granted Critical
Publication of CN102035848B publication Critical patent/CN102035848B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Storage Device Security (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明一种共享系统间进行数据交换的方法,其中,源数据端把需要共享的数据转换成约定的格式文件,该格式文件在数据交换引擎中,将源数据结构转化成目标数据结构后发送给目标数据端,该目标数据端将该格式文件转换成自己能接受的格式文件后写入目标位置,达致共享系统间进行数据交换的目的,支持各种数据之间的转换,具备更强的数据处理能力。

Description

一种共享系统间进行数据交换的方法
技术领域
本发明涉及一种内部不同业务系统间、内部与外单位不同业务系统间进行数据交换的方法。
背景技术
随着信息化的发展,很多部门单位都建立起不少的业务应用平台,各平台之间有些基础信息是一样的,但是很多信息在不同的系统、不同的架构中,不能很好地进行共享并重复使用,从而形成一个一个的信息孤岛。
数据交换引擎就是为了解决系统间的信息共享问题而出现的,被用来处理各个业务系统间的数据信息,以实现数据的共享利用,减少重复录入,提高工作效率。
上述数据的来源是多种多样的,主要分为两种类型:非结构化数据和结构化数据。非结构化数据主要指EXCEL、文本等形式的数据;结构化数据主要指存储在关系型数据库中的数据,比如Oracle、Sybase、SQL Server、MYSQL等。如何处理各种数据类型之间的准确而有效的通讯就成为数据交换引擎技术的关键了。
一般的数据交换存在着几方面的问题:1、没有形成统一的机制;2、没有相应的保密措施或者只有简单的加密处理;3、只支持单一的接入协议;4、只支持单一或者小部分数据格式之间的转换;5、不支持路由规则。
发明内容
本发明的目的在于提供一种共享系统间进行数据交换的方法,以实现不同数据源的共享利用,减少重复录入,提高工作效率。
一种共享系统间进行数据交换的方法,具体包括以下几个步骤:
步骤1、源数据端把需要共享的数据转换成约定的格式文件,同时,根据不同数据的密级程度要求对转换后的文件进行相应的加密处理,并将该加密文件发送至数据交换引擎;
步骤2、该数据交换引擎的授权认证模块对来自源数据端的加密文件进行用户确认和安全认证;
步骤3、信息路由模块依据数据的密级以及线路的繁忙情况将经过授权认证的XML格式文件路由分发至数据接收模块,支持一对一或一对多;
步骤4、该数据接收模块根据该格式文件的密级要求进行解密并选择对应的通讯方式,然后将该格式文件中的源数据结构转化成目标数据结构;再经由源数据校验模块调用源数据结构与目标数据结构之间的对应关系,对抽取的源数据和加工后的目标数据进行合法性和完整性校验;
步骤5、将转化成目标数据结构的格式文件进行授权认证,加密后发送给目标数据端,该目标数据端将该转化后的格式文件解密后还原成目标数据端接受的格式,并写入目标位置。
本发明采用标准的XML结构进行数据转换,然后进行数据映射,最终将目标结构与数据写到目标地址,从而实现不同数据源的交换共享。本发明在数据交换过程中除了对数据进行加密处理,还增加了相关的授权认证和校验功能,达到了更好的保密和保护作用;支持各种数据之间的转换,具备更强的数据处理能力。
附图说明
图1为本发明的工作流程示意图。
以下结合附图和实施例对本发明作进一步详述。
具体实施方式
如图1所示,本发明一种共享系统间进行数据交换的方法,具体包括以下几个步骤:
步骤1、源数据端把需要共享的数据转换成约定的格式文件,本实施例中采用XML格式文件,同时,根据不同数据的密级程度要求对转换后的文件进行相应的加密处理,并将该加密文件发送至数据交换引擎;
步骤2、该数据交换引擎的授权认证模块对来自源数据端的加密文件进行用户确认和安全认证;
步骤3、信息路由模块依据数据的密级以及线路的繁忙情况将经过授权认证的XML格式文件路由分发至数据接收模块,支持一对一或一对多;
步骤4、该数据接收模块根据该XML格式文件的密级要求进行解密并选择对应的通讯方式,然后将该XML格式文件中的源数据结构转化成目标数据结构;再经由源数据校验模块调用源数据结构与目标数据结构之间的对应关系,对抽取的源数据和加工后的目标数据进行合法性和完整性校验;
步骤5、将转化成目标数据结构的XML格式文件进行授权认证,加密后发送给目标数据端,该目标数据端将该XML格式文件解密后还原成目标数据端接受的格式,并写入目标位置。
本发明支持多协议接入,如SOCKET、MQ、TCP/IP、FTP等。最大程度降低接入点的成本投入,保证扩展的便捷性和兼容性。
本发明的数据交换引擎支持主流的数据库,如Oracle、Sybase、SQL Server、MYSQL等,支持异构数据库间的数据集成与协同,并保证多数据库(异构或同构)之间的全局事务一致性,具有数据同步/异步调用和交易冲正机制等功能,针对不同数据库分别提供相匹配的高效数据处理引擎;支持多结果集的数据处理,支持对多媒体等多种数据格式的读取、更新等处理能力。本发明通过Oracle适配器,Sybase适配器等把数据源转化成统一的数据格式,适配器的主要功能是把源数据转化成统一的数据格式给数据交换引擎,在数据发送环节支持事务的功能。交易冲正机制主要是通过日志功能来实现,会记录每次数据交换中错误的数据,并提供数据修改重新进行发送。不同的数据格式的读取有对应的适配器进行读取转换。
本发明支持提供源数据端和目标数据端之间多种通讯方式:会话、广播通知、管道、发布/订阅;提供多种接收通知消息的机制满足不同的应用场景需求;联网报文采用字符串报文、二进制流、XML格式报文、文件等形式。数据交换引擎能支持不同地域的服务器进行服务端连接,能够进行连接策略和加密的配置;支持跨越广域网的服务器间进行透明的请求转发和内容依赖路由机制;提供网络传输压缩功能,以减少应用在网络上的传输量,压缩功能必须是可配置的,对应用透明。
数据交换引擎提供多种高可用性,能够在服务节点间进行请求转移;支持在单机模式和多机模式下,提供多种不同的负载均衡算法。
本发明的重点在于:源数据端把需要共享的数据转换成约定的格式文件,该格式文件在数据交换引擎中,将源数据结构转化成目标数据结构后发送给目标数据端,该目标数据端将该格式文件转换成自己能接受的格式文件后写入目标位置,达致共享系统间进行数据交换的目的。
以上所述,仅是本发明较佳实施例而已,并非对本发明的技术范围作任何限制,故凡是依据本发明的技术实质对以上实施例所作的任何细微修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (1)

1.一种共享系统间进行数据交换的方法,其特征在于包括以下几个步骤:
步骤1、源数据端把需要共享的数据转换成约定的格式文件,同时,根据不同数据的密级程度要求对转换后的文件进行相应的加密处理,并将该加密文件发送至数据交换引擎;
步骤2、该数据交换引擎的授权认证模块对来自源数据端的加密文件进行用户确认和安全认证;
步骤3、信息路由模块依据数据的密级以及线路的繁忙情况将经过授权认证的XML格式文件路由分发至数据接收模块,支持一对一或一对多;
步骤4、该数据接收模块根据该格式文件的密级要求进行解密并选择对应的通讯方式,然后将该格式文件中的源数据结构转化成目标数据结构;再经由源数据校验模块调用源数据结构与目标数据结构之间的对应关系,对抽取的源数据和加工后的目标数据进行合法性和完整性校验;
步骤5、将转化成目标数据结构的格式文件进行授权认证,加密后发送给目标数据端,该目标数据端将该转化后的格式文件解密后还原成目标数据端接受的格式,并写入目标位置。
CN 201010604138 2010-12-23 2010-12-23 一种共享系统间进行数据交换的方法 Active CN102035848B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201010604138 CN102035848B (zh) 2010-12-23 2010-12-23 一种共享系统间进行数据交换的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201010604138 CN102035848B (zh) 2010-12-23 2010-12-23 一种共享系统间进行数据交换的方法

Publications (2)

Publication Number Publication Date
CN102035848A true CN102035848A (zh) 2011-04-27
CN102035848B CN102035848B (zh) 2013-06-05

Family

ID=43888171

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201010604138 Active CN102035848B (zh) 2010-12-23 2010-12-23 一种共享系统间进行数据交换的方法

Country Status (1)

Country Link
CN (1) CN102035848B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103078960A (zh) * 2013-02-06 2013-05-01 杭州电子科技大学 涉密电子文件数据交换与共享系统
CN103685543A (zh) * 2013-12-23 2014-03-26 中国电子科技集团公司第三十研究所 一种异构数据库间的数据同步方法及系统
CN103858407A (zh) * 2013-12-02 2014-06-11 华为技术有限公司 文件的处理方法、装置及系统
CN103905521A (zh) * 2012-12-31 2014-07-02 中国移动通信集团公司 一种用于网络服务的信息处理系统和方法
CN104104738A (zh) * 2014-08-06 2014-10-15 江苏瑞中数据股份有限公司 一种基于ftp的数据交换系统
CN105320755A (zh) * 2015-10-14 2016-02-10 夏君 一种安全高速数据传输方法
CN107135198A (zh) * 2017-03-28 2017-09-05 深圳市卓讯信息技术有限公司 一种基于etl技术协同多通讯协议的数据交换方法及装置
CN107332886A (zh) * 2017-06-20 2017-11-07 福建中金在线信息科技有限公司 数据同步方法、装置、系统、电子设备及可读存储介质
CN109450973A (zh) * 2018-09-29 2019-03-08 福建威盾科技有限公司 一种跨域浏览器数据共享的方法
CN110519185A (zh) * 2019-08-28 2019-11-29 福建威盾科技集团有限公司 一种新型跨网络数据交换的方法
CN110826096A (zh) * 2019-10-29 2020-02-21 杭州趣链科技有限公司 一种基于区块链的数据源共享方法
CN112235193A (zh) * 2020-10-12 2021-01-15 南威软件股份有限公司 基于跨网络多级路由的数据传输方法、装置、设备和介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1410291A2 (en) * 2001-06-28 2004-04-21 Kenamea, Inc. Message delivery system billing method and apparatus
CN101141457A (zh) * 2007-10-09 2008-03-12 南京财经大学 基于xml的企业数据交换处理方法
CN101447999A (zh) * 2008-10-31 2009-06-03 神州数码金程(北京)科技有限公司 安全交换系统及其实现方法
CN101459517A (zh) * 2008-12-18 2009-06-17 上海宝钢钢材贸易有限公司 B2b数据交换系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1410291A2 (en) * 2001-06-28 2004-04-21 Kenamea, Inc. Message delivery system billing method and apparatus
CN101141457A (zh) * 2007-10-09 2008-03-12 南京财经大学 基于xml的企业数据交换处理方法
CN101447999A (zh) * 2008-10-31 2009-06-03 神州数码金程(北京)科技有限公司 安全交换系统及其实现方法
CN101459517A (zh) * 2008-12-18 2009-06-17 上海宝钢钢材贸易有限公司 B2b数据交换系统

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103905521A (zh) * 2012-12-31 2014-07-02 中国移动通信集团公司 一种用于网络服务的信息处理系统和方法
CN103905521B (zh) * 2012-12-31 2018-05-18 中国移动通信集团公司 一种用于网络服务的信息处理系统和方法
CN103078960B (zh) * 2013-02-06 2015-11-18 杭州电子科技大学 涉密电子文件数据交换与共享系统
CN103078960A (zh) * 2013-02-06 2013-05-01 杭州电子科技大学 涉密电子文件数据交换与共享系统
CN103858407A (zh) * 2013-12-02 2014-06-11 华为技术有限公司 文件的处理方法、装置及系统
CN103858407B (zh) * 2013-12-02 2017-04-12 华为技术有限公司 文件的处理方法、装置及系统
CN103685543A (zh) * 2013-12-23 2014-03-26 中国电子科技集团公司第三十研究所 一种异构数据库间的数据同步方法及系统
CN104104738B (zh) * 2014-08-06 2018-02-02 江苏瑞中数据股份有限公司 一种基于ftp的数据交换系统
CN104104738A (zh) * 2014-08-06 2014-10-15 江苏瑞中数据股份有限公司 一种基于ftp的数据交换系统
CN105320755A (zh) * 2015-10-14 2016-02-10 夏君 一种安全高速数据传输方法
CN107135198A (zh) * 2017-03-28 2017-09-05 深圳市卓讯信息技术有限公司 一种基于etl技术协同多通讯协议的数据交换方法及装置
CN107332886A (zh) * 2017-06-20 2017-11-07 福建中金在线信息科技有限公司 数据同步方法、装置、系统、电子设备及可读存储介质
CN109450973A (zh) * 2018-09-29 2019-03-08 福建威盾科技有限公司 一种跨域浏览器数据共享的方法
CN110519185A (zh) * 2019-08-28 2019-11-29 福建威盾科技集团有限公司 一种新型跨网络数据交换的方法
CN110826096A (zh) * 2019-10-29 2020-02-21 杭州趣链科技有限公司 一种基于区块链的数据源共享方法
CN112235193A (zh) * 2020-10-12 2021-01-15 南威软件股份有限公司 基于跨网络多级路由的数据传输方法、装置、设备和介质

Also Published As

Publication number Publication date
CN102035848B (zh) 2013-06-05

Similar Documents

Publication Publication Date Title
CN102035848B (zh) 一种共享系统间进行数据交换的方法
CN110489486B (zh) 生成区块链网络的方法、种子节点和介质
CN102710639B (zh) 一种基于ActiveMQ数据总线的跨电力安全区实时数据交换方法
CN104170354A (zh) 用于发现无线设备的方法和装置
CN112235193B (zh) 基于跨网络多级路由的数据传输方法、装置、设备和介质
CN103209200A (zh) 云服务交换系统及服务查询和交换方法
CN102006245A (zh) 一种数据交换和共享平台
CN110519185A (zh) 一种新型跨网络数据交换的方法
CN101631127A (zh) 文件传输方法及客户端
CN101364924A (zh) 一种基于企业服务总线的数据采集自适应体系结构
CN102594673B (zh) 一种支持设备编号自动分发和路由的方法和系统
CN101710401A (zh) 城市级数字化应用一级平台
CN101083714A (zh) 一种家庭信息化系统
CA2533543A1 (en) System and method for managing communication for component applications
CN201387555Y (zh) 一种综合远程监控系统
KR20180031852A (ko) Mqtt 프로토콜 연동을 위한 어댑터 및 그를 이용한 데이터 교환 시스템
CN105376155A (zh) 一种基于分布式集群架构的智能路由系统及方法
CN105743772A (zh) 一种消息处理的方法及系统
CN104618878A (zh) 短信网关
CN114385684A (zh) 一种BaaS平台数据服务发布方法及其系统
CN107135198B (zh) 一种基于etl技术协同多通讯协议的数据交换方法及装置
CN104640093A (zh) 业务处理装置
CN105491074A (zh) 综合前置机
CN103139171B (zh) 媒体交换网络系统
CN101577876A (zh) 实现行业应用多媒体消息业务的方法、服务器及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 362000 Fujian city of Quanzhou province Quanxiu Street modern square modern furniture enterprise office building on the eighth floor

Applicant after: Linewell Software Co., Ltd.

Address before: The lake of Quanzhou city of Fujian Province, 362000 West Street No. 492 East Lake community building two floor

Applicant before: Linewell Software Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP02 Change in the address of a patent holder

Address after: 362000 Fujian province Quanzhou Fengze District Feng Road South Building 2 building 16-22 layer

Patentee after: Linewell Software Co., Ltd.

Address before: 362000 Fujian city of Quanzhou province Quanxiu Street modern square modern furniture enterprise office building on the eighth floor

Patentee before: Linewell Software Co., Ltd.