CN102819537A - 异构系统中进行数据交换的方法及系统 - Google Patents
异构系统中进行数据交换的方法及系统 Download PDFInfo
- Publication number
- CN102819537A CN102819537A CN201110301445XA CN201110301445A CN102819537A CN 102819537 A CN102819537 A CN 102819537A CN 201110301445X A CN201110301445X A CN 201110301445XA CN 201110301445 A CN201110301445 A CN 201110301445A CN 102819537 A CN102819537 A CN 102819537A
- Authority
- CN
- China
- Prior art keywords
- data
- carry out
- file
- needs
- handling system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
本发明揭示了一种异构系统中进行数据交换的方法及系统。该方法可包括步骤:将第一数据处理系统中需要导出的数据转换为预设文件并共享;获取共享的所述预设文件解析,并导入至第二数据处理系统。本发明可提升不同数据处理系统中数据的兼容性,使不同数据处理系统中的数据交换具有更高效率,同时通过检验确保数据的安全性。
Description
技术领域
本发明涉及到数据交换领域,特别涉及到一种异构系统中进行数据交换的方法及系统。
背景技术
现在企业里通常都存在多种不同数据处理系统并存的情况,而不同的数据处理系统中数据通常不能相互兼容,需要通过相应的数据转换。一般数据库软件厂商会提供自己产品间的数据交换方法,比如微软的SQL Server、Excel以及Access之间可用DTS、Oracle可用物化视图、DBLink等技术,但一般都不能用于不同厂商的产品之间现有技术中并不存在相应的转换方式。
如此,提出一种增强数据一致性、提升异构数据处理系统的兼容性的数据交换方式成为亟待解决的问题。
发明内容
本发明的主要目的为提供一种异构系统中进行数据交换的方法,提升异构系统中数据的兼容性。
本发明提出一种异构系统中进行数据交换的方法,包括步骤:
将第一数据处理系统中需要导出的数据转换为预设文件并共享;
获取共享的所述预设文件解析,并导入至第二数据处理系统。
优选地,所述将第一数据处理系统中需要导出的数据转换为预设文件并共享的步骤具体包括:
将需要导出的数据根据定义的文件格式处理该数据,转入对应数据库表中并执行指定的业务处理生成预设文件,并传输至数据共享中心。
优选地,所述将第一数据处理系统中需要导出的数据转换为预设文件并共享的步骤之前包括:
定义预设文件的文件格式;所述预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程;所述数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
优选地,所述获取共享的所述预设文件解析的步骤之前还包括:
根据所述预设文件的校验码进行验证。
优选地,所述获取共享的所述预设文件解析,并导入至第二数据处理系统的步骤具体包括:
根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,将数据转入到第二数据处理系统的实体表中,再根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
本发明还提出一种异构系统中进行数据交换的系统,包括:
数据导出单元,用于将第一数据处理系统中需要导出的数据转换为预设文件并共享;
数据解析单元,用于获取共享的所述预设文件解析,并导入至第二数据处理系统。
优选地,所述数据导出单元具体用于:
将需要导出的数据根据定义的文件格式处理该数据,转入对应数据库表中并执行指定的业务处理生成预设文件,并传输至数据共享中心。
优选地,所述系统还包括:
格式定义单元,用于定义预设文件的文件格式;所述预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程;所述数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
优选地,所述系统还包括:
检验单元,用于根据所述预设文件的校验码进行验证。
优选地,所述数据解析单元具体用于:
根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,将数据转入到第二数据处理系统的实体表中,再根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
本发明可提升不同数据处理系统中数据的兼容性,使不同数据处理系统中的数据交换具有更高效率,同时通过检验确保数据的安全性。
附图说明
图1是本发明异构系统中进行数据交换的方法一实施例中的步骤流程示意图;
图2是本发明异构系统中进行数据交换的方法另一实施例中的步骤流程示意图;
图3是本发明异构系统中进行数据交换的系统一实施例中的结构示意图;
图4是本发明异构系统中进行数据交换的系统另一实施例中的结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,提出本发明一种异构系统中进行数据交换的方法一实施例。该方法可包括:
步骤S10、将第一数据处理系统中需要导出的数据转换为预设文件并共享;
步骤S11、获取共享的上述预设文件解析,并导入至第二数据处理系统。
为减少信息孤岛、增强数据一致性或者减少数据生产的工作量等原因,经常需要在不同数据处理系统之间进行数据的交换,而通常不同数据处理系统之间的数据结构差异比较大,还有可能数据交换量大且数据交换非常频繁,在对及时性要求较高的数据处理系统之间,极需具有高兼容性以及高效率的数据转换方式。
本实施例中,可预先定义一种可扩展的数据文件格式,根据该数据文件格式可将数据生成相应具有高兼容性的预设文件,并通过该预设文件实现不同数据处理系统中高效率的数据转换。
参照图2,在本发明的另一实施例中,上述步骤S10之前还可包括:
步骤S100、定义预设文件的文件格式;该预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程等;该数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
假设需要将数据结构差异较大的两个数据处理系统之间进行数据交换,将第一数据处理系统中的数据导入至第二数据处理系统中。首先定义中通用的文件格式,并可扩展;根据定义的该文件格式可将数据生成预设文件,该预设文件可包括:文件名、文件版本、产生程序、数据使用方需要的实体表格、数据提供方/数据使用方共同遵守的数据类型(比如VARCHAR、INT、NUMERIC和/或DATETIME等)、数据使用方使用数据前需进行的操作、使用数据后需进行的操作以及文件校验码等信息。该文件名可包括数据提供方、数据使用方以及顺序号等。该文件校验码可放置在预设文件的尾行。
在不同数据处理系统或不同数据库之间需要进行数据交换时,数据提供方按该文件格式生成数据的预设文件。上述第一数据处理系统可为数据提供方,其将需要导出的数据根据定义的文件格式处理该数据,转入对应数据库表中并执行指定的业务处理生成预设文件,然后通过FTP等方式传输至数据共享中心(比如FTP服务器或共享文件夹等)。上述第二数据处理系统可为数据使用方,可通过FTP等方式从数据共享中心获取从第一数据处理系统中导出数据的预设文件,根据定义的文件格式进行解析,转换为第二数据处理系统可辨识的数据类型,并导入至该第二数据处理系统中。在进行解析之前,还可对上述预设文件进行验证,辨别数据真伪。
上述步骤S11之前还包括:
步骤S110、根据上述预设文件的校验码进行验证。
上述第二数据处理系统从数据共享中心下载预设文件进行解析前,首先可检验校验码是否正确,以确定该预设文件是否被篡改过,确保数据的安全性。在检验数据未被篡改后,再根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,然后将数据转入到第二数据处理系统的实体表中,最后根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
在本实施例的一具体数据转换实例中:
文件名:[第一数据处理系统].[第一数据处理系统].[顺序号].dch;
第一行:数据文件版本;
第二行:生成程序及版本;
第三行:第一数据处理系统名称;
第四行:第二数据处理系统名称;
第五行:顺序号(数据提供方生成);
第六行:数据作用描述;
第七行:第二数据处理系统使用数据前需要进行的业务处理(执行指定的SQL语句、过程以及代码等);
第八行:第二数据处理系统使用数据后需要进行的业务处理(执行指定的SQL语句、过程以及代码等);
第九行:第二数据处理系统存储数据用的实体名(第一个实体);
第十行:第二数据处理系统存储数据用的实体字段清单;
第十一行:第二数据处理系统存储数据用的实体字段清单对应字符类型(比如:VARCHAR、INT、NUMERIC以及DATETIME等)
第十二行:数据内容;
第十三行:第一个实体结束;
(重复第九行到第十三行)
尾行:文件校验码。
上述异构系统中进行数据交换的方法,可提升不同数据处理系统中数据的兼容性,使不同数据处理系统中的数据交换具有更高效率,同时通过检验确保数据的安全性。
参照图3,本发明提出一种异构系统中进行数据交换的系统20的一实施例。该系统20可包括:数据导出单元21以及数据解析单元22等;该数据导出单元21,用于将第一数据处理系统中需要导出的数据转换为预设文件并共享;该数据解析单元22,用于获取共享的上述预设文件解析,并导入至第二数据处理系统。
为减少信息孤岛、增强数据一致性或者减少数据生产的工作量等原因,经常需要在不同数据处理系统之间进行数据的交换,而通常不同数据处理系统之间的数据结构差异比较大,还有可能数据交换量大且数据交换非常频繁,在对及时性要求较高的数据处理系统之间,极需具有高兼容性以及高效率的数据转换系统。
本实施例中,可预先定义一种可扩展的数据文件格式,根据该数据文件格式可将数据生成相应具有高兼容性的预设文件,并通过该预设文件实现不同数据处理系统中高效率的数据转换。
参照图4,在本发明另一实施例中,上述异构系统中进行数据交换的系统20还包括:格式定义单元210,用于定义预设文件的文件格式;该预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程;该数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
假设需要将数据结构差异较大的两个数据处理系统之间进行数据交换,将第一数据处理系统中的数据导入至第二数据处理系统中。首先通过格式定义单元210定义中通用的文件格式,并可扩展;根据定义的该文件格式可将数据生成预设文件,该预设文件可包括:文件名、文件版本、产生程序、数据使用方需要的实体表格、数据提供方/数据使用方共同遵守的数据类型(比如VARCHAR、INT、NUMERIC和/或DATETIME等)、数据使用方使用数据前需进行的操作、使用数据后需进行的操作以及文件校验码等信息。
在不同数据处理系统或不同数据库之间需要进行数据交换时,上述数据导出单元21可按该文件格式将数据提供方的数据生成预设文件。上述第一数据处理系统可为数据提供方,上述数据导出单元21可将第一数据处理系统中需要导出的数据根据定义的文件格式进行处理,转入对应数据库表中并执行指定的业务处理生成预设文件,然后通过FTP等方式传输至数据共享中心(比如FTP服务器或共享文件夹等)。上述第二数据处理系统可为数据使用方,上述数据解析单元22可通过FTP等方式从数据共享中心获取从第一数据处理系统中导出数据的预设文件,根据定义的文件格式进行解析,转换为第二数据处理系统可辨识的数据类型,并导入至该第二数据处理系统中。在进行解析之前,还可对上述预设文件进行验证,辨别数据真伪。
上述异构系统中进行数据交换的系统20还包括:检验单元220,用于根据上述预设文件的校验码进行验证。
上述第二数据处理系统从数据共享中心下载预设文件进行解析前,首先可通过检验单元220检验校验码是否正确,以确定该预设文件是否被篡改过,确保数据的安全性。在检验数据未被篡改后,再通过数据解析单元22根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,然后将数据转入到第二数据处理系统的实体表中,最后根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
在一具体实例中,上述格式定义单元210以及数据导出单元21可设置于第一数据处理系统中;上述检验单元220以及数据解析单元22可设置于第二数据处理系统中。
上述异构系统中进行数据交换的系统20,可提升不同数据处理系统中数据的兼容性,使不同数据处理系统中的数据交换具有更高效率,同时通过检验确保数据的安全性。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种异构系统中进行数据交换的方法,其特征在于,包括步骤:
将第一数据处理系统中需要导出的数据转换为预设文件并共享;
获取共享的所述预设文件解析,并导入至第二数据处理系统。
2.根据权利要求1所述的异构系统中进行数据交换的方法,其特征在于,所述将第一数据处理系统中需要导出的数据转换为预设文件并共享的步骤具体包括:
将需要导出的数据根据定义的文件格式处理该数据,转入对应数据库表中并执行指定的业务处理生成预设文件,并传输至数据共享中心。
3.根据权利要求1所述的异构系统中进行数据交换的方法,其特征在于,所述将第一数据处理系统中需要导出的数据转换为预设文件并共享的步骤之前包括:
定义预设文件的文件格式;所述预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程;所述数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
4.根据权利要求1至3中任一项所述的异构系统中进行数据交换的方法,其特征在于,所述获取共享的所述预设文件解析的步骤之前还包括:
根据所述预设文件的校验码进行验证。
5.根据权利要求4所述的异构系统中进行数据交换的方法,其特征在于,所述获取共享的所述预设文件解析,并导入至第二数据处理系统的步骤具体包括:
根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,将数据转入到第二数据处理系统的实体表中,再根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
6.一种异构系统中进行数据交换的系统,其特征在于,包括:
数据导出单元,用于将第一数据处理系统中需要导出的数据转换为预设文件并共享;
数据解析单元,用于获取共享的所述预设文件解析,并导入至第二数据处理系统。
7.根据权利要求6所述的异构系统中进行数据交换的系统,其特征在于,所述数据导出单元具体用于:
将需要导出的数据根据定义的文件格式处理该数据,转入对应数据库表中并执行指定的业务处理生成预设文件,并传输至数据共享中心。
8.根据权利要求6所述的异构系统中进行数据交换的系统,其特征在于,所述系统还包括:
格式定义单元,用于定义预设文件的文件格式;所述预设文件包括文件版本、产生程序、实体表格、数据类型以及操作过程;所述数据类型包括VARCHAR、INT、NUMERIC和/或DATETIME。
9.根据权利要求6至8中任一项所述的异构系统中进行数据交换的系统,其特征在于,所述系统还包括:
检验单元,用于根据所述预设文件的校验码进行验证。
10.根据权利要求9所述的异构系统中进行数据交换的系统,其特征在于,所述数据解析单元具体用于:
根据数据使用前需要进行的业务处理定义执行指定的业务逻辑,将数据转入到第二数据处理系统的实体表中,再根据数据使用后需要进行的业务处理定义执行指定的业务逻辑。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110301445.XA CN102819537B (zh) | 2011-09-29 | 2011-09-29 | 异构系统中进行数据交换的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110301445.XA CN102819537B (zh) | 2011-09-29 | 2011-09-29 | 异构系统中进行数据交换的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102819537A true CN102819537A (zh) | 2012-12-12 |
CN102819537B CN102819537B (zh) | 2016-08-31 |
Family
ID=47303650
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110301445.XA Active CN102819537B (zh) | 2011-09-29 | 2011-09-29 | 异构系统中进行数据交换的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102819537B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103092951A (zh) * | 2013-01-15 | 2013-05-08 | 福州特力惠电子有限公司 | 一种基于信息展现层的通用数据交换方法及系统 |
CN104484325A (zh) * | 2014-09-29 | 2015-04-01 | 黑龙江八一农垦大学 | 一种会计报表的处理方法及处理系统 |
CN106293977A (zh) * | 2015-05-15 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种数据校验方法与设备 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110019032A (zh) * | 2017-09-20 | 2019-07-16 | 北京国双科技有限公司 | 一种数据处理方法及其相关装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1704936A (zh) * | 2004-05-31 | 2005-12-07 | 深圳宇龙计算机通信科技(深圳)有限公司 | 一种数据库间的数据转换或同步方法 |
CN101739452A (zh) * | 2009-12-17 | 2010-06-16 | 中国电力科学研究院 | 一种数据交换接口及其实现方法 |
CN101866361A (zh) * | 2010-06-30 | 2010-10-20 | 山东中创软件工程股份有限公司 | 一种异构数据集成方法及装置 |
CN101957865A (zh) * | 2010-10-27 | 2011-01-26 | 杭州新中大软件股份有限公司 | 一种异构系统间数据交换与共享技术 |
-
2011
- 2011-09-29 CN CN201110301445.XA patent/CN102819537B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1704936A (zh) * | 2004-05-31 | 2005-12-07 | 深圳宇龙计算机通信科技(深圳)有限公司 | 一种数据库间的数据转换或同步方法 |
CN101739452A (zh) * | 2009-12-17 | 2010-06-16 | 中国电力科学研究院 | 一种数据交换接口及其实现方法 |
CN101866361A (zh) * | 2010-06-30 | 2010-10-20 | 山东中创软件工程股份有限公司 | 一种异构数据集成方法及装置 |
CN101957865A (zh) * | 2010-10-27 | 2011-01-26 | 杭州新中大软件股份有限公司 | 一种异构系统间数据交换与共享技术 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103092951A (zh) * | 2013-01-15 | 2013-05-08 | 福州特力惠电子有限公司 | 一种基于信息展现层的通用数据交换方法及系统 |
CN103092951B (zh) * | 2013-01-15 | 2016-07-13 | 福建特力惠信息科技股份有限公司 | 一种基于信息展现层的通用数据交换方法及系统 |
CN104484325A (zh) * | 2014-09-29 | 2015-04-01 | 黑龙江八一农垦大学 | 一种会计报表的处理方法及处理系统 |
CN106293977A (zh) * | 2015-05-15 | 2017-01-04 | 阿里巴巴集团控股有限公司 | 一种数据校验方法与设备 |
CN106293977B (zh) * | 2015-05-15 | 2019-04-05 | 阿里巴巴集团控股有限公司 | 一种数据校验方法与设备 |
Also Published As
Publication number | Publication date |
---|---|
CN102819537B (zh) | 2016-08-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101930443B (zh) | 数据业务系统及数据业务实现方法 | |
CN107147704A (zh) | 一种面向区块链的通用服务中间件系统 | |
CN104331366A (zh) | 一种测试用例设计效率提升方法及系统 | |
CN112948427B (zh) | 数据查询方法、装置、设备及存储介质 | |
EP1999702A1 (en) | Scalable transformation and configuration of edi interchanges | |
CN111899011A (zh) | 一种医务账单对账系统、计算机设备和存储介质 | |
CN110688828A (zh) | 文件处理方法及装置、文件处理系统、计算机设备 | |
CN102819537A (zh) | 异构系统中进行数据交换的方法及系统 | |
CN102508919A (zh) | 数据处理方法及系统 | |
CN112417503A (zh) | 岗位权限授权方法、装置、电子设备及存储介质 | |
CN107133233B (zh) | 一种配置数据查询的处理方法及装置 | |
CN108960672B (zh) | 限额限次的风控方法、装置及计算机可读存储介质 | |
CN112949278A (zh) | 数据核对方法、装置、电子设备及可读存储介质 | |
CN101673270B (zh) | Cad三维文件管理方法 | |
CN102624894B (zh) | 一种报文组装与解析的方法和系统 | |
CN102819539B (zh) | 数据快速录入的方法及系统 | |
CN101799890B (zh) | 证照数据处理方法和系统 | |
CN110737425A (zh) | 一种计费平台系统的应用程序的建立方法及装置 | |
CN112580079A (zh) | 权限配置方法、装置、电子设备及可读存储介质 | |
CN102331925A (zh) | 软件快速开发平台 | |
CN111901224A (zh) | 延时消息加载方法、装置、设备及计算机可读存储介质 | |
CN105046561A (zh) | 一种可适应多种银行交易报文格式的方法 | |
CN109408577B (zh) | Oracle数据库json解析方法、系统、装置及可存储介质 | |
CN113688418B (zh) | 基于区块链数据存储的工程订单结算方法及系统 | |
CN102486731A (zh) | 增强软件的软件调用栈的可视化的方法、设备和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |