CN104699855A - 一种主动式主数据交换方法 - Google Patents
一种主动式主数据交换方法 Download PDFInfo
- Publication number
- CN104699855A CN104699855A CN201510163345.3A CN201510163345A CN104699855A CN 104699855 A CN104699855 A CN 104699855A CN 201510163345 A CN201510163345 A CN 201510163345A CN 104699855 A CN104699855 A CN 104699855A
- Authority
- CN
- China
- Prior art keywords
- data
- rule
- exchanges
- active master
- switching method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Monitoring And Testing Of Exchanges (AREA)
- Exchange Systems With Centralized Control (AREA)
Abstract
本发明公开了一种主动式主数据交换方法,步骤如下:A、确认要进行同步、抽取、汇总、清分的数据,确认数据交换规则;B、数据交换规则的适配;C、规则返回;D、数据抽取配置;E、数据整合;F、数据交换,即对数据进行调用和共享,其通过对数据源的规则适配,实现主数据的交换,即实现大数据的交换。
Description
技术领域
本发明涉及网络通信技术领域,更具体地说,是涉及一种主动式主数据交换方法。
背景技术
目前的企业单位均存在着大大小小不同时期建设的专业性业务系统,系统间的部署主要以网状结构存在。而现有的各个部分使用各自的系统,各系统之间的信息不能互享,形成“信息孤岛”。 随着企业单位研究业务的变化、经济社会的转型和信息技术的发展,数据库之间的数据交换越来越频繁。在业务应用中,经常需要进行复杂的数据交换,尤其是不同系统和业务之间,这些数据交换要求跨平台、跨系统的,同时要实现业务数据结构的变化和多业务的交互。轻量级数据交换方法,用户可以通过简单的配置之间,根据自己的需要,,定义好数据的抽取时间,即可实现数据的交换。但是,各部门、各系统之间的数据庞大,其显然不太适用。
发明内容
本发明的目的是提供一种主动式主数据交换方法。
本发明是提供一种主动式的数据交换方法,通过对数据源的规则适配,实现主数据的交换,即实现大数据的交换。
本发明解决上述问题所采用的技术方案是:
一种主动式主数据交换方法,步骤如下:
A、确认要进行同步、抽取、汇总、清分的数据,确认数据交换规则;
B、数据交换规则的适配;
C、规则返回;
D、数据抽取配置;
E、数据整合;
F、数据交换,即对数据进行调用和共享。
作为优选,在步骤A中,包括:
a、数据的抽取:依次包括数据源配置、抽取时间配置、抽取方式配置,其中,数据源配置需保证需要进行数据交换的数据源的连通性;抽取方式配置需要确定是以增量还是全量的形式进行;
b、数据的整合:对数据进行清洗和整合,对异常数据进行处理。
作为优选,在步骤F中,数据共享时业务系统通过建立系统接口,对接口进行访问,自动完成数据的更新。
作为优选,还包括监控程序,监控程序对数据交换的过程进行监控,通过服务总线完成,仅在上次数据交换完成后才能进行下一次数据交换。
进一步的,所述的步骤A在ETL中进行。
进一步的,ETL将数据交换规则通过数据总线发给规则适配模块对规则进行适配。
综上,本发明的有益效果是:
本发明在利用主动式的数据交换方法,通过对交换、共享的数据的规则适配,完成对主数据的交换。
具体实施方式
下面结合实施例,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1:
一种主动式主数据交换方法,步骤如下:
A、确认要进行同步、抽取、汇总、清分的数据,确认数据交换规则;
B、数据交换规则的适配;
C、规则返回;
D、数据抽取配置;
E、数据整合;
F、数据交换,即对数据进行调用和共享。
本发明在利用主动式的数据交换方法,通过对交换、共享的数据的规则适配,完成对主数据的交换。ETL,是英文 Extract-Transform-Load 的缩写。
实施例2:
本实施例在上述实施例的基础上做了改进,即在步骤A中,包括:
a、数据的抽取:依次包括数据源配置、抽取时间配置、抽取方式配置,其中,数据源配置需保证需要进行数据交换的数据源的连通性;抽取方式配置需要确定是以增量还是全量的形式进行;
b、数据的整合:对数据进行清洗和整合,对异常数据进行处理。
作为优选,在步骤F中,数据共享时业务系统通过建立系统接口,对接口进行访问,自动完成数据的更新。
实施例3:
为了提高数据交换的错误率及减小对系统的配置要求,本实施例在上述实施例的基础上做了改进,即还包括监控程序,监控程序对数据交换的过程进行监控,通过服务总线完成,仅在上次数据交换完成后才能进行下一次数据交换。
进一步的,所述的步骤A在ETL中进行。
进一步的,ETL将数据交换规则通过数据总线发给规则适配模块对规则进行适配。
如上所述,可较好的实现本发明。
Claims (6)
1.一种主动式主数据交换方法,其特征在于,步骤如下:
A、确认要进行同步、抽取、汇总、清分的数据,确认数据交换规则;
B、数据交换规则的适配;
C、规则返回;
D、数据抽取配置;
E、数据整合;
F、数据交换,即对数据进行调用和共享。
2.根据权利要求1所述的一种主动式主数据交换方法,其特征在于:在步骤A中,包括:
数据的抽取:依次包括数据源配置、抽取时间配置、抽取方式配置,其中,数据源配置需保证需要进行数据交换的数据源的连通性;抽取方式配置需要确定是以增量还是全量的形式进行;
数据的整合:对数据进行清洗和整合,对异常数据进行处理。
3.根据权利要求1所述的一种主动式主数据交换方法,其特征在于:在步骤F中,数据共享时业务系统通过建立系统接口,对接口进行访问,自动完成数据的更新。
4.根据权利要求1所述的一种主动式主数据交换方法,其特征在于:还包括监控程序,监控程序对数据交换的过程进行监控,通过服务总线完成,仅在上次数据交换完成后才能进行下一次数据交换。
5.根据权利要求1至4任一所述的一种主动式主数据交换方法,其特征在于:所述的步骤A在ETL中进行。
6.根据权利要求5所述的一种主动式主数据交换方法,其特征在于:ETL将数据交换规则通过数据总线发给规则适配模块对规则进行适配。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510163345.3A CN104699855A (zh) | 2015-04-09 | 2015-04-09 | 一种主动式主数据交换方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510163345.3A CN104699855A (zh) | 2015-04-09 | 2015-04-09 | 一种主动式主数据交换方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104699855A true CN104699855A (zh) | 2015-06-10 |
Family
ID=53346975
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510163345.3A Pending CN104699855A (zh) | 2015-04-09 | 2015-04-09 | 一种主动式主数据交换方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104699855A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104993958A (zh) * | 2015-06-29 | 2015-10-21 | 北京京东尚科信息技术有限公司 | 一种用户主数据的生成方法及系统 |
CN105630964A (zh) * | 2015-12-25 | 2016-06-01 | 甘肃万维信息技术有限责任公司 | 一种数据交互分析系统 |
WO2017008598A1 (zh) * | 2015-07-10 | 2017-01-19 | 中兴通讯股份有限公司 | 大数据交换方法及装置 |
-
2015
- 2015-04-09 CN CN201510163345.3A patent/CN104699855A/zh active Pending
Non-Patent Citations (1)
Title |
---|
陈小菲: "数据集成(ELT)工具的设计与构想", 《厦门科技》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104993958A (zh) * | 2015-06-29 | 2015-10-21 | 北京京东尚科信息技术有限公司 | 一种用户主数据的生成方法及系统 |
WO2017008598A1 (zh) * | 2015-07-10 | 2017-01-19 | 中兴通讯股份有限公司 | 大数据交换方法及装置 |
US10706062B2 (en) | 2015-07-10 | 2020-07-07 | Xi'an Zhongxing New Software Co., Ltd. | Method and system for exchanging data from a big data source to a big data target corresponding to components of the big data source |
CN105630964A (zh) * | 2015-12-25 | 2016-06-01 | 甘肃万维信息技术有限责任公司 | 一种数据交互分析系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103109271B (zh) | 一种平台间迁移应用的实现方法及系统 | |
CN103701726B (zh) | 一种核心交换机的接口索引管理方法及系统 | |
WO2011082036A3 (en) | Methods, systems, and computer readable media for providing group policy configuration in a communications network using a fake user | |
CN101557314A (zh) | 一种分布式网管系统及数据配置管理方法 | |
CN104699855A (zh) | 一种主动式主数据交换方法 | |
CN106202236A (zh) | 一种用户位置预测方法及装置 | |
CN104751291A (zh) | 一种主数据管理平台 | |
CN109195178A (zh) | 信号质量监测方法及终端设备 | |
CN103916909A (zh) | 基带池系统 | |
CN105471651B (zh) | 一种二层网络中vlan同步方法、本地交换机和远端交换机 | |
CN103346950B (zh) | 一种机架式无线控制器用户业务板间负载均摊方法及装置 | |
CN104699861A (zh) | 一种主数据中心的数据处理方法 | |
CN102448120B (zh) | 多路径负荷分担方法及装置 | |
CN102394803B (zh) | Vpn业务的规划部署方法和系统 | |
CN104836756A (zh) | 一种被动式主数据交换方法 | |
CN202679422U (zh) | 云计算网络架构 | |
CN105656814B (zh) | 一种sdn网络转发系统与方法 | |
CN103746894A (zh) | 一种基于地理位置约束的批量虚拟网络映射方法 | |
CN105376231A (zh) | 一种实现业务隔离的方法及装置 | |
CN105049475A (zh) | 大规模社区的数据高效存储优化方法及系统 | |
CN105303467A (zh) | 保持电力营销系统与配电系统数据一致性的方法及其系统 | |
CN103248565A (zh) | 一种建立保护标签交换路径(lsp)的方法及系统 | |
CN103051550B (zh) | 基于业务合并的虚拟网络映射方法 | |
CN103379636B (zh) | 一种无线载波资源的分配方法和设备 | |
CN202102496U (zh) | 一种服务业务系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150610 |