CN106484908A - 一种基于中间件的多系统数据一致性比对方法 - Google Patents

一种基于中间件的多系统数据一致性比对方法 Download PDF

Info

Publication number
CN106484908A
CN106484908A CN201610931103.9A CN201610931103A CN106484908A CN 106484908 A CN106484908 A CN 106484908A CN 201610931103 A CN201610931103 A CN 201610931103A CN 106484908 A CN106484908 A CN 106484908A
Authority
CN
China
Prior art keywords
data
middleware
multisystem
comparison
code template
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610931103.9A
Other languages
English (en)
Inventor
董本建
汪林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Yi Yi Home Agel Ecommerce Ltd
Original Assignee
Chengdu Yi Yi Home Agel Ecommerce Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Yi Yi Home Agel Ecommerce Ltd filed Critical Chengdu Yi Yi Home Agel Ecommerce Ltd
Priority to CN201610931103.9A priority Critical patent/CN106484908A/zh
Publication of CN106484908A publication Critical patent/CN106484908A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G06F16/24552—Database cache management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Data Mining & Analysis (AREA)
  • Finance (AREA)
  • General Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Accounting & Taxation (AREA)
  • Computational Linguistics (AREA)
  • Development Economics (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明属于数据处理领域，尤其涉及一种基于中间件的多系统数据一致性比对方法。一种基于中间件的多系统数据一致性比对方法，具体步骤包括：建立网关代码模板、定义网关中交互数据描述文件的格式、将多系统之间的接口全部放在中间件执行、将抽取得到的数据完全传送到中间数据库中、设定时间点对中间数据库中的数据和业务系统中的数据进行整体检查、制定算法等。本发明方法能够降低多业务系统数据一致性比对的成本。

Description

一种基于中间件的多系统数据一致性比对方法
技术领域
本发明属于数据处理领域，尤其涉及一种基于中间件的多系统数据一致性比对方法。
背景技术
多系统之间的接口进行传输数据，如何保证多系统之间的数据一致性问题，目前只能通过手工比对才能完成，工作量极大，不能快速有效查找多系统之间的数据一致性问题，由于人工比对的不精确，造成多系统之间的数据不一致。
发明内容
本发明的目的在于克服现有技术的不足，利用中间件来实现多系统之间的数据一致性比对。
一种基于中间件的多系统数据一致性比对方法，具体步骤如下：
S1、建立网关代码模板，所述网关代码模板包括：分布式中间件代理节点代码模板，控制模块代码模板，时间同步模块代码模板；
S2、定义网关中交互数据描述文件的格式；
S3、将多系统之间的接口全部放在中间件执行，所述中间件根据系统业务不同按照S1和S2所述规则定时通过接口抽取数据；
S4、将抽取得到的数据完全传送到中间数据库中；
S5、设定时间点对中间数据库中的数据和业务系统中的数据进行整体检查，确定时间段内数据全部对接成功，其中，所述业务系统中的传输数据存放在中间件的中间数据库中；
S6、根据S5所述业务系统的规则，制定算法，在T时刻通过定时任务对数据A进行对比，所述数据A为中间数据库中的各系统全部数据，若对比结果不一致，则通过系统邮件的方式报警。
本发明的有益效果是：
1.基于中间件的方式，进行数据对比，不会影响各业务系统的正常运行。
2.能快速对多业务系统的数据一致性进行分析，找出数据不一致的原因，为数据的完整性和一致性提供帮助。
3.降低多业务系统数据一致性比对的成本。
4.增强多业务系统数据一致性比对的准确性。
具体实施方式
下面结合具体实施例，详细说明本发明的技术方案。
某电商平台有多个业务系统，包括销售平台、仓储管理系统(WMS)、运输管理系统(TMS)、ERP、客户关系管理(CRM)等业务系统，多个业务系统之间存在大量的数据传输及数据交换，如何保证这些业务系统的数据一致性就非常重要。
多个业务系统之间的数据传输和数据交换是通过接口实现的，基于中间件的多系统数据一致性的比对方法，是将销售平台、WMS、TMS、ERP、CRM之间的接口全部集中在中间件数据处理模板中，各业务系统的数据通过中间件的接口定时或者实时传输到中间件的中间库中，比方说将销售平台的销售订单抽取到中间库中、将ERP的采购订单抽取到中间库中、将WMS的订单状态抽取的中间库中等，然后设定每天0点钟通过中间件的比对算法将中间件的数据和业务系统的数据进行比对，比方说比对WMS的库存、ERP的库存、销售平台的库存，如果各业务系统的数据存在不一致情况，通过预先设置好的邮箱，发送邮件给系统管理员。

Claims (1)

1.一种基于中间件的多系统数据一致性比对方法，其特征在于，具体步骤如下：
S1、建立网关代码模板，所述网关代码模板包括：分布式中间件代理节点代码模板，控制模块代码模板，时间同步模块代码模板；
S2、定义网关中交互数据描述文件的格式；
S3、将多系统之间的接口全部放在中间件执行，所述中间件根据系统业务不同按照S1和S2所述规则定时通过接口抽取数据；
S4、将抽取得到的数据完全传送到中间数据库中；
S5、设定时间点对中间数据库中的数据和业务系统中的数据进行整体检查，确定时间段内数据全部对接成功，其中，所述业务系统中的传输数据存放在中间件的中间数据库中；
S6、根据S5所述业务系统的规则，制定算法，在T时刻通过定时任务对数据A进行对比，所述数据A为中间数据库中的各系统全部数据，若对比结果不一致，则通过系统邮件的方式报警。
CN201610931103.9A 2016-10-31 2016-10-31 一种基于中间件的多系统数据一致性比对方法 Pending CN106484908A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610931103.9A CN106484908A (zh) 2016-10-31 2016-10-31 一种基于中间件的多系统数据一致性比对方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610931103.9A CN106484908A (zh) 2016-10-31 2016-10-31 一种基于中间件的多系统数据一致性比对方法

Publications (1)

Publication Number Publication Date
CN106484908A true CN106484908A (zh) 2017-03-08

Family

ID=58272758

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610931103.9A Pending CN106484908A (zh) 2016-10-31 2016-10-31 一种基于中间件的多系统数据一致性比对方法

Country Status (1)

Country Link
CN (1) CN106484908A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107918651A (zh) * 2017-11-14 2018-04-17 北京思特奇信息技术股份有限公司 一种检测数据一致性的方法及系统
CN111949524A (zh) * 2020-08-03 2020-11-17 北京锐安科技有限公司 一种数据接口测试方法、装置、服务器和存储介质
CN112463780A (zh) * 2020-12-02 2021-03-09 中国工商银行股份有限公司 数据质量检查方法及装置
CN115442232A (zh) * 2022-08-09 2022-12-06 中通服创立信息科技有限责任公司 一种cdn分布式管理平台接口监控方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101834873A (zh) * 2010-05-19 2010-09-15 深圳市科脉技术有限公司 一种商业数据库的数据传输方法
CN102054034A (zh) * 2010-12-27 2011-05-11 华中科技大学 企业信息系统的业务基础数据持久化实现方法
CN103593416A (zh) * 2013-10-30 2014-02-19 中国运载火箭技术研究院 一种分布式试验运行中间件异构网关的自动生成方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101834873A (zh) * 2010-05-19 2010-09-15 深圳市科脉技术有限公司 一种商业数据库的数据传输方法
CN102054034A (zh) * 2010-12-27 2011-05-11 华中科技大学 企业信息系统的业务基础数据持久化实现方法
CN103593416A (zh) * 2013-10-30 2014-02-19 中国运载火箭技术研究院 一种分布式试验运行中间件异构网关的自动生成方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107918651A (zh) * 2017-11-14 2018-04-17 北京思特奇信息技术股份有限公司 一种检测数据一致性的方法及系统
CN107918651B (zh) * 2017-11-14 2021-12-24 北京思特奇信息技术股份有限公司 一种检测数据一致性的方法及系统
CN111949524A (zh) * 2020-08-03 2020-11-17 北京锐安科技有限公司 一种数据接口测试方法、装置、服务器和存储介质
CN112463780A (zh) * 2020-12-02 2021-03-09 中国工商银行股份有限公司 数据质量检查方法及装置
CN112463780B (zh) * 2020-12-02 2024-01-05 中国工商银行股份有限公司 数据质量检查方法及装置
CN115442232A (zh) * 2022-08-09 2022-12-06 中通服创立信息科技有限责任公司 一种cdn分布式管理平台接口监控方法及系统
CN115442232B (zh) * 2022-08-09 2023-07-25 中通服创立信息科技有限责任公司 一种cdn分布式管理平台接口监控方法及系统

Similar Documents

Publication Publication Date Title
CN106484908A (zh) 一种基于中间件的多系统数据一致性比对方法
CN108009758B (zh) 一种基于bim的现场施工材料智能管理方法
CN108428141B (zh) 一种基于erp系统与区块链的食品溯源信息管理系统
CN104036365A (zh) 一种企业级数据服务平台建设方法
CN104299094A (zh) 一种企业进销存管理信息系统
CN104463479A (zh) 一种电子货架标签管理信息系统
CN104182846A (zh) 一种客户管理系统
CN104156576A (zh) 药品生产过程质量控制系统的设计与实现技术
CN112883001A (zh) 一种基于营配贯通数据可视化平台的数据处理方法、装置及介质
CN204496264U (zh) 中板精整区域二级跟踪装置
CN204463206U (zh) 一种农产品仓储管理系统
CN116894639B (zh) 一种物联网多信息融合计划管理系统及方法
CN107423035A (zh) 一种软件开发过程产品数据管理系统
CN116628061A (zh) 一种多源异构数据的采集方法、装置、设备及存储介质
CN112085412B (zh) 一种资源优化分配系统及分配方法
CN216751819U (zh) 基于5g通讯技术的智能检测系统
CN106339757A (zh) 电梯数据管理的系统
CN110264143A (zh) 一种企业创新需求信息采集与评价网络系统
CN204614033U (zh) 基于物联网的校园监控管理系统
CN203911987U (zh) 一种基于云计算的数据处理系统
CN102915383A (zh) 一种区域工业能耗云平台及其采集方法
CN113222169B (zh) 结合大数据分析反馈的联邦机器组合服务方法与系统
Wei et al. A Brief discussion on the standardized management of material master data in Enterprise Resource Planning system for engineering enterprises
He Empirical Analysis on Coordination of Hubei Province Transportation and Economy
Wang et al. Research on the Supervision Method of Big Data Technology in the Systemic Risk of Internet Finance in China

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170308

WD01 Invention patent application deemed withdrawn after publication