CN114372883A - 基于服务治理与数据校验的数据治理方法 - Google Patents
基于服务治理与数据校验的数据治理方法 Download PDFInfo
- Publication number
- CN114372883A CN114372883A CN202210019542.8A CN202210019542A CN114372883A CN 114372883 A CN114372883 A CN 114372883A CN 202210019542 A CN202210019542 A CN 202210019542A CN 114372883 A CN114372883 A CN 114372883A
- Authority
- CN
- China
- Prior art keywords
- data
- service
- platform
- esb
- baseline
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 43
- 238000000034 method Methods 0.000 title claims abstract description 31
- 238000013523 data management Methods 0.000 title claims abstract description 21
- 238000013524 data verification Methods 0.000 title claims abstract description 16
- 238000012360 testing method Methods 0.000 claims abstract description 14
- 238000012795 verification Methods 0.000 claims description 8
- 238000012986 modification Methods 0.000 claims description 7
- 230000004048 modification Effects 0.000 claims description 7
- 230000000694 effects Effects 0.000 claims description 2
- 238000011161 development Methods 0.000 abstract description 4
- 230000005540 biological transmission Effects 0.000 abstract description 2
- 239000007787 solid Substances 0.000 abstract description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/103—Workflow collaboration or project management
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Human Resources & Organizations (AREA)
- General Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Economics (AREA)
- Finance (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Development Economics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Technology Law (AREA)
- Evolutionary Computation (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了基于服务治理与数据校验的数据治理方法，包括全行接入ESB的消费方系统和服务方系统、服务治理平台、ESB运行平台，数据管理平台、自动化测试平台、流程审批平台，本发明通过将服务治理与数据校验结合的治理方法，形成服务治理产出物并存放在服务治理平台，ESB运行平台以服务治理平台存储的数据为基线，通过一定的规则，进行工具化的校验；当应用系统在ESB运行平台发生交易时，运行平台会对发生交易时产生的报文数据进行解析，解析数据后与服务治理平台的数据源进行比对，保证数据传输与业务诉求的一致性，提高全行应用开发质量，提升监管数据报送质量，为金融数据标准化体系落地奠定坚实基础。
Description
技术领域
本发明属于银行金融业务管理技术领域，具体涉及基于服务治理与数据校验的数据治理方法。
背景技术
金融业务与信息科技的深度融合与双向赋能，使得银行数字化转型成为大势所趋。建立数据标准、统一数据管理，挖掘全行数据资产价值，是数字化转型的驱动能量。随着银行数据标准逐步落地，数据治理用以提升数据质量迫在眉睫。企业服务总线(ESB)运行平台是企业应用系统进行数据交换的枢纽，对业务系统提供服务的“信息高速公路”。
依托于ESB服务治理平台对全行接口数据进行全生命周期管理，结合运行平台对业务系统间的交易数据按照数标规范进行管控和校验，使得服务治理与数据治理相结合成为数标落地的最佳选择；通过数据校验推动应用系统在开发和测试过程中遵循数据标准，提高全行应用开发质量，为实现金融数据标准化体系奠定基础，为此提出一种基于服务治理与数据校验的数据治理方法。
发明内容
本发明的目的在于提供基于服务治理与数据校验的数据治理方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：基于服务治理与数据校验的数据治理方法，包括全行接入ESB的消费方系统和服务方系统、服务治理平台、ESB运行平台，数据管理平台、自动化测试平台、流程审批平台，第一步：服务方系统将服务注册在ESB的服务治理平台，服务治理治理注册的服务，并将文档发布在服务治理平台，形成基线；
第二步：服务方、消费方和ESB以基线文档作为版本进行开发并部署测试环境；
第三步：ESB的运行平台同步获取服务治理平台基线数据；包括接口字段元数据名称、对标后的属性；
第四步：测试人员发起测试交易，将请求报文发送ESB运行平台，运行平台将报文解析后，将参数数据与基线进行比对，比对通过，交易继续执行，若比对不通过，交易结束，并将不通过信息告知对方系统；
第五步：参数信息不符合基线标准的，需要应用系统优先判断基线是否正确，若基线正确，则应用系统按照基线进行修改，若基线不正确，则需要在服务治理平台发起基线变更；
第六步：若基线发起变更，服务治理人员判断基线修改是否正确，若正确则进行变更基线，更新服务治理平台数据，运行平台同步基线；若基线修改不符合规范，服务治理人员退回修改；
第七步：运行平台将校验数据推送服务治理平台，服务治理平台将数据进行汇总，并在服务治理平台进行汇总及报表导出。
优选的，数据管理平台进行数据标准信息同步，服务方将服务注册在服务治理平台并进行数据对标，不满足条件的数据会发送数据管理平台进行对标审核。
优选的，对于不满足审核流程的服务，且在短时间内无法更改的应用，通过服务治理平台向流程审批平台推送“申请关闭校验”流程，由应用对应负责人进行审批。
优选的，运行平台根据测试数据汇总信息推送至大数据平台。
优选的，服务治理平台可以实时调整强校验的接口，黑白名单支持多个校验维度设置，精确到消费方系统、接口、服务方系统、字段、属性等维度，平台将校验清单下发到ESB运行平台准实时生效。
与现有技术相比，本发明的有益效果是：本发明通过将服务治理与数据校验结合的治理方法，形成服务治理产出物(字段映射文档)并存放在服务治理平台，ESB运行平台以服务治理平台存储的数据为基线，通过一定的规则，进行工具化的校验；当应用系统在ESB运行平台发生交易时，运行平台会对发生交易时产生的报文数据进行解析，解析数据后与服务治理平台的数据源进行比对，保证数据传输与业务诉求的一致性，提高全行应用开发质量，提升监管数据报送质量，为金融数据标准化体系落地奠定坚实基础。
附图说明
图1为本发明的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，本发明提供一种技术方案：基于服务治理与数据校验的数据治理方法，包括全行接入ESB的消费方系统和服务方系统、服务治理平台、ESB运行平台，数据管理平台、自动化测试平台、流程审批平台，第一步：服务方系统将服务注册在ESB的服务治理平台，服务治理治理注册的服务，并将文档发布在服务治理平台，形成基线；
第二步：服务方、消费方和ESB以基线文档作为版本进行开发并部署测试环境；
第三步：ESB的运行平台同步获取服务治理平台基线数据；包括接口字段元数据名称、对标后的属性；
第四步：测试人员发起测试交易，将请求报文发送ESB运行平台，运行平台将报文解析后，将参数数据与基线进行比对，比对通过，交易继续执行，若比对不通过，交易结束，并将不通过信息告知对方系统；
第五步：参数信息不符合基线标准的，需要应用系统优先判断基线是否正确，若基线正确，则应用系统按照基线进行修改，若基线不正确，则需要在服务治理平台发起基线变更；
第六步：若基线发起变更，服务治理人员判断基线修改是否正确，若正确则进行变更基线，更新服务治理平台数据，运行平台同步基线；若基线修改不符合规范，服务治理人员退回修改；
第七步：运行平台将校验数据推送服务治理平台，服务治理平台将数据进行汇总，并在服务治理平台进行汇总及报表导出。
本实施例中，优选的，数据管理平台进行数据标准信息同步，服务方将服务注册在服务治理平台并进行数据对标，不满足条件的数据会发送数据管理平台进行对标审核。
本实施例中，优选的，对于不满足审核流程的服务，且在短时间内无法更改的应用，通过服务治理平台向流程审批平台推送“申请关闭校验”流程，由应用对应负责人进行审批。
本实施例中，优选的，运行平台根据测试数据汇总信息推送至大数据平台。
本实施例中，优选的，服务治理平台可以实时调整强校验的接口，黑白名单支持多个校验维度设置，精确到消费方系统、接口、服务方系统、字段、属性等维度，平台将校验清单下发到ESB运行平台准实时生。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
Claims (5)
1.基于服务治理与数据校验的数据治理方法，包括全行接入ESB的消费方系统和服务方系统、服务治理平台、ESB运行平台，数据管理平台、自动化测试平台、流程审批平台，其特征在于：第一步：服务方系统将服务注册在ESB的服务治理平台，服务治理治理注册的服务，并将文档发布在服务治理平台，形成基线；
第二步：服务方、消费方和ESB以基线文档作为版本进行开发并部署测试环境；
第三步：ESB的运行平台同步获取服务治理平台基线数据；包括接口字段元数据名称、对标后的属性；
第四步：测试人员发起测试交易，将请求报文发送ESB运行平台，运行平台将报文解析后，将参数数据与基线进行比对，比对通过，交易继续执行，若比对不通过，交易结束，并将不通过信息告知对方系统；
第五步：参数信息不符合基线标准的，需要应用系统优先判断基线是否正确，若基线正确，则应用系统按照基线进行修改，若基线不正确，则需要在服务治理平台发起基线变更；
第六步：若基线发起变更，服务治理人员判断基线修改是否正确，若正确则进行变更基线，更新服务治理平台数据，运行平台同步基线；若基线修改不符合规范，服务治理人员退回修改；
第七步：运行平台将校验数据推送服务治理平台，服务治理平台将数据进行汇总，并在服务治理平台进行汇总及报表导出。
2.根据权利要求1所述的基于服务治理与数据校验的数据治理方法，其特征在于：数据管理平台进行数据标准信息同步，服务方将服务注册在服务治理平台并进行数据对标，不满足条件的数据会发送数据管理平台进行对标审核。
3.根据权利要求1所述的基于服务治理与数据校验的数据治理方法，其特征在于：对于不满足审核流程的服务，且在短时间内无法更改的应用，通过服务治理平台向流程审批平台推送“申请关闭校验”流程，由应用对应负责人进行审批。
4.根据权利要求1所述的基于服务治理与数据校验的数据治理方法，其特征在于：运行平台根据测试数据汇总信息推送至大数据平台。
5.根据权利要求1所述的基于服务治理与数据校验的数据治理方法，其特征在于：服务治理平台可以实时调整强校验的接口，黑白名单支持多个校验维度设置，精确到消费方系统、接口、服务方系统、字段、属性等维度，平台将校验清单下发到ESB运行平台准实时生效。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210019542.8A CN114372883A (zh) | 2022-01-07 | 2022-01-07 | 基于服务治理与数据校验的数据治理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210019542.8A CN114372883A (zh) | 2022-01-07 | 2022-01-07 | 基于服务治理与数据校验的数据治理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114372883A true CN114372883A (zh) | 2022-04-19 |
Family
ID=81143630
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210019542.8A Pending CN114372883A (zh) | 2022-01-07 | 2022-01-07 | 基于服务治理与数据校验的数据治理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114372883A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100082497A1 (en) * | 2008-09-18 | 2010-04-01 | Sap Ag | Providing Foundation Application as Enterprise Services |
| CN105450464A (zh) * | 2014-08-27 | 2016-03-30 | 阿里巴巴集团控股有限公司 | 用于服务接口的测试方法和装置 |
| US20170177682A1 (en) * | 2015-12-22 | 2017-06-22 | American Express Travel Related Services Co., Inc. | System and method for translating versioned data service requests and responses |
| CN108011926A (zh) * | 2017-11-06 | 2018-05-08 | 中国银联股份有限公司 | 一种报文发送方法、处理方法、服务器及系统 |
| CN111290813A (zh) * | 2020-01-21 | 2020-06-16 | 福建省农村信用社联合社 | 一种软件界面字段数据标准化的方法、装置、设备和介质 |
| CN111651431A (zh) * | 2020-06-09 | 2020-09-11 | 中国雄安集团数字城市科技有限公司 | 一种面向数据库服务的管理流程标准化方法 |
| CN112256581A (zh) * | 2020-10-27 | 2021-01-22 | 华泰证券股份有限公司 | 高仿真证券业交易类系统的日志回放测试方法及装置 |
-
2022
- 2022-01-07 CN CN202210019542.8A patent/CN114372883A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100082497A1 (en) * | 2008-09-18 | 2010-04-01 | Sap Ag | Providing Foundation Application as Enterprise Services |
| CN105450464A (zh) * | 2014-08-27 | 2016-03-30 | 阿里巴巴集团控股有限公司 | 用于服务接口的测试方法和装置 |
| US20170177682A1 (en) * | 2015-12-22 | 2017-06-22 | American Express Travel Related Services Co., Inc. | System and method for translating versioned data service requests and responses |
| CN108011926A (zh) * | 2017-11-06 | 2018-05-08 | 中国银联股份有限公司 | 一种报文发送方法、处理方法、服务器及系统 |
| CN111290813A (zh) * | 2020-01-21 | 2020-06-16 | 福建省农村信用社联合社 | 一种软件界面字段数据标准化的方法、装置、设备和介质 |
| CN111651431A (zh) * | 2020-06-09 | 2020-09-11 | 中国雄安集团数字城市科技有限公司 | 一种面向数据库服务的管理流程标准化方法 |
| CN112256581A (zh) * | 2020-10-27 | 2021-01-22 | 华泰证券股份有限公司 | 高仿真证券业交易类系统的日志回放测试方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102722540B (zh) | 实时内存数据库系统中数据处理方法及装置 | |
| CN109472699B (zh) | 区块链基础上的自动化人工智能数据共享方法及装置 | |
| CN106254543A (zh) | 基于云计算架构的分布式互联网金融网贷方法和系统 | |
| CN111524008B (zh) | 一种规则引擎及其建模方法、建模装置及指令处理方法 | |
| CN111276236A (zh) | 用于医疗信息化行业的万能接口服务器 | |
| US20060020545A1 (en) | Payroll system | |
| CN109003210A (zh) | 一种电子签章系统及方法 | |
| CN115439249B (zh) | 一种跨区块链的业务服务实现方法、装置和系统 | |
| CN113626447B (zh) | 一种民航数据管理平台及方法 | |
| CN117391292A (zh) | 碳排放节能管理分析系统及方法 | |
| CN105225066A (zh) | 工作流合法性的验证方法以及验证装置 | |
| US10970309B2 (en) | Data storage method and apparatus | |
| CN110704280A (zh) | 一种主数据监控系统 | |
| CN113407617A (zh) | 基于大数据技术的实时与离线业务统一处理方法和装置 | |
| CN114090368A (zh) | 一种微服务治理系统 | |
| CN115982012A (zh) | 一种接口管理能力成熟度的评估模型及方法 | |
| CN114372883A (zh) | 基于服务治理与数据校验的数据治理方法 | |
| CN116932214A (zh) | 指令发送方法、装置、电子设备及计算机存储介质 | |
| CN110674173A (zh) | 一种风控云上的数据缓存的方法和系统 | |
| US11748496B1 (en) | Data jurisdiction management | |
| CN115460224A (zh) | 基于区块链技术的算力资源调度方法及装置 | |
| CN113393246A (zh) | 一种基于数据采集体系的支付平台风险识别方法和系统 | |
| CN112804274B (zh) | 一种财务共享系统及方法 | |
| CN114219199A (zh) | 供应商信用管理方法及供应商信用管理系统 | |
| CN114282878A (zh) | 一种构建理赔标准化模型的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |