CN103716301A - 一种基于防火墙的数据修复方法及系统 - Google Patents

一种基于防火墙的数据修复方法及系统 Download PDF

Info

Publication number
CN103716301A
CN103716301A CN201310638119.7A CN201310638119A CN103716301A CN 103716301 A CN103716301 A CN 103716301A CN 201310638119 A CN201310638119 A CN 201310638119A CN 103716301 A CN103716301 A CN 103716301A
Authority
CN
China
Prior art keywords
data
correct
rule
firewall
wrong
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310638119.7A
Other languages
English (en)
Inventor
王诗菡
贾西贝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Huaao Data Technology Co Ltd
Original Assignee
Shenzhen Huaao Data Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Huaao Data Technology Co Ltd filed Critical Shenzhen Huaao Data Technology Co Ltd
Priority to CN201310638119.7A priority Critical patent/CN103716301A/zh
Publication of CN103716301A publication Critical patent/CN103716301A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明提供一种基于防火墙的数据修复方法，该方法包括以下：当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统步骤；防火墙系统通过与用户交互来确定正确的数据步骤；防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记步骤；子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库步骤。本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复方法及系统。另外，本发明还提供一种基于防火墙的数据修复系统。

Description

一种基于防火墙的数据修复方法及系统
技术领域
本发明涉及数据修复领域，尤其涉及一种基于防火墙的数据修复方法及系统。
背景技术
大型的集团控股公司，拥有总公司和分散到各地的若干子公司或分公司。这些集团股份总公司主数据系统，都有统一、严格的数据管理机制；同时，为了提高基础数据质量，降低业务数据分析处理难度，提高业务数据准确性，总公司会对主数据进行认真的清洗和维护，然而下属的子公司或分公司则并没有如此完善的数据管理体系， 每个子公司或分公司在录入待处理的业务数据时，常常都有自己的输入方式，使得不同子公司或分公司的数据形式无法保持一致。甚至于，因为不同的子公司或分公司最终都会把自己的业务数据汇总到主数据中，在数据的先后修改过程中，会引入错误到主数据库当中。这种情况下，就会因为数据标准不一致或者人为因素会导致数据的错误，影响了公司整体数据的质量，因此需要一种对数据录入时就进行监控与修复的数据修复方法。
发明内容
为此，本发明为了解决上述缺陷之一。
因而本发明提供一种基于防火墙的数据修复方法及系统，通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复方法及系统。
所以，本发明一个实施例提供一种基于防火墙的数据修复方法，所述方法包括以下步骤： 当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统步骤；防火墙系统通过与用户交互来确定正确的数据步骤；防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记步骤；子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库步骤。
进一步地，所述用户交互确定正确的数据包括数据中的正确属性。
进一步地，所述用户交互来确定正确的数据包括确定数据的属性。
进一步地，所述规则是根据母系统预先制定的修订规则。
进一步地，所述规则根据函数依赖规则与母系统的主数据相关联。
进一步地，所述对错误的数据进行标记包括对数据的错误属性进行标记。
进一步地，所述对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复方法。
本发明另一个实施例提供一种基于防火墙的数据修复方系统，所述系统包括：数据触发单元，用于当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统；数据交互单元，用于防火墙系统通过与用户交互来确定正确的数据；数据审核单元，用于防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记；数据更新单元，用于子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库。
优选地，所述数据交互单元中用户交互确定正确的数据包括数据中的正确属性。
优选地，所述数据审核单元中的规则是根据母系统预先制定的修订规则。
优选地，所述数据审核单元中的规则根据函数依赖规则与母系统的主数据相关联。
优选地，所述数据审核单元中对错误的数据进行标记包括对数据的错误属性进行标记。
优选地，所述数据更新单元中对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复系统。
附图说明
图1是本发明一个实施例提供的一种基于防火墙的数据修复方法的流程示意图。
图2所示是本发明另一个实施例提供的一种基于防火墙的数据修复方系统的示意图。
具体实施例
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步的详细说明。应当理解，此处所描述的具体实施例仅仅用于解释本发明，并不用于限定本发明。
本发明提供一种基于防火墙的数据修复方法及系统，本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复方法及系统。附图1是本发明提供的一种基于防火墙的数据修复方法的流程示意图，具体包括以下步骤。
步骤S110： 当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统步骤。
步骤S120：防火墙系统通过与用户交互来确定正确的数据步骤。
在本步骤中，所述用户交互确定正确的数据包括数据中的正确属性。所述正确属性根据用户的经验进行判断，所述用户交互来确定正确的数据可以为一条确定数据里的属性。例如：有一条待确定数据包含以下多个属性：A、B、C、D、E、F、G、H、I。用户既可以根据自身经验确定其中某一条也可以确定整条数据属性均为正确。
步骤S130：防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记步骤。
在本步骤中，所述规则是根据母系统预先制定的修订规则，所述规则根据函数依赖规则与母系统的主数据相关联，所述对错误的数据进行标记包括对数据的错误属性进行标记。。例如：有一条规则（A，Am）-> (B，Bm)||（），而属性A已经被用户确认为正确值，而B是不确定数据，则通过比对主数据中，Am和A相同的那条数据的Bm值和B的值，来判断B是否正确。如果判断B为错误则对其进行标记。
步骤S140：子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库步骤。
在本步骤中，所述对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。如上例中，发现B的值为错误，那么我们就把Bm的值更新到B上。本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复方法。
如图2所示是本发明另一个实施例提供的一种基于防火墙的数据修复方系统的示意图，具体为：数据触发单元10用于当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统。
数据交互单元20用于防火墙系统通过与用户交互来确定正确的数据。在数据交互单元20中，所述用户交互确定正确的数据包括数据中的正确属性，所述正确属性根据用户的经验进行判断，所述用户交互来确定正确的数据可以为一条确定数据里的属性。例如：有一条待确定数据包含以下多个属性：A、B、C、D、E、F、G、H、I。用户既可以根据自身经验确定其中某一条也可以确定整条数据属性均为正确。
数据审核单元30用于防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记。在数据审核单元30中，所述规则是根据母系统预先制定的修订规则，所述规则根据函数依赖规则与母系统的主数据相关联，所述对错误的数据进行标记包括对数据的错误属性进行标记。。例如：有一条规则（A，Am）-> (B，Bm)||（），而属性A已经被用户确认为正确值，而B是不确定数据，则通过比对主数据中，Am和A相同的那条数据的Bm值和B的值，来判断B是否正确。如果判断B为错误则对其进行标记。
数据更新单元40用于子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库。在数据更新单元40中，所述对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。如上例中，发现B的值为错误，那么我们就把Bm的值更新到B上。本发明通过对子系统待录入数据的监测，触发防火墙系统并依据已确定的正确数据和系统中预先制定的规则对其他不确定数据进行审核与修复，进而确保待录入数据的正确性，从而实现一种保证正确和数据质量的数据修复系统。

Claims (13)

1.一种基于防火墙的数据修复方法，其特征在于，所述方法包括以下步骤：
当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统步骤；
防火墙系统通过与用户交互来确定正确的数据步骤；
防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记步骤；
子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库步骤。
2.根据权利要求1所述的方法，其特征在于，所述用户交互确定正确的数据包括数据中的正确属性。
3.根据权利要求1或2所述的方法，其特征在于，所述用户交互来确定正确的数据包括确定数据的属性。
4.根据权利要求1所述的方法，其特征在于，所述规则是根据母系统预先制定的修订规则。
5.根据权利要求1或4所述的方法，其特征在于，所述规则根据函数依赖规则与母系统的主数据相关联。
6.根据权利要求1所述的方法，其特征在于，所述对错误的数据进行标记包括对数据的错误属性进行标记。
7.根据权利要求1或6所述的方法，其特征在于，所述对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。
8.一种基于防火墙的数据修复方系统，其特征在于，所述系统包括：
数据触发单元，用于当母系统监测到子系统有待录入数据库的数据时，触发防火墙系统；
数据交互单元，用于防火墙系统通过与用户交互来确定正确的数据；
数据审核单元，用于防火墙系统根据上述正确的数据和规则来审核其他不确定的数据，并对错误的数据进行标记；
数据更新单元，用于子系统根据参考数据对上述错误的数据进行更新，并将更新后的数据录入到子系统的数据库。
9.根据权利要求8所述的系统，其特征在于，所述数据交互单元中用户交互确定正确的数据包括数据中的正确属性。
10.根据权利要求8所述的系统，其特征在于，所述数据审核单元中的规则是根据母系统预先制定的修订规则。
11.根据权利要求8或10所述的系统，其特征在于，所述数据审核单元中的规则根据函数依赖规则与母系统的主数据相关联。
12.根据权利要求8所述的系统，其特征在于，所述数据审核单元中对错误的数据进行标记包括对数据的错误属性进行标记。
13.根据权利要求8或12所述的方法，其特征在于，所述数据更新单元中对错误的数据进行更新包括根据参考数据中数据所属的正确值更新所述错误数据的对应属性。
CN201310638119.7A 2013-12-04 2013-12-04 一种基于防火墙的数据修复方法及系统 Pending CN103716301A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310638119.7A CN103716301A (zh) 2013-12-04 2013-12-04 一种基于防火墙的数据修复方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310638119.7A CN103716301A (zh) 2013-12-04 2013-12-04 一种基于防火墙的数据修复方法及系统

Publications (1)

Publication Number Publication Date
CN103716301A true CN103716301A (zh) 2014-04-09

Family

ID=50408884

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310638119.7A Pending CN103716301A (zh) 2013-12-04 2013-12-04 一种基于防火墙的数据修复方法及系统

Country Status (1)

Country Link
CN (1) CN103716301A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015103880A1 (zh) * 2014-01-07 2015-07-16 深圳市华傲数据技术有限公司 一种对批量数据进行自动修复的方法及系统
WO2015103878A1 (zh) * 2014-01-07 2015-07-16 深圳市华傲数据技术有限公司 一种基于防火墙的数据修复方法及系统
CN105653730A (zh) * 2016-02-01 2016-06-08 中国农业银行股份有限公司 一种数据质量的检验方法及装置
CN107038088A (zh) * 2016-09-28 2017-08-11 阿里巴巴集团控股有限公司 一种数据恢复方法和装置
CN108959374A (zh) * 2018-05-24 2018-12-07 北京三快在线科技有限公司 数据存储方法、装置及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW545018B (en) * 2001-07-18 2003-08-01 Naito & Co Ltd Business information exchange system, data exchange device, business information exchange method, and the recording medium
EP2575313A1 (en) * 2011-09-27 2013-04-03 NorCom Information Technology AG Morphing firewall

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW545018B (en) * 2001-07-18 2003-08-01 Naito & Co Ltd Business information exchange system, data exchange device, business information exchange method, and the recording medium
EP2575313A1 (en) * 2011-09-27 2013-04-03 NorCom Information Technology AG Morphing firewall

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
WENFEI FAN等: "CerFix: A System for cleaning Data with Certain Fixes", 《PROCEEDINGS OF THE VLDB ENDOWMENT》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015103880A1 (zh) * 2014-01-07 2015-07-16 深圳市华傲数据技术有限公司 一种对批量数据进行自动修复的方法及系统
WO2015103878A1 (zh) * 2014-01-07 2015-07-16 深圳市华傲数据技术有限公司 一种基于防火墙的数据修复方法及系统
CN105653730A (zh) * 2016-02-01 2016-06-08 中国农业银行股份有限公司 一种数据质量的检验方法及装置
CN105653730B (zh) * 2016-02-01 2019-07-09 中国农业银行股份有限公司 一种数据质量的检验方法及装置
CN107038088A (zh) * 2016-09-28 2017-08-11 阿里巴巴集团控股有限公司 一种数据恢复方法和装置
CN108959374A (zh) * 2018-05-24 2018-12-07 北京三快在线科技有限公司 数据存储方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN103716301A (zh) 一种基于防火墙的数据修复方法及系统
US20180302303A1 (en) Tenant upgrade analytics
TWI608344B (zh) 企業裝置用強韌硬體故障管理系統、方法及架構
WO2015103880A1 (zh) 一种对批量数据进行自动修复的方法及系统
WO2017003810A1 (en) Enhanced mechanisms for managing multidimensional data
CN108369504A (zh) 被分发到变化拓扑的由模型驱动的更新
US10747776B2 (en) Replication control using eventually consistent meta-data
Bavota et al. Supporting extract class refactoring in eclipse: The aries project
US20120291014A1 (en) System and method for testing the development and updates in a test system using production/live data
WO2014169628A1 (zh) 一种基于代码变更的软件模型同步方法
WO2015014150A1 (en) Method,apparatus,and application platform for updating application object attribute
US20140165188A1 (en) Using data analytics and crowdsourcing to determine roles for a computer system
CN107577780A (zh) 一种数据中心云资源同步方法和装置
CN105718572B (zh) 一种异构数据复合对象的事务一致性达成方法与系统
WO2015103879A1 (zh) 一种基于规则优化的数据防火墙修复方法及系统
CN113220633A (zh) 统一文件编码管理方法及系统
CN103713967A (zh) 一种基于规则优化的数据防火墙修复方法及系统
US11880353B2 (en) Method and system for handling engineering data in a multiengineering system environment
CN102750610A (zh) Plm-erp集成过程中的交易控制方法
US20230350742A1 (en) Method of detecting faults in a fault tolerant distributed computing network system
US20160267172A1 (en) Constraint free model
CN104252398A (zh) 一种数据防火墙系统修复数据方法和系统
US11567818B2 (en) Method of detecting faults in a fault tolerant distributed computing network system
CN103714415A (zh) 一种对批量数据进行自动修复的方法及系统
CN106933888B (zh) 数据库配置管理系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140409

RJ01 Rejection of invention patent application after publication