CN102270225B - 数据变更日志监控方法和数据变更日志监控装置 - Google Patents

数据变更日志监控方法和数据变更日志监控装置 Download PDF

Info

Publication number
CN102270225B
CN102270225B CN201110177243.9A CN201110177243A CN102270225B CN 102270225 B CN102270225 B CN 102270225B CN 201110177243 A CN201110177243 A CN 201110177243A CN 102270225 B CN102270225 B CN 102270225B
Authority
CN
China
Prior art keywords
daily record
data
business object
change
property value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110177243.9A
Other languages
English (en)
Other versions
CN102270225A (zh
Inventor
黄海泉
周建建
李绍文
汪成杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yonyou Network Technology Co Ltd
Original Assignee
Yonyou Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yonyou Network Technology Co Ltd filed Critical Yonyou Network Technology Co Ltd
Priority to CN201110177243.9A priority Critical patent/CN102270225B/zh
Publication of CN102270225A publication Critical patent/CN102270225A/zh
Application granted granted Critical
Publication of CN102270225B publication Critical patent/CN102270225B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种数据变更日志监控方法,包括:步骤302,为业务对象设置日志标识,并根据业务对象的数据变更是否需要监控,来设置日志标识的属性值;步骤304,业务对象的数据发生变更时,判断日志标识的属性值是否为预定值,在日志标识的属性值为预定值的情况下,对数据的变更情况进行日志记录。本发明还提供一种数据变更日志监控装置。通过本发明,通过对日志标识对监控范围统一管理,便于监控范围的更改,降低了更改监控范围操作的复杂度。

Description

数据变更日志监控方法和数据变更日志监控装置
技术领域
本发明涉及计算机技术领域,具体而言,涉及一种数据变更日志监控方法和一种数据变更日志监控装置。
背景技术
日志是指有关计算机系统发生的事务或操作的记录,日志可进行查询、检索。在系统出现问题时可通过日志检索出问题发生时刻的操作。近几年,数据安全问题越来越突出,在萨班斯法案中也规定了日志的标准。
数据变更日志是记录当前系统中关键数据修改的日志,他记录了关键数据的变更过程。可利用该日志追踪到数据的变更过程,为问题的定位等等提供了极大的方便。
在数据变更日志的传统处理方法中往往是在特定的业务处理过程记录相关数据的变更日志。由于不同的业务的处理逻辑并不相同,使得这种日志方式不具备通用性,用户不能自行修改要进行日志的数据范围。修改记录日志的范围往往需要修改业务处理程序和重新部署系统,这在实际的应用当中无法适应业务的快速变化。
传统的日志处理步骤:
1.在业务处理过程中记录相关数据的变更日志,在不同的业务处理过程分别处理各自的数据变更日志;
2.统一存储数据变更日志,以提供日志检索;
3.检索变更日志,系统可提供日志的检索方法。
具体的实例可以如图1和图2所示,首先用户选择记录A数据和B数据的变化,则在步骤102中,记录了A数据的变更日志,在步骤104中记录了C数据的变更日志。在用户修改变更日志监控范围,选择记录C数据和B数据的变更日志时,在步骤202记录了C数据的变更日志,在步骤204记录了B数据的变更日志。
在传统方法中,如果需要修改某个业务处理过程的要进行日志的信息,需要通过系统开发人员修改对应业务处理程序的实现,并重新编译和部署相关程序。当面对变化无常的业务,系统需要快速响应业务变更时,传统的日志处理方法就无法满足要求了。
因此,在实际应用中,需要一种快速简便的记录数据变更日志的方式,在业务发生改变需要对日志监控范围做出调整时,可通过对系统作动态配置来满足新的要求。
发明内容
本发明所要解决的技术问题在于,需要一种快速简便的记录数据变更日志的方式,在业务发生改变需要对日志范围做出调整时,可通过对系统作动态配置来满足新的要求。
有鉴于此,本发明提供一种数据变更日志监控方法,包括:步骤302,为业务对象设置日志标识,根据业务对象的数据变更是否需要监控,来设置日志标识的属性值;步骤304,业务对象的数据发生变更时,判断日志标识的属性值是否为预定值,在日志标识的属性值为预定值的情况下,对数据的变更情况进行日志记录。在该技术方案中,通过对日志标识对监控范围统一管理,便于监控范围的更改,降低了更改监控范围操作的复杂度。
在上述技术方案中,优选地,在步骤302中,还将日志标识持久化为日志元数据,并在日志元数据中,设置日志标识的属性值;在步骤304中,从日志元数据中取得日志标识的属性值,以确定日志标识的属性值是否为预定值。通过该技术方案,持久化后的日志元数据便于用户利用其修改监控范围。
在上述技术方案中,优选地,在步骤302中,将日志元数据存储到数据库中,或存储为文件。
在上述技术方案中,优选地,在步骤302中,还在日志元数据中记录业务对象的字段名称和业务对象类型名称;在步骤304中,还根据业务对象的字段名称和业务对象类型名称,取得日志标识的属性值。
在上述技术方案中,优选地,还包括:随时对日志标识的属性值进行更改。
本发明还提供一种数据变更日志监控装置,包括:监控范围模块,为业务对象设置日志标识,并根据业务对象的数据变更是否需要监控,来设置日志标识的属性值;日志监控模块,业务对象的数据发生变更时,判断日志标识的属性值是否为预定值,在日志标识的属性值为预定值的情况下,对数据的变更情况进行日志记录。在该技术方案中,通过对日志标识对监控范围统一管理,便于监控范围的更改,降低了更改监控范围操作的复杂度。
在上述技术方案中,优选地,还包括:持久化模块,将日志标识持久化为日志元数据;监控范围模块在日志元数据中,设置日志标识的属性值;日志监控模块从日志元数据中取得日志标识的属性值,以确定日志标识的属性值是否为预定值。通过该技术方案,持久化后的日志元数据便于用户利用其修改监控范围。
在上述技术方案中,优选地,持久化模块将日志元数据存储到数据库中,或存储为文件。
在上述技术方案中,优选地,监控范围模块还在日志元数据中记录业务对象的字段名称和业务对象类型名称;日志监控模块还根据业务对象的字段名称和业务对象类型名称,取得日志标识的属性值。
在上述技术方案中,优选地,监控范围模块还随时对日志标识的属性值进行更改。
根据以上技术方案,可以实现一种数据变更日志监控方法和一种数据变更日志监控装置,能够通过为所有的业务数据对象定义公共的数据结构,并基于公共的数据结构为业务对象上做日志标识,根据这些公共数据结构的标识对业务对象的修改作统一的监控和日志。当业务发生变化,需要对业务对象的数据变更日志做调整时,通过修改对应的业务对象的公共数据结构的日志标识就可以改变日志监控的范围。
附图说明
图1是传统的数据变更日志监控方法的流程示意图;
图2是传统的数据变更日志监控方法的流程示意图;
图3是根据本发明的一个实施例的数据变更日志监控方法的流程图;
图4是根据本发明的一个实施例的数据变更日志监控装置的框图;
图5是根据本发明的一个实施例的数据变更日志监控方法的示意图;
图6是根据本发明的一个实施例的数据变更日志监控方法的设置日志标识的示意图;
图7是根据本发明的一个实施例的数据变更日志监控方法的持久化的日志元数据的示意图;
图8是根据本发明的一个实施例的数据变更日志监控方法的示意图;
图9是根据本发明的一个实施例的数据变更日志监控方法的工作流程图;
图10是根据本发明的一个实施例的数据变更日志监控方法的持久化的日志元数据的示意图;
图11是根据本发明的一个实施例的数据变更日志监控方法的修改监控范围的示意图;
图12是根据本发明的一个实施例的数据变更日志监控装置的示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的其他方式来实施,因此,本发明并不限于下面公开的具体实施例的限制。
图3是根据本发明的一个实施例的数据变更日志监控方法的流程图。
如图3所示,本发明提供一种数据变更日志监控方法,包括:步骤302,为业务对象设置日志标识,并根据业务对象的数据变更是否需要监控,来设置日志标识的属性值;步骤304,业务对象的数据发生变更时,判断日志标识的属性值是否为预定值,在日志标识的属性值为预定值的情况下,对数据的变更情况进行日志记录。在该技术方案中,通过对日志标识对监控范围统一管理,便于监控范围的更改,降低了更改监控范围操作的复杂度。
在上述技术方案中,在步骤302中,还将日志标识持久化为日志元数据,并在日志元数据中,设置日志标识的属性值;在步骤304中,从日志元数据中取得日志标识的属性值,以确定日志标识的属性值是否为预定值。通过该技术方案,持久化后的日志元数据便于用户利用其修改监控范围。
在上述技术方案中,在步骤302中,将日志元数据存储到数据库中,或存储为文件。
在上述技术方案中,在步骤302中,还在日志元数据中记录业务对象的字段名称和业务对象类型名称;在步骤304中,还根据业务对象的字段名称和业务对象类型名称,取得日志标识的属性值。
在上述技术方案中,还包括:随时对日志标识的属性值进行更改。
图4是根据本发明的一个实施例的数据变更日志监控装置的框图。
如图4所示,本发明还提供一种数据变更日志监控装置400,包括:监控范围模块402,为业务对象设置日志标识,并根据业务对象的数据变更是否需要监控,来设置日志标识的属性值;日志监控模块404,业务对象的数据发生变更时,判断日志标识的属性值是否为预定值,在日志标识的属性值为预定值的情况下,对数据的变更情况进行日志记录。在该技术方案中,通过对日志标识对监控范围统一管理,便于监控范围的更改,降低了更改监控范围操作的复杂度。
在上述技术方案中,还包括:持久化模块406,将日志标识持久化为日志元数据;监控范围模块402在日志元数据中,设置日志标识的属性值;日志监控模块404从日志元数据中取得日志标识的属性值,以确定日志标识的属性值是否为预定值。通过该技术方案,持久化后的日志元数据便于用户利用其修改监控范围。
在上述技术方案中,持久化模块406将日志元数据存储到数据库中,或存储为文件。
在上述技术方案中,监控范围模块402还在日志元数据中记录业务对象的字段名称和业务对象类型名称;日志监控模块404还根据业务对象的字段名称和业务对象类型名称,取得日志标识的属性值。
在上述技术方案中,监控范围模块402还随时对日志标识的属性值进行更改。
图5是根据本发明的一个实施例的数据变更日志监控方法的示意图。
本实施例的技术方案,可以如图5所示,实现在步骤502能够判断业务处理过程1、2和3是否属于日志监控范围,并在步骤504根据判断的结果进行日志监控。
本实施例的技术方案包括以下几个方面:
步骤1,为业务对象定义具有日志标识的公共数据结构。
这是本实施例的技术方案的基础,只有业务对象之间定义了这些共性,才能针对业务对象的数据修改进行统一、通用的日志处理。
定义的具体方式可以是将业务对象都继承一个通用类型或是实现某一通用接口,再或者,为每个业务对象的数据结构都加入相同属性或者操作以提供本业务对象的字段的日志标识。图6是采用继承/实现的方式的一个示意图。
步骤2,将业务对象公共数据结构的日志标识数据持久化为日志元数据。
这是实现动态修改日志监控范围的基础。为业务对象定义了具有日志标识的公共数据结构构成了日志元数据,将这些元数据持久化到媒体介质中,使得应用程序可以按需修改日志元数据。
持久化的结果是生成一份记录业务对象的日志字段列表的数据。在其中的业务对象字段的值发生修改时,便会产生反映了值的变化的日志记录。
持久化的具体方式可以是转化为一系列的XML文件保存到文件系统,或者以一系列的数据表记录的形式保存到数据库。图7是一个数据库形式的业务对象的日志字段元数据表。
步骤3,检查业务对象的数据修改操作,比对日志元数据,对符合日志条件的数据修改记录日志。
这是在业务数据修改过程中按日志元数据产生日志的过程。当业务对象执行业务处理之后,产生了业务数据,并在保存数据前检查产生修改的业务字段是否在日志元数据中被标识为日志字段,对于标识为日志字段的,将该字段的修改前后的值作为日志记录保存,之后再继续保存业务数据。根据本技术方案,可以如图8所示,实现对任何业务操作中的数据变更的监控,通过步骤802的日志处理,可以在任何业务流程中发生业务数据的时候,检测业务对象的变更是否在监控范围内,来记录变更日志。
日志处理的详细步骤可以如图9所示:
步骤902,获取业务对象;
步骤904,获取对应的日志元数据;
步骤906,获取业务数据中产生修改的字段列表;
步骤908,判断字段在日志元数据中是否表示为日志字段,存在则进入步骤910,不存在则直接进入步骤912;
步骤910,记录字段的修改日志;
步骤912,继续其他处理过程。
步骤4,提供对持久化的日志元数据进行动态修改的手段,以实现对日志监控范围的动态修改。
对日志元数据的动态修改过程表现为业务对象的日志字段列表的增加、移除字段。
对日志元数据的动态修改的具体方式与第2步中持久化元数据的方式对应。
以数据库形式的持久化为例,业务对象的日志字段元数据表为例如图10的形式。
现有如图11所示的字段列表。
Order对象的CustID、Money字段为日志字段,Customer对象的TelNumber字段为日志字段。
假设新的业务要求把客户的地址修改要做出日志记录,则通过将Metadata表中Customer的Address字段对应的记录的IsLog值置为true即可。
对应的SQL语句类似于以下:
UPDATE Metadata SET IsLog=1 WHERE BusiClsName=′Customer′AND FieldName=′Address′
根据以上技术方案实现的数据变更日志监控。
“日志监控模块1202”实现第3步骤的逻辑,其作用是根据日志字段元数据的设置监控业务对象的日志字段的数据修改产生日志记录。
“日志范围修改模块1204”实现的是第4步骤的逻辑,实现动态定义日志范围。
根据本发明的技术方案,可以实现一种数据变更日志监控方法和一种数据变更日志监控装置,解决了动态修改日志监控范围的问题,使得用户无需重新部署程序即可按需定义业务数据的日志范围,极大地提高了系统对快速变化的业务需求的适应性。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种数据变更日志监控方法,其特征在于,包括:
步骤302,为业务对象设置日志标识,具体为为业务对象定义具有日志标识的公共数据结构,根据所述业务对象的数据变更是否需要监控,来设置所述日志标识的属性值;
步骤304,所述业务对象的数据发生变更时,判断所述日志标识的属性值是否为预定值,在所述日志标识的属性值为所述预定值的情况下,对所述数据的变更情况进行日志记录;
在所述步骤302中,还将所述日志标识持久化为日志元数据,并在所述日志元数据中,设置所述日志标识的属性值,在所述日志元数据中记录所述业务对象的字段名称和业务对象类型名称;
在所述步骤304中,从所述日志元数据中取得所述日志标识的属性值,以确定所述日志标识的属性值是否为所述预定值,根据所述业务对象的字段名称和业务对象类型名称,取得所述日志标识的属性值。
2.根据权利要求1所述的数据变更日志监控方法,其特征在于,在所述步骤302中,将所述日志元数据存储到数据库中,或存储为文件。
3.根据权利要求1或2所述的数据变更日志监控方法,其特征在于,还包括:
随时对所述日志标识的属性值进行更改。
4.一种数据变更日志监控装置,其特征在于,包括:
监控范围模块,为业务对象设置日志标识,具体为为业务对象定义具有日志标识的公共数据结构,并根据所述业务对象的数据变更是否需要监控,来设置所述日志标识的属性值;
日志监控模块,所述业务对象的数据发生变更时,判断所述日志标识的属性值是否为预定值,在所述日志标识的属性值为所述预定值的情况下,对所述数据的变更情况进行日志记录;
持久化模块,将所述日志标识持久化为日志元数据;
所述监控范围模块在所述日志元数据中,设置所述日志标识的属性值;
所述日志监控模块从所述日志元数据中取得所述日志标识的属性值,以确定所述日志标识的属性值是否为所述预定值;
所述监控范围模块还在所述日志元数据中记录所述业务对象的字段名称和业务对象类型名称;
所述日志监控模块还根据所述业务对象的字段名称和业务对象类型名称,取得所述日志标识的属性值。
5.根据权利要求4所述的数据变更日志监控装置,其特征在于,所述持久化模块将所述日志元数据存储到数据库中,或存储为文件。
6.根据权利要求4或5所述的数据变更日志监控装置,其特征在于,所述监控范围模块还随时对所述日志标识的属性值进行更改。
CN201110177243.9A 2011-06-28 2011-06-28 数据变更日志监控方法和数据变更日志监控装置 Active CN102270225B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110177243.9A CN102270225B (zh) 2011-06-28 2011-06-28 数据变更日志监控方法和数据变更日志监控装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110177243.9A CN102270225B (zh) 2011-06-28 2011-06-28 数据变更日志监控方法和数据变更日志监控装置

Publications (2)

Publication Number Publication Date
CN102270225A CN102270225A (zh) 2011-12-07
CN102270225B true CN102270225B (zh) 2015-10-21

Family

ID=45052530

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110177243.9A Active CN102270225B (zh) 2011-06-28 2011-06-28 数据变更日志监控方法和数据变更日志监控装置

Country Status (1)

Country Link
CN (1) CN102270225B (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102708040A (zh) * 2012-05-04 2012-10-03 深圳市腾邦国际票务股份有限公司 数据管理方法及系统
CN102880541A (zh) * 2012-09-28 2013-01-16 用友软件股份有限公司 日志信息的获取系统和获取方法
WO2014053313A1 (en) * 2012-10-04 2014-04-10 Alcatel Lucent Data logs management in a multi-client architecture
CN104268173B (zh) * 2014-09-15 2018-06-15 中国工商银行股份有限公司 集中式数据监控方法、装置及系统
CN104636246A (zh) * 2015-03-18 2015-05-20 成都市卓睿科技有限公司 一种软件业务系统日志的记录方法
CN106897338A (zh) 2016-07-04 2017-06-27 阿里巴巴集团控股有限公司 一种针对数据库的数据修改请求处理方法及装置
CN106326352A (zh) * 2016-08-08 2017-01-11 歌尔股份有限公司 对接多个业务系统的通用接口设计方法及系统
CN107995242A (zh) * 2016-10-27 2018-05-04 北京京东尚科信息技术有限公司 一种业务处理方法及系统
CN106708663A (zh) * 2016-12-16 2017-05-24 郑州云海信息技术有限公司 一种数据库自动备份方法及装置
CN108804436B (zh) * 2017-04-26 2024-03-19 中兴通讯股份有限公司 一种管理网络管理实体的方法和存储介质
CN107491558B (zh) * 2017-09-08 2020-09-15 北京奇艺世纪科技有限公司 元数据更新方法及装置
CN108415814B (zh) * 2018-01-11 2021-02-19 平安科技(深圳)有限公司 自动记录字段变化方法、应用服务器及计算机可读存储介质
CN110580216B (zh) * 2018-06-08 2024-04-05 北京京东尚科信息技术有限公司 一种应用提测的方法和装置
CN109617956B (zh) * 2018-12-04 2021-08-06 视联动力信息技术股份有限公司 一种数据处理方法和装置
CN109656963B (zh) * 2018-12-18 2023-06-09 深圳前海微众银行股份有限公司 元数据获取方法、装置、设备及计算机可读存储介质
CN110471992B (zh) * 2019-08-21 2022-12-06 Oppo(重庆)智能科技有限公司 一种库位信息同步方法、库位信息同步装置及服务器
CN110941526A (zh) * 2019-10-29 2020-03-31 平安科技(深圳)有限公司 日志存储方法、装置、服务器及计算机可读存储介质
CN110955562A (zh) * 2019-11-26 2020-04-03 杭州安恒信息技术股份有限公司 一种数据恢复的方法、系统、设备及可读存储介质
CN112882900B (zh) * 2021-02-26 2022-11-29 浪潮通用软件有限公司 一种记录业务数据变更日志的方法及设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101425934A (zh) * 2007-10-29 2009-05-06 华为技术有限公司 一种服务监控方法及系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101425934A (zh) * 2007-10-29 2009-05-06 华为技术有限公司 一种服务监控方法及系统

Also Published As

Publication number Publication date
CN102270225A (zh) 2011-12-07

Similar Documents

Publication Publication Date Title
CN102270225B (zh) 数据变更日志监控方法和数据变更日志监控装置
CN105408857B (zh) 数据仓库系统、生成关系数据库的多列索引的方法和系统
CN111459985B (zh) 标识信息处理方法及装置
US8782096B2 (en) Virtual repository management
US9753960B1 (en) System, method, and computer program for dynamically generating a visual representation of a subset of a graph for display, based on search criteria
CN111858615B (zh) 数据库表生成方法、系统、计算机系统和可读存储介质
CN103577440A (zh) 一种非关系型数据库中的数据处理方法和装置
US20100070496A1 (en) Searchable Object Network
WO2010105218A2 (en) System and method for knowledge research
CN105446991A (zh) 数据存储方法、查询方法及设备
CN112000773B (zh) 基于搜索引擎技术的数据关联关系挖掘方法及应用
CN105164673A (zh) 跨数据库和文件系统的查询一体化
CN107622068A (zh) 一种基于json格式的日志管理方法及装置
CN102693269A (zh) 用于消费信息提取服务的可扩展表面
CN103455335A (zh) 一种多级分类的Web实现方法
US20130173606A1 (en) Normalized search
CN110737729A (zh) 基于知识图谱理念和技术的工程图谱数据信息管理方法
CN102346744A (zh) 用于在多租户应用系统中处理物化表的装置
CN102467525A (zh) 单据关联方法及系统
CN104081397A (zh) 创建归档模型
KR101955376B1 (ko) 비공유 아키텍처 기반의 분산 스트림 처리 엔진에서 관계형 질의를 처리하는 방법, 이를 수행하기 위한 기록 매체 및 장치
CN114064660B (zh) 基于ElasticSearch的数据结构化分析方法
CN101963993B (zh) 一种数据库单表记录快速查找的方法
WO2018226255A1 (en) Functional equivalence of tuples and edges in graph databases
CN110908983A (zh) 一种基于用户画像识别的智能营销系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100094 Haidian District North Road, Beijing, No. 68

Applicant after: Yonyou Network Technology Co., Ltd.

Address before: 100094 Beijing city Haidian District North Road No. 68, UFIDA Software Park

Applicant before: UFIDA Software Co., Ltd.

COR Change of bibliographic data
C14 Grant of patent or utility model
GR01 Patent grant