CN106649577B - 一种检测Oracle数据库同步软件运行状态的方法 - Google Patents

一种检测Oracle数据库同步软件运行状态的方法 Download PDF

Info

Publication number
CN106649577B
CN106649577B CN201611010713.1A CN201611010713A CN106649577B CN 106649577 B CN106649577 B CN 106649577B CN 201611010713 A CN201611010713 A CN 201611010713A CN 106649577 B CN106649577 B CN 106649577B
Authority
CN
China
Prior art keywords
copying process
copy
time
threshold value
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611010713.1A
Other languages
English (en)
Other versions
CN106649577A (zh
Inventor
张冬逸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Wo Qu Polytron Technologies Inc
Original Assignee
Hangzhou Wo Qu Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Wo Qu Polytron Technologies Inc filed Critical Hangzhou Wo Qu Polytron Technologies Inc
Priority to CN201611010713.1A priority Critical patent/CN106649577B/zh
Publication of CN106649577A publication Critical patent/CN106649577A/zh
Application granted granted Critical
Publication of CN106649577B publication Critical patent/CN106649577B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3419Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Abstract

本发明涉及计算机领域,公开了一种检测Oracle数据库同步软件运行状态的方法,包括如下步骤:(1)添加监控链路,查看目标端进程,通过DDS软件获取复制进程及其信息;(2)通过日志分析文件对步骤(1)中获取的日志文件进行分析,得到复制进程信息;(3)对复制进程进行是否正常工作进行判断,如复制进程正常工作,将复制进程反应时间与用户自定义阀值进行比较并且反馈结果;(4)将步骤(3)反馈的结果插入到本地数据库中。本发明在Linux系统中,用户可以在页面直接观察DDS链路的状态以及延迟时间,动态的发现所有正在工作的复制链路以及延迟时间是多少,当复制链路出现故障或延迟很大时,可以通过配置的阈值进行告警。

Description

一种检测Oracle数据库同步软件运行状态的方法
技术领域
本发明涉及计算机技术领域,尤其涉及了一种检测Oracle数据库同步软件运行状态的方法。
背景技术
ORACLE数据库系统是美国ORACLE公司(甲骨文)提供的以分布式数据库为核心的一组软件产品,是目前最流行的客户/服务器(CLIENT/SERVER)或B/S体系结构的数据库之一。比如SilverStream就是基于数据库的一种中间件。ORACLE数据库是目前世界上使用最为广泛的数据库管理系统,作为一个通用的数据库系统,它具有完整的数据管理功能;作为一个关系数据库,它是一个完备关系的产品;作为分布式数据库它实现了分布式处理功能。但它的所有知识,只要在一种机型上学习了ORACLE知识,就可以在各种类型的机器上使用它。
市场上有一款软件——DDS可以对Oracle等数据库进行备份,保障数据安全。该软件通过配置多个复制数据的链路对数据库的数据进行备份,但是该链路的状态以及复制数据的延迟无法保证。不能对链路的存活状态以及延迟时间进行监控,无法保障该链路的正常运行,同时也无法保障数据安全。
发明内容
本发明针对现有技术中链路无法正常运行、数据不安全的缺点,提供了一种检测Oracle数据库同步软件运行状态的方法。
为了解决上述技术问题,本发明通过下述技术方案得以解决。
一种检测Oracle数据库同步软件运行状态的方法,包括如下步骤:
(1)添加监控链路在数据主库和数据备库之间,查看目标端进程,使用DDS软件内的信息采集工具进行获取目标端复制进程和复制进程数量,复制进程用于对数据主库的日志文件进行接收;
(2)通过日志分析文件对步骤(1)中获取的日志文件进行分析,得到复制进程信息,复制进程信息包括复制进程开始的时间和与数据主库之间的延时;
(3)利用date命令获取系统当前时间,与步骤(2)获得的复制进程开始时间进行比较,并且获得一个差值,将差值与系统阀值进行比较,判断复制进程进行是否正常工作;如大于系统阀值,则对该复制进程进行报警,判定并显示复制进程未正常工作;如小于系统阀值,则获取复制进程的延时时间并和用户自定义阀值比较,如小于自定义阀值,则显示复制进程备份正常;如大于自定义阀值,则报警该复制进程,显示延迟m秒;
(4)根据步骤(3)反馈的结果,通过插入语句将结果插入到本地的数据库中。
作为优选,复制进程为将主库上的重做日志复制到本地并应用。
作为优选,步骤(3)中,m为PUT与数据主库之间延时和用户自定义阀值的差值。
作为优选,步骤(4)中,数据库中的数据在页面上以图表的形式表现。
本发明由于采用了以上技术方案,具有显著的技术效果:本发明在Linux系统中,通过这些最简单、高效的方法对DDS复制链路产生的日志进行实时监控,简单、有效、有针对性。用户可以在页面直接观察DDS链路的状态以及延迟时间,动态的发现所有正在工作的复制链路以及延迟时间是多少。同时该方法也支持同时对多套DDS链路进行监控,当复制链路出现故障或延迟很大时,可以通过配置的阈值进行告警,通过短信和邮件等多种方式将告警信息通知给管理员,及时处理故障。
附图说明
图1是本发明一种检测Oracle数据库同步软件运行状态的方法的流程示意图。
具体实施方式
下面结合附图与实施例对本发明作进一步详细描述。
实施例1
如图1所示,一种检测Oracle数据库同步软件运行状态的方法,包括如下步骤:
(1)添加监控链路在数据主库和数据备库之间,查看目标端进程,使用DDS软件内的信息采集工具进行获取目标端复制进程和复制进程数量,复制进程用于对数据主库的日志文件进行接收;
(2)通过日志分析文件对步骤(1)中获取的日志文件进行分析,得到复制进程信息,复制进程为将主库上的重做日志复制到本地并应用,复制进程信息包括复制进程开始的时间和与数据主库之间的延时,复制进程信息还包括复制进程数;
(3)利用date命令获取系统当前时间,与步骤(2)获得的复制进程开始时间进行比较,并且获得一个差值,将差值与系统阀值进行比较,判断复制进程进行是否正常工作;如大于系统阀值,则对该复制进程进行报警,判定并显示复制进程未正常工作;如小于系统阀值,则获取复制进程的延时时间并和用户自定义阀值比较,如小于自定义阀值,则显示复制进程备份正常;如大于自定义阀值,则报警该复制进程,显示延迟m秒,m为PUT与数据主库之间延时和用户自定义阀值的差值;
(4)根据步骤(3)反馈的结果,通过插入语句将结果插入到本地的数据库中,在页面上以图表的形式表现。
在监控任一台服务器上的DDS链路前,先要对该数据库配置相应的信息,通过insert into q_group_info和insert into q_group_component插入语句,将电脑的信息插入到数据库内并且生成数据表,数据表对该电脑的监控链路信息进行收集。在添加监控链路,使数据主库和数据备库建立连接,在查看目标端进程时候,利用$DDS_HOME/bin/vshmt获取目标端复制进程信息。调用$DDS_DATE/msg.log日志分析文件,对已经启动的复制进程的信息进行获取,包括进程的开始时间和主数据库和备数据库之间的延时,根据开始时间和系统当前时间的差值和系统阀值进行比较,系统阀值为正常启动所需要的时间,一般设置为5分钟,进行判定是否正常启动,并且进行相应的反馈机制。同时,在使用的过程中,用户可以自行设置一个自定义的阀值,来对正常启动的复制进程的反应时间进行一个比较和反馈,直观地观察到该进程是否是正常运行或延迟运行,具有良好的检查作用。
利用系统中的工具$DDS_HOME/bin/vshmt,采集到PUT00~04五个应用进程的信息,再对$DDS_DATE/msg.log进行分析,包括进程状态是否正常,以及延时时间是多少,同时通过insert into q_dds_stat插入语句,将这些信息插入到生成的数据表内,并且不断的接收信息,通过曲线图反应延时变化趋势,实时反应进程信息。
本发明在Linux系统中,通过这些最简单、高效的方法对DDS复制链路产生的日志进行实时监控,简单、有效、有针对性。用户可以在页面直接观察DDS链路的状态以及延迟时间,动态的发现所有正在工作的复制链路以及延迟时间是多少。同时该方法也支持同时对多套DDS链路进行监控,当复制链路出现故障或延迟很大时,可以通过配置的阈值进行告警,可通过短信和邮件等多种方式将告警信息通知给管理员,及时处理故障。
总之,以上所述仅为本发明的较佳实施例,凡依本发明申请专利范围所作的均等变化与修饰,皆应属本发明专利的涵盖范围。

Claims (4)

1.一种检测Oracle数据库同步软件运行状态的方法,其特征在于,包括如下步骤:
(1)添加监控链路在数据主库和数据备库之间,查看目标端进程,使用DDS软件内的信息采集工具进行获取目标端复制进程和复制进程数量,复制进程用于对数据主库的日志文件进行接收;
(2)通过日志分析文件对步骤(1)中获取的日志文件进行分析,得到复制进程信息,复制进程信息包括复制进程开始的时间和与数据主库之间的延时;
(3)利用date命令获取系统当前时间,与步骤(2)获得的复制进程开始时间进行比较,并且获得一个差值,将差值与系统阀值进行比较,判断复制进程进行是否正常工作;如大于系统阀值,则对该复制进程进行报警,判定并显示复制进程未正常工作;如小于系统阀值,则获取复制进程的延时时间并和用户自定义阀值比较,如小于自定义阀值,则显示复制进程备份正常;如大于自定义阀值,则报警该复制进程,显示延迟m秒;
(4)根据步骤(3)反馈的结果,通过插入语句将结果插入到本地的数据库中。
2.根据权利要求1所述的一种检测Oracle数据库同步软件运行状态的方法,其特征在于:复制进程为将主库上的重做日志复制到本地并应用。
3.根据权利要求1所述的一种检测Oracle数据库同步软件运行状态的方法,其特征在于:步骤(3)中,m为PUT与数据主库之间延时和用户自定义阀值的差值。
4.根据权利要求1所述的一种检测Oracle数据库同步软件运行状态的方法,其特征在于:步骤(4)中,数据库中的数据在页面上以图表的形式表现。
CN201611010713.1A 2016-11-17 2016-11-17 一种检测Oracle数据库同步软件运行状态的方法 Active CN106649577B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611010713.1A CN106649577B (zh) 2016-11-17 2016-11-17 一种检测Oracle数据库同步软件运行状态的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611010713.1A CN106649577B (zh) 2016-11-17 2016-11-17 一种检测Oracle数据库同步软件运行状态的方法

Publications (2)

Publication Number Publication Date
CN106649577A CN106649577A (zh) 2017-05-10
CN106649577B true CN106649577B (zh) 2020-02-07

Family

ID=58807163

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611010713.1A Active CN106649577B (zh) 2016-11-17 2016-11-17 一种检测Oracle数据库同步软件运行状态的方法

Country Status (1)

Country Link
CN (1) CN106649577B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107957933B (zh) * 2017-12-05 2021-11-16 泰康保险集团股份有限公司 数据复制的监控方法及装置
CN109684410B (zh) * 2018-12-24 2021-06-15 浙江大华技术股份有限公司 一种确定主从数据库同步时延的系统、方法及储存介质
CN110188018B (zh) * 2019-05-29 2023-06-09 广州伟宏智能科技有限公司 一种数据同步复制软件运维监控系统
CN113051278B (zh) * 2019-12-27 2023-04-07 中国移动通信集团湖北有限公司 一种数据复制进程延时的处理方法和系统
CN112202635B (zh) * 2020-09-27 2022-05-06 浙江三维利普维网络有限公司 链路的监控方法、装置、存储介质以及电子装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7359926B1 (en) * 2003-02-13 2008-04-15 Stampede, Technologies, Inc. System for optimization of database replication/synchronization
CN102722434A (zh) * 2012-05-24 2012-10-10 兰雨晴 一种针对Linux进程调度的性能测试方法和工具
CN102945195A (zh) * 2012-11-26 2013-02-27 国电南瑞科技股份有限公司 一种基于SQLite数据库的主备冗余复制方法
CN103383689A (zh) * 2012-05-03 2013-11-06 阿里巴巴集团控股有限公司 一种服务进程故障检测方法、装置及服务节点
CN103810076A (zh) * 2012-11-15 2014-05-21 国家电网公司 数据复制的监控方法及装置
CN103870747A (zh) * 2014-03-31 2014-06-18 可牛网络技术(北京)有限公司 一种应用程序的监控及处理方法及装置
CN104346454A (zh) * 2014-10-30 2015-02-11 上海新炬网络技术有限公司 基于Oracle数据库的数据一致性校验方法
CN104503891A (zh) * 2014-12-10 2015-04-08 北京京东尚科信息技术有限公司 对jvm线程进行在线监控的方法和装置
CN105068886A (zh) * 2015-07-30 2015-11-18 上海新炬网络信息技术有限公司 基于GoldenGate的灾备智能切控制方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0504810D0 (en) * 2005-03-09 2005-04-13 Ibm Commitment chains for conflict resolution between disconnected data sharing applications

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7359926B1 (en) * 2003-02-13 2008-04-15 Stampede, Technologies, Inc. System for optimization of database replication/synchronization
CN103383689A (zh) * 2012-05-03 2013-11-06 阿里巴巴集团控股有限公司 一种服务进程故障检测方法、装置及服务节点
CN102722434A (zh) * 2012-05-24 2012-10-10 兰雨晴 一种针对Linux进程调度的性能测试方法和工具
CN103810076A (zh) * 2012-11-15 2014-05-21 国家电网公司 数据复制的监控方法及装置
CN102945195A (zh) * 2012-11-26 2013-02-27 国电南瑞科技股份有限公司 一种基于SQLite数据库的主备冗余复制方法
CN103870747A (zh) * 2014-03-31 2014-06-18 可牛网络技术(北京)有限公司 一种应用程序的监控及处理方法及装置
CN104346454A (zh) * 2014-10-30 2015-02-11 上海新炬网络技术有限公司 基于Oracle数据库的数据一致性校验方法
CN104503891A (zh) * 2014-12-10 2015-04-08 北京京东尚科信息技术有限公司 对jvm线程进行在线监控的方法和装置
CN105068886A (zh) * 2015-07-30 2015-11-18 上海新炬网络信息技术有限公司 基于GoldenGate的灾备智能切控制方法

Also Published As

Publication number Publication date
CN106649577A (zh) 2017-05-10

Similar Documents

Publication Publication Date Title
CN106649577B (zh) 一种检测Oracle数据库同步软件运行状态的方法
CN108763038B (zh) 告警数据的管理方法、装置、计算机设备及存储介质
US9940373B2 (en) Method and system for implementing an operating system hook in a log analytics system
CN104346454B (zh) 基于Oracle数据库的数据一致性校验方法
CN109614283B (zh) 分布式数据库集群的监控系统
US8627146B2 (en) Model-based testing of an application program under test
US10452515B2 (en) Automated root cause detection using data flow analysis
CN105843707A (zh) 数据库快速恢复方法及设备
CN107357731A (zh) 进程产生core dump问题的监控、分析和处理方法
CN112506702A (zh) 数据中心容灾方法、装置、设备及存储介质
CN112529223A (zh) 一种设备故障报修方法、装置、服务器及储存介质
WO2019074687A1 (en) METHOD FOR COPYING PRODUCTION BEHAVIORS IN A DEVELOPMENT ENVIRONMENT
CN107957933B (zh) 数据复制的监控方法及装置
CN111026794A (zh) 一种基于数据源的数据管理方法、装置、设备及介质
CN108241545B (zh) 系统故障的调试方法及装置
US9977726B2 (en) System and method for smart framework for network backup software debugging
JP2005099967A (ja) 予防保守方法
CN112256532A (zh) 测试界面生成方法、装置、计算机设备及可读存储介质
KR20150124653A (ko) 프로세스 검증 기능이 구비된 전력 계통 감시 및 제어 시스템
CN111897877B (zh) 基于分布式思想的高性能高可靠数据共享系统及方法
US20210173750A1 (en) Methods to automatically correct and improve system recovery and replication processes
CN112787839B (zh) 端口描述的修改方法及装置
CN113467994B (zh) 一种数据备份方法、系统及电子设备、存储介质
CN111177116B (zh) 一种数据库智能管理平台及其管理方法
CN115794574A (zh) 多种平台参数比对的方法、系统、终端设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant